三星先進技術研究院(Samsung Advanced Institute of Technology;SAIT)日前推出機器視覺平臺“動態(tài)視覺傳感器”(Dynamic Vision Sensor;DVS),其中采用IBM用來模擬大腦的TrueNorth處理器,可讓鏡頭更新率達到2,000fps,卻只耗電300毫瓦。三星也指出,該平臺高速優(yōu)點適合運用在自駕車安全系統(tǒng)與細致手勢識別的3D繪圖上。
據(jù)Rethink Wireless與CNET報導,TrueNorth采用三星28納米制程,其54億顆電晶體可驅動4,096顆核心,全體來看作用如同大腦神經元,彼此傳送簡訊來處理數(shù)據(jù),而這種仿神經型態(tài)運算(Neuromorphic Computing)設計也與執(zhí)行軟體的傳統(tǒng)芯片不同,可在低耗電情況下處理大量數(shù)據(jù)。
三星副總Eric Ryu指出,該機器視覺平臺處理影像有別于傳統(tǒng)數(shù)位相機,每一個畫素單獨運作,只有發(fā)現(xiàn)有改變時才會堆疊。因此,其鏡頭能以驚人2,000fps更新率追蹤眼前物體,相較一般數(shù)位相機則為120fps。
該機構也指出,DVS機器視覺平臺高速優(yōu)點適合3D繪圖應用上,例如汽車安全系統(tǒng)與細致手勢識別。
評論指出,該領域也是英特爾(Intel)RealSense技術積極探索的地方,前者并已運用在筆電(NB)識別手勢上,因此,三星自然也會在自家消費性電子產品與手機引進該功能。
在展示中,三星示范如何利用該系統(tǒng)以手勢控制電視,其鏡頭在3公尺內可識別手部晃動、手指晃動、捏手指與握拳。
評論指出,雖然在識別成就上并非杰出,但其低耗電的表現(xiàn)卻驚人,僅需1%標準筆電或10%智能型手機所需電量,操作時僅產生極低的熱。
三星也認為此舉將有助于日后該公司以叢集方式將芯片更緊密組合,有別于傳統(tǒng)ARM或x86架構在芯片增加核心或增加芯片數(shù)量方式來提升效能。另外,IBM目前已組合成16芯片套件,大約接近人腦860億顆神經元規(guī)模。
TrueNorth芯片目前也部署在美國勞倫斯利福摩爾國家實驗室(Lawrence Livermore National Laboratory;LLNL)評估核武安全計劃內,透過該芯片可望取代地下測試的必要。該實驗室也成功測試利用TrueNorth在空拍影片中雜亂環(huán)境偵測出車輛位置。
美國空軍研究實驗室(Air Force Research Laboratory)也在研究在影片分析采用TrueNorth來偵測異常與網路入侵與識別文字,甚至讓無人飛行載具(UAV)可自動作出飛行判定。
其工程師Qing Wu表示,美國空軍目前已開發(fā)結合傳統(tǒng)電腦與TrueNorth系統(tǒng)的控制系統(tǒng),類似人類左右半腦,其左腦擅長程序處理與數(shù)學,右腦則專攻推論與理解情況。