[導(dǎo)讀]視線跟蹤技術(shù),和EyeTech Digital Systems公司的眼動儀類似,其看似簡單:即找出視線的聚焦點(diǎn)但很復(fù)雜。自1901年這項(xiàng)技術(shù)發(fā)明以來有有百年歷史,近二十年來,EyeTech一直處于該領(lǐng)
視線跟蹤技術(shù),和EyeTech Digital Systems公司的眼動儀類似,其看似簡單:即找出視線的聚焦點(diǎn)但很復(fù)雜。自1901年這項(xiàng)技術(shù)發(fā)明以來有有百年歷史,近二十年來,EyeTech一直處于該領(lǐng)域最前沿。下面是EyeTech的視線跟蹤流程:
最初,EyeTech使用商業(yè)模擬攝像機(jī)和電腦,創(chuàng)建一個(gè)“窗口鼠標(biāo)”,來控制眼睛定位。EyeTech眼球追蹤技術(shù)從瞳孔位置確定視線方向,從人類角膜確定850納米紅外光線。這項(xiàng)技術(shù)最初是為殘疾用戶發(fā)明的,幫助他們更充分地與外界交流。包括由ALS,腦癱,肌肉萎縮癥、脊髓損傷、創(chuàng)傷性腦損傷,和中風(fēng)引起的殘疾病人。因?yàn)槟抗庾粉櫠ㄎ豢萍?,受到這些疾病干擾的人的生活有了質(zhì)的飛躍。EyeTech網(wǎng)上有一系列推薦視頻。
然而輔助技術(shù)市場的規(guī)模相對較小,EyeTech的創(chuàng)始人羅伯特•沙普意識到:如果能降低實(shí)施成本,規(guī)模,和能耗,這項(xiàng)技術(shù)可能有更龐大的潛在用戶群。下面是沙普的目標(biāo):
•獨(dú)立操作(不需要電腦的)
•“緊湊型”大小
•低功率(< 5 w)
•成本低(< 200美元)
•優(yōu)越的目光追蹤定位能力
•多操作系統(tǒng)支持
•現(xiàn)場升級
•合理的開發(fā)時(shí)間和成本
對于典型的嵌入式系統(tǒng),這些都不算困難。但當(dāng)算法需要用電腦進(jìn)行負(fù)載處理時(shí),這些目標(biāo)就存在設(shè)計(jì)上的重大挑戰(zhàn)。毫無疑問,如果能找到一個(gè)有足夠的處理功率的設(shè)備,沙普和他的團(tuán)隊(duì)就會使用單片機(jī)。面對現(xiàn)有的x86處理器PC級別代碼,顯然上述設(shè)想不易實(shí)現(xiàn)。
沙普了解到Xilinx Zynq SoC是合適的設(shè)備項(xiàng)目。Zynq SoC芯片上,雙核ARM cortex - a9 MPCore處理器可以運(yùn)行現(xiàn)有的基于電腦的代碼,重新編譯并提供一個(gè)可操作的系統(tǒng)。然后,為加速代碼的各個(gè)部分,沙普的團(tuán)隊(duì)工作績效最差任務(wù)的交給Zynq SoC芯片上的PL(可編程邏輯)。移植代碼花了兩年時(shí)間,工程師團(tuán)隊(duì)從兩人到四人,他們利用兼職時(shí)間研究項(xiàng)目。
最終,可以跟蹤的項(xiàng)目能使產(chǎn)品凝視幀速率從40上升到到200 +幀/秒。許多視線跟蹤應(yīng)用程序可以適應(yīng)較慢的幀速率,但某些應(yīng)用程序(如測試腦損傷)需要較快的幀速率和一個(gè)精確的結(jié)果。
這是AEye的印刷電路板
這是一個(gè)相當(dāng)小的電路板! Zynq Z-7020 SoC寬度17毫米,電路板僅略高于Zynq SoC套裝軟件。注意上圖右邊美國硬幣,可以進(jìn)行尺寸估計(jì)。這里有一個(gè)AEye板的硬件框圖:
這是EyeTech如何給Zynq SoC的處理系統(tǒng)和可編程邏輯分配任務(wù):
沙普指出,由于硬件和軟件的劃分不絕對,Zynq SoC中高性能處理系統(tǒng)和可編程邏輯的實(shí)用性有助于創(chuàng)造理想的快速開發(fā)環(huán)境。設(shè)計(jì)團(tuán)隊(duì)要想實(shí)現(xiàn)比200 fps幀速率更高標(biāo)準(zhǔn),就必須將任務(wù)從處理系統(tǒng)移動到可編程邏輯。
視線跟蹤技術(shù)如何成為主流?每輛車的視線跟蹤系統(tǒng)幫助對抗司機(jī)疲勞;通過化學(xué)誘導(dǎo)使注意力集中,幫助人們減少分散在手機(jī)、平板電腦上的注意力。如果證明有效,保險(xiǎn)公司可能立刻會游說新車主安裝跟蹤系統(tǒng)。這是科幻小說里才出現(xiàn)的場景嗎?看看這個(gè)Mesa, AZ電視新聞?lì)l道3的視頻。
(注意:這個(gè)博客是一個(gè)總結(jié)報(bào)告。在圣克拉拉舉行的2015嵌入式視覺峰會上,Xilinx的羅伯特•沙普和丹•艾薩克斯做了如上的總結(jié)報(bào)告。)
本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時(shí)聯(lián)系本站刪除。
9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。
關(guān)鍵字:
阿維塔
塞力斯
華為
加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...
關(guān)鍵字:
AWS
AN
BSP
數(shù)字化
倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時(shí)1.5...
關(guān)鍵字:
汽車
人工智能
智能驅(qū)動
BSP
北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...
關(guān)鍵字:
亞馬遜
解密
控制平面
BSP
8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。
關(guān)鍵字:
騰訊
編碼器
CPU
8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。
關(guān)鍵字:
華為
12nm
EDA
半導(dǎo)體
8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。
關(guān)鍵字:
華為
12nm
手機(jī)
衛(wèi)星通信
要點(diǎn): 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競爭優(yōu)勢...
關(guān)鍵字:
通信
BSP
電信運(yùn)營商
數(shù)字經(jīng)濟(jì)
北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學(xué)會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...
關(guān)鍵字:
VI
傳輸協(xié)議
音頻
BSP
北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團(tuán))股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...
關(guān)鍵字:
BSP
信息技術(shù)
山海路引?嵐悅新程 三亞2024年8月27日 /美通社/ --?近日,海南地區(qū)六家凱悅系酒店與中國高端新能源車企嵐圖汽車(VOYAH)正式達(dá)成戰(zhàn)略合作協(xié)議。這一合作標(biāo)志著兩大品牌在高端出行體驗(yàn)和環(huán)保理念上的深度融合,將...
關(guān)鍵字:
新能源
BSP
PLAYER
ASIA
上海2024年8月28日 /美通社/ -- 8月26日至8月28日,AHN LAN安嵐與股神巴菲特的孫女妮可?巴菲特共同開啟了一場自然和藝術(shù)的療愈之旅。 妮可·巴菲特在療愈之旅活動現(xiàn)場合影 ...
關(guān)鍵字:
MIDDOT
BSP
LAN
SPI
8月29日消息,近日,華為董事、質(zhì)量流程IT總裁陶景文在中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式上表示,中國科技企業(yè)不應(yīng)怕美國對其封鎖。
關(guān)鍵字:
華為
12nm
EDA
半導(dǎo)體
上海2024年8月26日 /美通社/ -- 近日,全球領(lǐng)先的消費(fèi)者研究與零售監(jiān)測公司尼爾森IQ(NielsenIQ)迎來進(jìn)入中國市場四十周年的重要里程碑,正式翻開在華發(fā)展新篇章。自改革開放以來,中國市場不斷展現(xiàn)出前所未有...
關(guān)鍵字:
BSP
NI
SE
TRACE
上海2024年8月26日 /美通社/ -- 第二十二屆跨盈年度B2B營銷高管峰會(CC2025)將于2025年1月15-17日在上海舉辦,本次峰會早鳥票注冊通道開啟,截止時(shí)間10月11日。 了解更多會議信息:cc.co...
關(guān)鍵字:
BSP
COM
AI
INDEX
上海2024年8月26日 /美通社/ -- 今日,高端全合成潤滑油品牌美孚1號攜手品牌體驗(yàn)官周冠宇,開啟全新旅程,助力廣大車主通過駕駛?cè)ヌ剿鞲鼜V闊的世界。在全新發(fā)布的品牌視頻中,周冠宇及不同背景的消費(fèi)者表達(dá)了對駕駛的熱愛...
關(guān)鍵字:
BSP
汽車制造
此次發(fā)布標(biāo)志著Cision首次為亞太市場量身定制全方位的媒體監(jiān)測服務(wù)。 芝加哥2024年8月27日 /美通社/ -- 消費(fèi)者和媒體情報(bào)、互動及傳播解決方案的全球領(lǐng)導(dǎo)者Cis...
關(guān)鍵字:
CIS
IO
SI
BSP
上海2024年8月27日 /美通社/ -- 近來,具有強(qiáng)大學(xué)習(xí)、理解和多模態(tài)處理能力的大模型迅猛發(fā)展,正在給人類的生產(chǎn)、生活帶來革命性的變化。在這一變革浪潮中,物聯(lián)網(wǎng)成為了大模型技術(shù)發(fā)揮作用的重要陣地。 作為全球領(lǐng)先的...
關(guān)鍵字:
模型
移遠(yuǎn)通信
BSP
高通
北京2024年8月27日 /美通社/ -- 高途教育科技公司(紐約證券交易所股票代碼:GOTU)("高途"或"公司"),一家技術(shù)驅(qū)動的在線直播大班培訓(xùn)機(jī)構(gòu),今日發(fā)布截至2024年6月30日第二季度未經(jīng)審計(jì)財(cái)務(wù)報(bào)告。 2...
關(guān)鍵字:
BSP
電話會議
COM
TE
8月26日消息,華為公司最近正式啟動了“華為AI百校計(jì)劃”,向國內(nèi)高校提供基于昇騰云服務(wù)的AI計(jì)算資源。
關(guān)鍵字:
華為
12nm
EDA
半導(dǎo)體