肇觀電子Feynman 3D+AI智能深度相機(jī)助力618
(全球TMT2022年6月7日訊)所有機(jī)器人618的新品和去年雙11最大的區(qū)別之一就是將機(jī)器人里的視覺系統(tǒng)升級為了3D+AI避障,而各家強(qiáng)調(diào)的也是這方面性能。肇觀電子自主研發(fā)的智能深度相機(jī)Feynman先進(jìn)的3D+AI技術(shù)成為了移動機(jī)器人們的核心賣點(diǎn)。
相機(jī)整機(jī)具有深度圖精度高、幀率高、AI算力強(qiáng)、ISP成像質(zhì)量好、集成度高、功耗低、體積小等諸多優(yōu)點(diǎn)。主控芯片內(nèi)嵌幾何和深度引擎DEP,AI加速引擎NPU與視覺加速引擎DSP,采用主動雙目視覺技術(shù),在室內(nèi)外各種場景,都能生成高幀率和高精度的深度圖,支持端側(cè)實(shí)時智能AI算法的部署。同時還提供SDK,賦能客戶部署差異化算法,支持客戶深度定制,以滿足各種智能設(shè)備定位、避障和智能分析等需求。
Feynman相機(jī)搭載了散斑結(jié)構(gòu)光、雙目紅外攝像頭IR模組、彩色攝像頭RGB全局曝光模組以及慣性測量單元 (IMU)。這些豐富的傳感器組合提供了多維度的信息,使得Feynman相機(jī)能夠幫助機(jī)器人構(gòu)建強(qiáng)大的環(huán)境感知和理解能力。
由于Feynman相機(jī)自帶1.2Tops INT8 / 0.6Tops FP16 NPU(Neural Processing Unit)和666 DMIPS DSP(Digital Signal Processor)視覺加速算力,因此,在產(chǎn)生深度圖的同時可以基于RGB圖像或者深度圖完成物體識別、檢測和智能分析等功能。
深度距離的精確程度取決于深度圖的精度。Feynman相機(jī)具有強(qiáng)大的深度視覺處理能力,它無需其他處理器,就可以產(chǎn)生性能高達(dá)720P 30FPS的深度圖,且具有極低的空洞率。實(shí)測數(shù)據(jù)表明,F(xiàn)eynman空洞率為0.2%。Feynman的深度圖具有90度對角的廣角視場,可以幫助智能設(shè)備看得更廣,實(shí)現(xiàn)更好的避障和路徑規(guī)劃。下圖可以看出,F(xiàn)eynman所看到的場景比常規(guī)深度相機(jī)看到的視野更寬廣。
Feynman 3D+AI深度相機(jī)的競爭優(yōu)勢,尤其在智能方面的亮點(diǎn)更加突出。相機(jī)的結(jié)構(gòu)非常緊湊,尺寸為89.8mm x 25mm x 30.8mm,和市面主流深度相機(jī)的大小兼容。
Feynman相機(jī)不僅適用于室內(nèi),場景復(fù)雜的室外仍然適用,比方說在小區(qū)內(nèi)完成最后一公里貨物配送。在陽光下也可以獲得好的深度圖。市面上常見的深度相機(jī),其主動光在太陽光下容易受到干擾,從而無法獲得良好的深度圖。Feynman相機(jī)采用獨(dú)特的光學(xué)設(shè)計(jì),在室外陽光下應(yīng)用時,能在降低太陽光干擾的同時,保持信噪比,從而保證深度圖的準(zhǔn)確性和完整性。
除了在機(jī)器人領(lǐng)域的廣泛應(yīng)用,F(xiàn)eynman相機(jī)也在工業(yè)場景有諸多應(yīng)用,針對工業(yè)場景,F(xiàn)eynman提供了具有千兆以太網(wǎng),電源和控制信號航插的擴(kuò)展款。