當(dāng)前位置:首頁 > 公眾號(hào)精選 > 大魚機(jī)器人
[導(dǎo)讀]引言 本教程連載一輛能夠用 ROS 控制的帶攝像頭的小車,用 ROS 發(fā)布圖像數(shù)據(jù),對(duì)獲取到的圖像進(jìn)行處理,例如目標(biāo)檢測(cè) 。這里主要介紹如何把本教程后面的的內(nèi)容匯聚起來,實(shí)現(xiàn)一個(gè)能目標(biāo)檢測(cè)的小車。 先歸納一下之后文檔的內(nèi)容: 獲取本項(xiàng)目完整教程代碼及文檔


引言


本教程連載一輛能夠用 ROS 控制的帶攝像頭的小車,用 ROS 發(fā)布圖像數(shù)據(jù),對(duì)獲取到的圖像進(jìn)行處理,例如目標(biāo)檢測(cè) 。這里主要介紹如何把本教程后面的的內(nèi)容匯聚起來,實(shí)現(xiàn)一個(gè)能目標(biāo)檢測(cè)的小車。
先歸納一下之后文檔的內(nèi)容:


獲取本項(xiàng)目完整教程代碼及文檔請(qǐng)關(guān)注下方二維碼

并在公眾號(hào)后臺(tái)回復(fù)數(shù)字“4"


這篇文檔幾乎涉及了上面所有文檔的內(nèi)容是一個(gè)綜合應(yīng)用,大家可以根據(jù)之后的連載一步一步學(xué)起來。如果對(duì)上面的內(nèi)容比較熟悉了,就會(huì)發(fā)現(xiàn)這篇文檔很簡(jiǎn)短,但是卻是建立在之前已有的基礎(chǔ)上。

現(xiàn)在應(yīng)當(dāng)已經(jīng)熟悉的內(nèi)容:

  • 了解 CNN 的工作原理;

  • 能使用 Darknet 訓(xùn)練自己的目標(biāo)檢測(cè)模型

  • 能用 rosserial 建立 RT-Thread 和 ROS 的連接

  • 能用 ROS 發(fā)布圖像信息


下面就會(huì)介紹如何用 ROS 發(fā)布的圖像信息和 Darknet 連接做目標(biāo)檢測(cè)。

1.Darknet ROS


1.1 獲取源碼

其實(shí)下面要用到的是一個(gè) ROS 軟件包,這個(gè)軟件包現(xiàn)在也是開源的:
1# 初始化工作環(huán)境
2$ mkdir catkin_workspace
3$ cd catkin_workspace/src
4$ catkin_init_workspace
5
6## 下載源碼
7$ git clone --recursive http://github.com/leggedrobotics/darknet_ros.git

除了源碼,我們還要下載一些訓(xùn)練好的神經(jīng)網(wǎng)絡(luò)權(quán)值,放在下面這個(gè)目錄:

1$ catkin_workspace/src/darknet_ros/darknet_ros/yolo_network_config/weights/


如果覺得國外下載速度太慢的話,這里我有個(gè)國內(nèi)的 CDN 加速鏡像:
  • yolov2-tiny.weightshttps://wuhanshare-1252843818.cos.ap-guangzhou.myqcloud.com/yolov2-tiny.weights

  • yolov2.weightshttps://wuhanshare-1252843818.cos.ap-guangzhou.myqcloud.com/yolov2.weights

  • yolov3.weightshttps://wuhanshare-1252843818.cos.ap-guangzhou.myqcloud.com/yolov3.weights

如果源碼和權(quán)值都下載好了,我們就可以準(zhǔn)備編譯了。

1.2 編譯源碼


為了保證 Darknet 能夠獲取到攝像頭的數(shù)據(jù),我們需要先告訴它攝像頭的信息發(fā)布在哪里,修改這個(gè)文件:

1$ catkin_workspace/src/darknet_ros/darknet_ros/config/ros.yaml

把下面的 topic 修改為自己圖像發(fā)布的位置,例如我這里發(fā)布在 /usb_cam/image_raw
1camera_reading:
2    topic: /usb_cam/image_raw
3    queue_size: 1

然后就可以編譯軟件包了,在 catkin_workspace 目錄下:

1$ catkin_make


一切正常的話,編譯就完成了,其實(shí)不需要做太多的工作,編譯完記得更新一下環(huán)境變量,這樣后面才能正常啟動(dòng)這個(gè)軟件包。
1$ sorce devel/setup.bash

1.3 目標(biāo)檢測(cè)


在進(jìn)行目標(biāo)檢測(cè)前,我們先啟動(dòng) ROS 節(jié)點(diǎn):
1$ roscore

然后啟動(dòng)一個(gè)攝像頭節(jié)點(diǎn):

1roslaunch usb_cam usb_cam-test.launch


這樣就可以實(shí)時(shí)看到攝像頭的數(shù)據(jù)了,攝像頭在哪里其實(shí)不重要,既可以在小車上,也可以在電腦上,這也是 ROS 的優(yōu)美之處,只要節(jié)點(diǎn)發(fā)布了攝像頭消息,不管攝像頭在哪, ROS 都能拿到處理:

接下來我們啟動(dòng) Darknet 的節(jié)點(diǎn):

1$ roslaunch darknet_ros darknet_ros.launch


下面這張圖就可以看到有兩個(gè)視頻流,左邊的是沒有處理的實(shí)時(shí)圖像,右邊是運(yùn)行了目標(biāo)檢測(cè)的結(jié)果:

2.總結(jié)


RT-Thread 作為實(shí)時(shí)操作系統(tǒng)負(fù)責(zé)控制,Linux 則負(fù)責(zé)提供豐富的軟件包運(yùn)行算法,兩者相結(jié)合,互相取長(zhǎng)補(bǔ)短還是配合地挺好的。

3.參考文獻(xiàn)


Darknet ROS: https://github.com/leggedrobotics/darknet_ros


獲取本項(xiàng)目完整教程代碼及文檔請(qǐng)關(guān)注下方二維碼

并在公眾號(hào)后臺(tái)回復(fù)數(shù)字“4"






RT-Thread


讓物聯(lián)網(wǎng)終端的開發(fā)變得簡(jiǎn)單、快速,芯片的價(jià)值得到最大化發(fā)揮。Apache2.0協(xié)議,可免費(fèi)在商業(yè)產(chǎn)品中使用,不需要公布源碼,無潛在商業(yè)風(fēng)險(xiǎn)。





長(zhǎng)按二維碼,關(guān)注我們


點(diǎn)擊“閱讀原文”進(jìn)入RT-Thread GitHub

免責(zé)聲明:本文內(nèi)容由21ic獲得授權(quán)后發(fā)布,版權(quán)歸原作者所有,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。文章僅代表作者個(gè)人觀點(diǎn),不代表本平臺(tái)立場(chǎng),如有問題,請(qǐng)聯(lián)系我們,謝謝!

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時(shí)1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動(dòng) BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對(duì)日本游戲市場(chǎng)的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對(duì)環(huán)境變化,經(jīng)營業(yè)績(jī)穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤(rùn)率延續(xù)升勢(shì) 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長(zhǎng) 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競(jìng)爭(zhēng)力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競(jìng)爭(zhēng)優(yōu)勢(shì)...

關(guān)鍵字: 通信 BSP 電信運(yùn)營商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺(tái)與中國電影電視技術(shù)學(xué)會(huì)聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會(huì)上宣布正式成立。 活動(dòng)現(xiàn)場(chǎng) NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長(zhǎng)三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會(huì)上,軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司(以下簡(jiǎn)稱"軟通動(dòng)力")與長(zhǎng)三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉