亚洲a中文字幕_官网99热精品_91美女片黄在线观看游戏_久久96国产精品久久99软件

寧波市鄞州首南恒宇激光雕刻廠

基于雙計算機的仿人機器人的視覺跟蹤系統
分享到:


摘 要:運動目標的實時跟蹤是機器人視覺的關鍵技術之一。設計了仿人機器人的視覺跟蹤系統,系統采用雙計算機,分別負責視覺信息的處理和運動單元的控制,兩臺計算機通過Memolink進行通訊。基于Windows的視覺信息處理子系統實現運動目標的分割,狀態估計和預測。運動控制子系統采用RTlinux實時操作系統,利用PD控制器控制關節運動。實驗驗證了系統的穩定性和實時性。
關鍵詞:仿人機器人;視覺跟蹤;RTlinux

引言

仿人機器人的頭部視覺跟蹤系統利用視覺信息作為反饋,來規劃機器人的頭部運動使其能實時的跟蹤運動目標。視覺跟蹤是仿人機器人的重要功能之一,它的研究對于仿人機器人的自主導航、人機交互以及視覺伺服都具有極其重要的意義。

視覺跟蹤的實時性是仿人機器人的重要性能要求之一。針對這一系統要求,近年來有很多學者設計出了多種系統結構。文[1]中作者設計了一種基于CAN總線的分布式的仿人機器人的控制系統,其中的視覺系統通過無線局域網與控制系統進行通訊。日本仿人機器人ASIMO的運動控制系統采用集中式控制方式,視覺系統通過網絡與運動控制系統通訊[2]。一臺計算機難以滿足視覺跟蹤的實時性要求,為了實現實時跟蹤,本文提出并實現了一種基于MemoLink通訊的雙計算機的視覺跟蹤系統。該系統通訊可靠、體積小,便于將兩臺計算機安置于仿人機器人的胸腔內。

目標分割的穩定性是機器人視覺跟蹤系統的重要要求之一,近幾年來很多學者對這個領域進行了研究,大多數的機器人目標跟蹤系統選用了單一的圖像信息,有的采用了物體的顏色信息[3],有的采用了物體的輪廓信息[4]。然而在復雜的非結構化的室內背景下,單一的圖像信息不能保證系統穩定的分割出目標。多種圖像信息的融合是解決目標物體識別穩定性的方法之一[5]。本文中作者提出了一種集成深度、顏色和形狀信息的逐步逼近目標區域的快速目標分割方法

1 系統結構

仿人機器人BHR1的系統結構如圖1所示,其全身有32個自由度,其中頭部有2個自由度,可以在兩個方向上自由轉動,即左右轉動和上下轉動。面部放置兩只CCD攝像頭作為視覺傳感器來模擬人的眼睛。采用SVS立體視覺處理系統處理視覺信息,SVS系統提供了每幀圖像的深度圖像[6]。


圖1 仿人型機器人(BHR1)跟蹤系統的系統結構
兩臺計算機置于機器人的胸腔內,其中一臺計算機負責視覺信息的處理,另外一臺負責機器人的運動控制。前者被稱之為信息處理子系統,后者被稱為運動控制子系統, 兩臺計算機通過Memolink進行通訊。信息處理子系統利用Windows強大的多媒體功能來處理立體視覺信息,實現目標的快速分割以及物體的運動估計和預測。運動控制子系統以Linux/RT-Linux實時操作系統作為平臺,保證了機器人控制系統的實時性。除了頭部運動關節,運動控制系統負責仿人機器人全部關節的控制。Memolink 是系統間進行快速通信的一種有效解決方案,是連接信息處理子系統和運動控制子系統的橋梁。具有通信速度快和通信前無需握手的優點。

整個跟蹤過程執行如下的循環:搜索目標——發現目標——匹配——狀態估計和預測——運動控制。不同的匹配方法應用產生了不同的跟蹤方法。本文中作者提出了一種融合深度、顏色和形狀信息的逐步逼近目標區域的快速分割方法。在實時的跟蹤系統中,運動估計和預測有效的減少了檢測區域,提高了系統的跟蹤速度。研究中采用經典的卡爾曼濾波器進行運動目標的狀態估計和預測。

2 基于多圖像信息的目標分割方法

視覺信息處理子系統完成目標物體的快速分割,同時估計和預測目標物體的運動信息,把目標物體的位置信息實時地傳遞給運動控制子系統。目標識別的穩定性對整個跟蹤系統的穩定性起著至關重要的作用。

在復雜背景的非結構化的室內環境下,用于機器人視覺跟蹤的圖像信息有:深度、顏色、形狀、邊緣、運動等。基于多信息的運動目標的分割方法中,所選取的信息應該具有互補性。物體的顏色是物體最顯著的特征,適合用于目標的跟蹤。但是當背景中包含同樣顏色的物體時,基于顏色的跟蹤將會失敗。深度信息有助于系統得到粗略的前景區域,也就是包含運動物體的目標候選窗口,另外基于深度分割的粗略前景輪廓的獲得計算量小,速度快。基于RHT(Random Hough transform)算法的形狀檢測器可以檢測各種不同的幾何形狀,比如:橢圓形、三角形和多邊形,進而把目標候選區域中相同顏色的物體區別開來。


圖2 視頻序列中運動目標分割過程
本文利用仿人機器人的立體視覺系統,設計了融合深度,顏色,形狀信息的逐步逼近目標區域的快速跟蹤方法。圖2為視頻序列中運動目標的分割過程。首先利用深度信息把機器人關心的前景區域分割出來,得到ROF(Region of Foregroud)區域,即粗略的目標候選區域。在ROF中使用顏色濾波器分割,得到ROIC(Region of Interest Color)區域。最后形狀檢測器可以把相同顏色的物體區別開來。在分割過程中,候選目標區域逐步縮小并逼近目標區域。逐步縮小的候選目標區域減少了計算量,提高了系統的運算速度。同時,該方法有效的避免了場景中相同顏色物體的干擾,提高了目標分割的穩定性。圖3顯示了目標物體的分割結果。

圖3 復雜場景中目標物體的分割結果
3 運動控制子系統

3.1運動控制系統的結構

機器人的運動控制子系統是一個典型的計算機控制系統。機器人頭部的控制目的是為了機器人的頭部能夠實時跟蹤運動目標,因此實際控制信號輸入量是根據目標物體的位置信息求得的規劃數據。在反饋信號的輸入方面,因為被控對象是電機轉動的角度,用電機上面的軸角編碼器的輸出作為反饋信號。

系統使用了一套多功能接口板,將所有的A/D轉換、D/A轉換、ENC(encoder)、PWM、IO等多種功能都集成在該接口板上,提高了系統的集成性并減小了系統體積和重量。多功能接口板上上的ENC接口來作為反饋信號的輸入通道,它可以測量軸角編碼器的脈沖輸出個數。每個運動關節采用經典的PD伺服控制。

3.2運動控制系統的軟件結構

運動控制子系統采用了RT-Linux(Real Time Linux)實時操作系統,其軟件結構如圖4所示,主要包括兩個模塊:主程序模塊、實時任務模塊,主程序模塊是linux應用程序,實時任務模塊是RTLinux下的實時進程。兩個模塊也是兩個進程,通過管道(FIFO)進行通訊等。

聯系我們

地址: 浙江省.寧波市鄞州區寧姜公路(九曲小區二期旁)

郵編: 315040

聯系人: 盛立峰

電話: 0574-87139378

傳真: 0574-87139378

手機: 13867861670

郵箱: 85400329@qq.com

聯系我們
亚洲a中文字幕_官网99热精品_91美女片黄在线观看游戏_久久96国产精品久久99软件
白白操在线视频| 成人免费福利在线| 国产日韩欧美二区| 久久久综合av| 日韩国产欧美精品| 一区二区精品免费视频| 欧美不卡视频一区发布| 成人免费在线网| 国产精品男女猛烈高潮激情| 日本欧美色综合网站免费| 97国产在线播放| 一区二区三区在线视频111| 国产资源在线免费观看| 国产精品久久9| 虎白女粉嫩尤物福利视频| 久久精品亚洲精品| 韩国日本不卡在线| 久久av在线看| 国内精品在线观看视频| 国产精品久久久久久久美男| 麻豆久久久9性大片| 欧美精品在线观看91| 国产日产欧美视频| 久久久久国产精品www| 国产精品一区二区三区在线| 一区二区三区四区免费观看| av免费观看久久| 无码av天堂一区二区三区| 国产成人avxxxxx在线看| 日韩久久久久久久| 国产精品久久久久久搜索| 国产欧美在线一区| 午夜免费日韩视频| 国产精品com| 欧美精品一区二区三区免费播放| 国产精品久久成人免费观看| 国产热re99久久6国产精品| 亚洲国产精品日韩| 国产av熟女一区二区三区| 欧美a在线视频| 欧美日韩电影在线观看| 91福利视频网| 欧美自拍资源在线| 久热精品视频在线观看| 99精彩视频| 日韩精品一区二区三区丰满| 国产精品青草久久久久福利99| 国产乱淫av片杨贵妃| 亚洲 高清 成人 动漫| 国产成人97精品免费看片| 国严精品久久久久久亚洲影视 | 国产精品免费看一区二区三区| 国产一级不卡毛片| 亚洲av综合色区| 久久视频精品在线| 国产伦精品一区二区三区高清版| 亚洲精品中字| 国产成人精品网站| 成人毛片100部免费看| 日本高清视频精品| 美女啪啪无遮挡免费久久网站| 91av中文字幕| 欧美亚洲另类激情另类| 欧美激情a∨在线视频播放| 久久精品国产sm调教网站演员 | www.亚洲成人| 成人9ⅰ免费影视网站| 日韩免费中文字幕| 国产精品成人播放| 91精品视频免费观看| 欧美国产一区二区在线| 亚洲国产精品久久久久婷蜜芽| 久久精品国产成人| 国产精品91在线观看| 狠狠色噜噜狠狠狠狠色吗综合| 亚洲人一区二区| 国产精品日韩一区二区三区| 国产精品aaa| 国产日韩av高清| 欧美视频1区| 欧美一级片久久久久久久| 国产精品久久久久久久久久久久 | 亚州成人av在线| 欧美麻豆久久久久久中文| 国产不卡av在线| 成人a免费视频| 免费观看精品视频| 日韩欧美手机在线| 亚洲熟妇无码一区二区三区导航| 国产精品久久色| 日韩一区二区精品视频| 99在线观看视频| 国产在线精品播放| 欧美在线不卡区| 日本一本草久p| 亚洲国产精品影视| 欧美激情久久久久| 国产精品久久久影院| www.日韩.com| 久久精品久久精品国产大片| 99在线国产| 国产欧美日韩亚洲精品| 国内揄拍国内精品| 欧美日韩国产高清视频| 日韩精品一区二区三区四区五区 | 黄色网在线视频| 欧美在线免费视频| 日本精品一区二区三区不卡无字幕 | 一区二区三视频| 国产精品久久久久一区二区| 日韩有码在线播放| 久久精品视频91| 久久免费精品日本久久中文字幕| 成人福利网站在线观看| 国产精品影院在线观看| 国产一区二区片| 国内精品在线一区| 韩国国内大量揄拍精品视频| 欧美一区免费视频| 人人妻人人添人人爽欧美一区 | 国产精品免费电影| 国产成人精品视频在线| 日韩中文字幕在线视频播放| 色婷婷综合成人av| www.日韩av.com| 久久天天躁狠狠躁夜夜躁| 久久久精品久久| 国产精品网站入口| 国产精品欧美日韩| 两个人的视频www国产精品| 精品久久中出| 中文字幕在线乱| 亚洲a∨日韩av高清在线观看| 日韩在线电影一区| 日本亚洲欧洲色α| 欧美一区深夜视频| 蜜桃日韩视频| 国产精品自产拍在线观看中文| 成人免费视频91| 91精品国产91久久久久麻豆 主演| 91久色国产| 久久99欧美| 国产精品久久久久久久av大片| 精品久久久久久亚洲| 亚洲一区二区不卡视频| 懂色一区二区三区av片| 日韩欧美在线电影| 国内精品国语自产拍在线观看| 国产欧美精品在线| 99精品视频播放| 久久久久亚洲av无码专区喷水| 国产精品视频免费一区二区三区| 国产精品国产对白熟妇| 亚洲一区二区三区四区在线播放| 日韩xxxx视频| 精品一区二区中文字幕| av在线不卡观看| 久久久久久久av| 久久综合免费视频| 亚洲一区二区三区四区中文| 日本一区视频在线观看| 精品欧美日韩在线| 成人免费福利视频| 久久久久无码国产精品一区| 国产精品免费成人| 亚洲精品国产精品国自产| 欧美精品99久久| 成人在线小视频| www.日韩欧美| 中文字幕一区二区三区最新| 无码免费一区二区三区免费播放 | 91精品久久久久久久久中文字幕| 久久精品午夜一区二区福利| 国产精品对白刺激| 午夜精品久久久久久久无码| 欧美在线一二三区| 国产精品一区专区欧美日韩| 久久久久久中文| 精品国产一区二区三区在线| 日本在线观看a| 国产伦精品一区二区三区视频孕妇 | 中文字幕一区综合| 日韩一区国产在线观看| 虎白女粉嫩尤物福利视频| 99在线观看视频免费| 国产精品精品久久久| 视频在线一区二区三区| 国产亚洲综合视频| 日韩在线激情视频| 亚洲在线视频观看| 麻豆精品蜜桃一区二区三区| 久久九九视频| 伊人久久大香线蕉综合75| 黄色影院一级片| 国产大尺度在线观看| 九九热精品在线| 韩国欧美亚洲国产| 91传媒免费视频| 九九热这里只有精品6| 欧美日韩精品一区|