亚洲a中文字幕_官网99热精品_91美女片黄在线观看游戏_久久96国产精品久久99软件

寧波市鄞州首南恒宇激光雕刻廠

基于雙計算機的仿人機器人的視覺跟蹤系統
分享到:


摘 要:運動目標的實時跟蹤是機器人視覺的關鍵技術之一。設計了仿人機器人的視覺跟蹤系統,系統采用雙計算機,分別負責視覺信息的處理和運動單元的控制,兩臺計算機通過Memolink進行通訊。基于Windows的視覺信息處理子系統實現運動目標的分割,狀態估計和預測。運動控制子系統采用RTlinux實時操作系統,利用PD控制器控制關節運動。實驗驗證了系統的穩定性和實時性。
關鍵詞:仿人機器人;視覺跟蹤;RTlinux

引言

仿人機器人的頭部視覺跟蹤系統利用視覺信息作為反饋,來規劃機器人的頭部運動使其能實時的跟蹤運動目標。視覺跟蹤是仿人機器人的重要功能之一,它的研究對于仿人機器人的自主導航、人機交互以及視覺伺服都具有極其重要的意義。

視覺跟蹤的實時性是仿人機器人的重要性能要求之一。針對這一系統要求,近年來有很多學者設計出了多種系統結構。文[1]中作者設計了一種基于CAN總線的分布式的仿人機器人的控制系統,其中的視覺系統通過無線局域網與控制系統進行通訊。日本仿人機器人ASIMO的運動控制系統采用集中式控制方式,視覺系統通過網絡與運動控制系統通訊[2]。一臺計算機難以滿足視覺跟蹤的實時性要求,為了實現實時跟蹤,本文提出并實現了一種基于MemoLink通訊的雙計算機的視覺跟蹤系統。該系統通訊可靠、體積小,便于將兩臺計算機安置于仿人機器人的胸腔內。

目標分割的穩定性是機器人視覺跟蹤系統的重要要求之一,近幾年來很多學者對這個領域進行了研究,大多數的機器人目標跟蹤系統選用了單一的圖像信息,有的采用了物體的顏色信息[3],有的采用了物體的輪廓信息[4]。然而在復雜的非結構化的室內背景下,單一的圖像信息不能保證系統穩定的分割出目標。多種圖像信息的融合是解決目標物體識別穩定性的方法之一[5]。本文中作者提出了一種集成深度、顏色和形狀信息的逐步逼近目標區域的快速目標分割方法

1 系統結構

仿人機器人BHR1的系統結構如圖1所示,其全身有32個自由度,其中頭部有2個自由度,可以在兩個方向上自由轉動,即左右轉動和上下轉動。面部放置兩只CCD攝像頭作為視覺傳感器來模擬人的眼睛。采用SVS立體視覺處理系統處理視覺信息,SVS系統提供了每幀圖像的深度圖像[6]。


圖1 仿人型機器人(BHR1)跟蹤系統的系統結構
兩臺計算機置于機器人的胸腔內,其中一臺計算機負責視覺信息的處理,另外一臺負責機器人的運動控制。前者被稱之為信息處理子系統,后者被稱為運動控制子系統, 兩臺計算機通過Memolink進行通訊。信息處理子系統利用Windows強大的多媒體功能來處理立體視覺信息,實現目標的快速分割以及物體的運動估計和預測。運動控制子系統以Linux/RT-Linux實時操作系統作為平臺,保證了機器人控制系統的實時性。除了頭部運動關節,運動控制系統負責仿人機器人全部關節的控制。Memolink 是系統間進行快速通信的一種有效解決方案,是連接信息處理子系統和運動控制子系統的橋梁。具有通信速度快和通信前無需握手的優點。

整個跟蹤過程執行如下的循環:搜索目標——發現目標——匹配——狀態估計和預測——運動控制。不同的匹配方法應用產生了不同的跟蹤方法。本文中作者提出了一種融合深度、顏色和形狀信息的逐步逼近目標區域的快速分割方法。在實時的跟蹤系統中,運動估計和預測有效的減少了檢測區域,提高了系統的跟蹤速度。研究中采用經典的卡爾曼濾波器進行運動目標的狀態估計和預測。

2 基于多圖像信息的目標分割方法

視覺信息處理子系統完成目標物體的快速分割,同時估計和預測目標物體的運動信息,把目標物體的位置信息實時地傳遞給運動控制子系統。目標識別的穩定性對整個跟蹤系統的穩定性起著至關重要的作用。

在復雜背景的非結構化的室內環境下,用于機器人視覺跟蹤的圖像信息有:深度、顏色、形狀、邊緣、運動等。基于多信息的運動目標的分割方法中,所選取的信息應該具有互補性。物體的顏色是物體最顯著的特征,適合用于目標的跟蹤。但是當背景中包含同樣顏色的物體時,基于顏色的跟蹤將會失敗。深度信息有助于系統得到粗略的前景區域,也就是包含運動物體的目標候選窗口,另外基于深度分割的粗略前景輪廓的獲得計算量小,速度快。基于RHT(Random Hough transform)算法的形狀檢測器可以檢測各種不同的幾何形狀,比如:橢圓形、三角形和多邊形,進而把目標候選區域中相同顏色的物體區別開來。


圖2 視頻序列中運動目標分割過程
本文利用仿人機器人的立體視覺系統,設計了融合深度,顏色,形狀信息的逐步逼近目標區域的快速跟蹤方法。圖2為視頻序列中運動目標的分割過程。首先利用深度信息把機器人關心的前景區域分割出來,得到ROF(Region of Foregroud)區域,即粗略的目標候選區域。在ROF中使用顏色濾波器分割,得到ROIC(Region of Interest Color)區域。最后形狀檢測器可以把相同顏色的物體區別開來。在分割過程中,候選目標區域逐步縮小并逼近目標區域。逐步縮小的候選目標區域減少了計算量,提高了系統的運算速度。同時,該方法有效的避免了場景中相同顏色物體的干擾,提高了目標分割的穩定性。圖3顯示了目標物體的分割結果。

圖3 復雜場景中目標物體的分割結果
3 運動控制子系統

3.1運動控制系統的結構

機器人的運動控制子系統是一個典型的計算機控制系統。機器人頭部的控制目的是為了機器人的頭部能夠實時跟蹤運動目標,因此實際控制信號輸入量是根據目標物體的位置信息求得的規劃數據。在反饋信號的輸入方面,因為被控對象是電機轉動的角度,用電機上面的軸角編碼器的輸出作為反饋信號。

系統使用了一套多功能接口板,將所有的A/D轉換、D/A轉換、ENC(encoder)、PWM、IO等多種功能都集成在該接口板上,提高了系統的集成性并減小了系統體積和重量。多功能接口板上上的ENC接口來作為反饋信號的輸入通道,它可以測量軸角編碼器的脈沖輸出個數。每個運動關節采用經典的PD伺服控制。

3.2運動控制系統的軟件結構

運動控制子系統采用了RT-Linux(Real Time Linux)實時操作系統,其軟件結構如圖4所示,主要包括兩個模塊:主程序模塊、實時任務模塊,主程序模塊是linux應用程序,實時任務模塊是RTLinux下的實時進程。兩個模塊也是兩個進程,通過管道(FIFO)進行通訊等。

聯系我們

地址: 浙江省.寧波市鄞州區寧姜公路(九曲小區二期旁)

郵編: 315040

聯系人: 盛立峰

電話: 0574-87139378

傳真: 0574-87139378

手機: 13867861670

郵箱: 85400329@qq.com

聯系我們
亚洲a中文字幕_官网99热精品_91美女片黄在线观看游戏_久久96国产精品久久99软件
久久久久久久少妇| 亚洲 国产 欧美一区| 91九色蝌蚪国产| 国产精品一区二区性色av| 国产一区在线免费观看| 国产日韩欧美一二三区| 国产主播在线一区| 国产精品一区二区久久精品| 国产热re99久久6国产精品| 国产一区在线免费观看| 国产精品一区二区三区在线播放 | 久热免费在线观看| 久久久亚洲精品无码| 99在线首页视频| 99热在线播放| 久99久在线| 久久九九亚洲综合| 美女精品久久久| 亚洲va欧美va在线观看| 日韩免费av在线| 极品美女扒开粉嫩小泬| 国产中文日韩欧美| 97精品一区二区三区| 91精品国产综合久久久久久蜜臀| 久久在线中文字幕| 国产精品欧美亚洲777777| 欧美成人精品三级在线观看| 欧美极品在线播放| 亚洲一区二区三区精品视频 | 国产一区喷水| 97精品视频在线| 国产成人在线一区| 欧美成人精品在线| 日日噜噜噜噜夜夜爽亚洲精品| 欧美无砖专区免费| 国产精品自拍网| 爽爽爽爽爽爽爽成人免费观看| 国产精品高潮呻吟视频| 日韩一区二区三区高清| 欧美成人第一区| 国产欧美一区二区在线播放| 国产传媒久久久| 精品国产91亚洲一区二区三区www| 日韩一区二区高清视频| 国模精品一区二区三区| 91精品国产91久久久久久吃药| 久久色精品视频| 国产99在线免费| 人妻少妇精品久久| 成人黄色av网站| 久久草.com| 欧美激情亚洲自拍| 欧美日韩激情四射| 久久手机在线视频| 国产av国片精品| 秋霞久久久久久一区二区| 国产精品最新在线观看| 国产精品美女久久| 日韩免费一级视频| 91久久在线视频| 欧美精品免费在线观看| 欧洲在线视频一区| 久久九九国产视频| 一区二区三区久久网| 海角国产乱辈乱精品视频| 国产成人97精品免费看片 | 亚洲在线观看视频| 男女视频网站在线观看| 久久噜噜噜精品国产亚洲综合| 欧美猛交ⅹxxx乱大交视频| 欧美日韩在线不卡视频| 久久亚洲国产成人精品无码区| 久久成人18免费网站| 精品一区国产| 久久九九全国免费精品观看| 日韩久久久久久久久久久久久| 91精品国产成人www| 亚洲精品一区二区三区四区五区 | 99久re热视频精品98| 国产精品第一页在线| 青青草精品视频在线| 国产成人精品999| 亚洲伊人成综合成人网| 国模视频一区二区三区| 国产精品免费一区二区三区都可以 | 在线码字幕一区| 麻豆av福利av久久av| 国产精品视频白浆免费视频| 日韩av大片免费看| 国产二区一区| 日韩免费观看视频| 国产成人精品亚洲精品| 国产一区免费在线| 色综合久久88色综合天天看泰| 国产一区二区片| 欧美极品在线播放| 97欧美精品一区二区三区| 在线国产99| 国产精品69页| 日韩免费中文字幕| 日韩中文理论片| 欧美v在线观看| 精品蜜桃传媒| 国产乱子夫妻xx黑人xyx真爽| 91精品久久久久久久久久久久久| 亚洲国产精品久久久久爰色欲| 91精品国产自产91精品| 日本欧洲国产一区二区| 日韩中文字幕在线精品| 欧美日韩在线高清| 久久五月天色综合| 高清一区二区三区日本久| 亚洲一区二区三区午夜| 91精品国产91久久久久久不卡 | 日本不卡一二三区| 国产精成人品localhost| 日韩有码免费视频| 国产成人生活片| 大地资源第二页在线观看高清版| 国产suv精品一区二区三区88区| 日韩精品久久一区| 国产精品精品一区二区三区午夜版| 国产精品自产拍在线观看| 亚洲精品乱码久久久久久自慰| 国产a级黄色大片| 精品欧美一区二区精品久久| 欧美激情在线有限公司| 91精品中国老女人| 奇米影视首页 狠狠色丁香婷婷久久综合| 国产精品久久久久久久久久三级 | 亚洲 欧美 日韩 国产综合 在线| 国产福利精品视频| 麻豆av一区| 日韩欧美在线电影| 欧美另类99xxxxx| 久久精品成人一区二区三区蜜臀| 欧美激情国产精品日韩| 亚洲中文字幕无码一区二区三区| 国产v片免费观看| 国产精品一区二区电影| 青青视频在线播放| 一本久久a久久精品vr综合| 久久久久久亚洲| 国产视频一区二区不卡| 日本国产一区二区三区| 欧美精品第一页在线播放| 日韩在线视频免费观看| 国产精品自产拍高潮在线观看| 日韩欧美亚洲天堂| 亚洲一区美女视频在线观看免费| 久久久国产精品x99av| av网站在线观看不卡| 免费国产黄色网址| 欧美综合激情| 欧美一区二区激情| 欧美日韩成人在线观看| 久久久精品久久| 国产高清精品在线观看| 国产欧美日韩91| 欧美中文在线视频| 亚洲精品在线免费| 色综合五月天导航| 欧美精品在线极品| 国产精品免费福利| 久久国产精品免费一区| 91久久偷偷做嫩草影院| 国产人妻777人伦精品hd| 黄色a级在线观看| 日韩欧美精品一区二区| 性色av一区二区咪爱| 亚洲一区二区三区免费观看| 欧美成人免费va影院高清| 国产精品欧美一区二区| 久久久久人妻精品一区三寸| 久久综合福利| 国产高清自拍99| 久久大香伊蕉在人线观看热2| 91|九色|视频| 91免费欧美精品| av网站在线观看不卡| www.av蜜桃| 99在线免费观看视频| 国产精品中文字幕在线观看| 国产男女猛烈无遮挡91| 国内精品模特av私拍在线观看| 韩国一区二区av| 国产一区精品在线| 国产乱肥老妇国产一区二| 韩国日本不卡在线| 国产一区视频在线播放| 国产婷婷一区二区三区| 国产欧美精品在线| 国产美女在线一区| 波多野结衣成人在线| 97成人在线免费视频| 久久久免费在线观看| 九九热久久66| 久久九九精品99国产精品| 久久综合五月天| 欧美精品久久久久久久久|