首頁
產(chǎn)品系列
行業(yè)應(yīng)用
渠道合作
新聞中心
研究院
投資者關(guān)系
技術(shù)支持
關(guān)于創(chuàng)澤
| En
 
  當前位置:首頁 > 新聞資訊 > 機器人開發(fā) > 機器人如何看到物體:由硬件圖像采集和軟件圖像信息處理  
 

機器人如何看到物體:由硬件圖像采集和軟件圖像信息處理

來源:機器人如何看到物體      編輯:創(chuàng)澤      時間:2025/12/29      主題:其他   [加盟]

人的視覺是我們獲知外界信息的主要途徑,視覺能夠 幫助我們對空間頻率、時間頻率以及對運動物體進行感知。

機器視覺系統(tǒng)的目的就是給機器或自動生產(chǎn)線添加一套視覺系統(tǒng),其原理是由計算機或圖像處理器以及相關(guān)設(shè)備來模擬人的視覺行為,完成得到人的視覺 系統(tǒng)所得到的信息。人的視覺系統(tǒng)是由眼球、神經(jīng)系統(tǒng)及大腦的視覺中樞構(gòu)成, 計算機視覺系統(tǒng)則是由圖像采集系統(tǒng)、圖像處理系統(tǒng)及信息綜合分析處理系統(tǒng)構(gòu)成。機器人的視覺,大概可以理解為“視”和“覺” 兩部分,詳解如圖4-6所示。

從圖4-5我們不難看出,機器人的視覺系統(tǒng)總的說來由硬件和軟件兩大部分組成。

(1)硬件部分

①視覺傳感器,即CCD 或 者CMOS 攝像頭;

②視頻信號數(shù)字化設(shè)備,即圖像采集卡,它的 任務(wù)是把攝像頭輸出的全電視信號轉(zhuǎn)化成計算機方便 使用的數(shù)字信號;

③計算機及外設(shè),根據(jù)系統(tǒng)的需要可以選用不 同的計算機及其外設(shè),來滿足機器人視覺信息處理及 機器人控制的需要。由于 USB 接口技術(shù)的出現(xiàn),小型攝像機可以直接與計算機相連,實現(xiàn)環(huán)境圖像的快速采集傳送,且預(yù)設(shè)數(shù)據(jù)處 理系統(tǒng)與圖像采集系統(tǒng)間的接口。

(2)軟件部分

①計算機系統(tǒng)軟件,選用不同類型的計算機,就有不同的操作系統(tǒng)和所支 撐的各種語言等,當然也可以采用底層方法處理圖像信息,以省掉操作系統(tǒng)帶來 的麻煩。

②機器人視覺信息處理算法,包括圖像預(yù)處理、分割、識別和解釋等 算法 。

機器人視覺系統(tǒng)是用計算機來實現(xiàn)人的視覺功能,也就是用計算機來實現(xiàn) 對客觀世界的識別。該系統(tǒng)主要由三部分組成:圖像采集部件、圖像的處理和分析、處理結(jié)果輸出裝置,其原理圖如圖4-7所示。

①圖像采集部件:原始的圖像數(shù)據(jù)是通過圖像采集部件進入計算機的, 因而圖像采集部件的作用是采集原始的模擬圖像數(shù)據(jù),并將模擬信號轉(zhuǎn)換成 數(shù)字信號。計算機在接收到圖像的數(shù)字信號后,將其存入內(nèi)存區(qū)。常用的圖 像采集部件有成像雷達、CCD 攝像頭加上圖像采集卡、圖像掃描儀、數(shù)碼攝 像機等。

②圖像信息處理器:圖像的處理工作通常是由計算機完成的,經(jīng)過采集卡 將模擬信號轉(zhuǎn)換為數(shù)字信號后,圖像信息在計算機中實現(xiàn)預(yù)處理、特征抽取(圖 像分析)、模式識別、重構(gòu)、描述、判斷、決策等一系列的處理。

③處理結(jié)果輸出(機機接口和人機接□):識別信息的輸出是圖像處理的 Z終目的。從廣義的角度講,信息的輸出形式可分為兩種:一種是根據(jù)識別的結(jié) 果作出判斷,通常以符號信息的形式輸出;另一種是以圖像形式輸出。機器人圖 像處理的結(jié)構(gòu)圖如圖4-8所示。

常見的攝像頭大致可以分為兩類,即單目攝像頭和雙目攝像 頭。所謂的單目攝像頭,就是一種只能看到平面,無法獲取距離信息的攝像頭。 這樣的攝像頭在我們的生活中非常常見,筆記本電腦或者手機內(nèi)置的攝像頭,以 及相機攝像機的鏡頭大多都是單目。但是要是使得機器人能夠準確地運動到我們 想要它運動到的地方,那么機器人就要對它所處的環(huán)境有一定的了解,才能相對 準確地獲取它要走的路徑。所以這就需要機器人對它周圍物體的位置有個準確的 了解,這就不僅需要機器人看到那個物體,還需要機器人準確地測出它與物體間 的距離。而能實現(xiàn)這一功能的就是雙目攝像頭。





機器人如何規(guī)劃行走路線:全局規(guī)劃方法,局部規(guī)劃

全局規(guī)劃方法依照已獲取的環(huán)境信息,給機器人規(guī)劃出一條路徑,路徑的精確程度取決于獲取環(huán)境信息的準確程度;局部規(guī)劃方法側(cè)重于考慮機器人當前的局部環(huán)境信息

機器人的視覺傳感技術(shù),從二維圖像中理解和構(gòu)造出三維世界的真實模型

機器人的視覺系統(tǒng)是通過圖像和距離等傳感器來獲取環(huán)境對象的圖像、顏色和距離等信息,然后傳遞給圖像處理器,利用計算機從二維圖像中理解和構(gòu)造出三維世界的真實模型

機器人的工件識別傳感器:接觸識別、采樣式測量、鄰近探測、距離測量、機械視覺識別

接觸識別這種測量一般精度不高;采樣式測量如測量某一目標的位置、方向和形狀;距離測量測量某一目標到某一基準點的距離;機械視覺識別測量某一目標相對于一基準點的位置方向和距離

機器人的柔性腕力傳感器:檢測末端執(zhí)行器所受外力/力矩的大小和方向

腕力傳感器安裝在機器人手臂和末端執(zhí)行器之間,更接近力的作用點,準確地檢測末端執(zhí)行器所受外力/力矩的大小和方向,為機器人提供力感信息,擴展了機器人的作業(yè)能力

機器人位姿傳感器:6個電渦流傳感器組成的特定空間結(jié)構(gòu)

6個傳感器構(gòu)成三維測量坐標系, 其中傳感器1、2、3對應(yīng)測量面 xOy, 傳感器4、5對應(yīng)測量面 xOz, 傳感器6對應(yīng)測量面 yOz 。 每個傳感器在坐標系中的位置固定,這6個傳感器所標定的測量范圍就是該測量系統(tǒng) 的測量范圍

機器人軌跡規(guī)劃的基本原理

以兩自由度機器人為例,將機器人操作臂兩個關(guān)節(jié)的運動用一個公共因子做歸一化處理,使其運動范圍較小的關(guān)節(jié)運動成 比例地減慢,這樣可使得兩個關(guān)節(jié)能夠同步開始和 同步結(jié)束運動

機器人操作臂動力學方程系數(shù)的簡化

機器人動力學的顯式狀態(tài)方程,可用來分析和設(shè)計高級的關(guān)節(jié)變量空間的控制策略,給定力和力矩,用動力學方程求解關(guān)節(jié)的加速度,再積分求得速度及廣義坐標

WebSocket在實時對話中存在關(guān)鍵缺陷:數(shù)據(jù)包丟失或延遲,破壞對話流暢性

WebSocket 基于 TCP 協(xié)議,其可靠傳輸機制在實時媒體流中反而成為瓶頸,會導(dǎo)致單個數(shù)據(jù)包丟失或延遲時,對于對話式 AI 需連續(xù)交互的場景,此問題會顯著破壞對話流暢性

機器人互動如何做好上下文:短期記憶,固化和注入長期記憶:

通過結(jié)構(gòu)化短期記憶+動態(tài)長期記憶注入,在保障兼容性的同時,針對實時語音交互場景進行深度優(yōu)化,并賦予開發(fā)者高度靈 活的上下文控制權(quán)限

機器人的動力學:拉格朗日法

拉格朗日函數(shù)L被定義為系統(tǒng)的動能K 和勢能P 之差,即 L=K 一P 式中 K—— 機器人手臂的總動能,P—— 機器人手臂的總勢能,機器人系統(tǒng)的拉格朗日方程為

機器人的自由度,直接影響到機器人的機動性

自由度是機器人的一個重要技術(shù)指標,它是由機器人的結(jié)構(gòu)決定的,并直接影響到機器人的機動性;機器人機械手的手臂具有三個自由度,其他的自由度數(shù)為末端執(zhí)行裝置所具有

機器人系統(tǒng)的結(jié)構(gòu):機械手、環(huán)境、任務(wù) 和控制器

機械手是具有傳動執(zhí)行裝置的機械,它由臂、關(guān)節(jié)和末端執(zhí)行裝置(工具等)構(gòu)成,組合為一個互相連接和互相依賴的運動機構(gòu);機器人接收來自傳感器的信號產(chǎn)生出控制信號去驅(qū)動機器人的各個關(guān)節(jié)
 
資料獲取
新聞資訊
== 資訊 ==
» 機器人的電子鼻工作原理:特定氣味會產(chǎn)生電
» 智能機器人的聲源定位方法:頭部相關(guān)聯(lián)函數(shù)
» 機器人非特定人語音識別流程:幅度檢測,過
» 機器人特定人語音識別系統(tǒng)判別的基本方法:
» 機器人語音識別主要模式:頻譜圖法,LPC
» 機器人圖像處理的幾種方法:點運算、圖像增
» 機器人如何看到物體:由硬件圖像采集和軟件
» 機器人如何規(guī)劃行走路線:全局規(guī)劃方法,局
» 機器人應(yīng)用的趨勢:垂直化、工藝化、多樣化
» 協(xié)作機器人的中國市場格局:初具雛形,未完
» 中國協(xié)作機器人市場前景:高速穩(wěn)步增長,未
» 協(xié)作機器人市場的發(fā)展歷程:起步期、調(diào)整期
» 機器人的安全解決方案:力感知方案,輕量化
» 機器人的視覺解決方案:2D視覺和 3D
» 協(xié)作機器人與人形機器人的發(fā)展關(guān)系:應(yīng)用領(lǐng)
 
== 機器人推薦 ==
 
迎賓講解服務(wù)機器人

服務(wù)機器人(迎賓、講解、導(dǎo)診...)

智能消毒機器人

智能消毒機器人

機器人底盤

機器人底盤

 

商用機器人  Disinfection Robot   展廳機器人  智能垃圾站  輪式機器人底盤  迎賓機器人  移動機器人底盤  講解機器人  紫外線消毒機器人  大屏機器人  霧化消毒機器人  服務(wù)機器人底盤  智能送餐機器人  霧化消毒機  機器人OEM代工廠  消毒機器人排名  智能配送機器人  圖書館機器人  導(dǎo)引機器人  移動消毒機器人  導(dǎo)診機器人  迎賓接待機器人  前臺機器人  導(dǎo)覽機器人  酒店送物機器人  云跡科技潤機器人  云跡酒店機器人  智能導(dǎo)診機器人 
版權(quán)所有 © 創(chuàng)澤智能機器人集團股份有限公司     中國運營中心:北京·清華科技園九號樓5層     中國生產(chǎn)中心:山東日照太原路71號
銷售1:4006-935-088    銷售2:4006-937-088   客服電話: 4008-128-728