环球电气之家-午夜精彩视频-中国专业电气电子产品行业服务网站!

產(chǎn)品分類

當前位置: 首頁 > 傳感測量產(chǎn)品 > 工業(yè)傳感器 > 視覺傳感器 > 3D視覺傳感器

類型分類:
科普知識
數(shù)據(jù)分類:
3D視覺傳感器

基于雙目立體視覺的番茄識別與定位技術

發(fā)布日期:2022-04-27 點擊率:91

摘 要:根據(jù)顏色特征利用閾值自動設定的方法對圖像進行分割,自動、快速識別紅色番茄;采用形心匹配取代常規(guī)的特征點選擇和匹配方法,對雙目立體成像測距公式進行了修正,經(jīng)過驗證,當工作距離小于500mm時,距離誤差可以控制在±10mm以內(nèi)。
關鍵詞:計算機視覺;定位;雙目立體視覺

利用機器人采摘果實,首先要識別果實,然后確定果實的空間位置,這樣才能實現(xiàn)下一步的采摘工作。基于計算機視覺尋找樹上果實的方法大致可以分為兩類:一類是根據(jù)顏色或者灰度特征分割圖像、尋找果實;另一類是在圖像采集時使用濾波片或者其它設備獲取較為簡單的圖像,然后根據(jù)形狀特征尋找果實[1,2]。這些方法目前基本上都停留在理論研究階段,與實際生產(chǎn)的需要差距很大。本文所提出的番茄識別與定位技術可滿足實際工作需要,力求快速、準確。

1 識別

1.1 圖像分割

在圖像上成熟番茄呈現(xiàn)紅色,背景大部分是綠色的枝葉,還有少部分是呈現(xiàn)介于黃色和紅色之間顏色的枯萎枝葉。當圖像上的像素呈現(xiàn)紅色時,其R值(像素紅色顏色分量)大于G值(像素綠色顏色分量);當像素呈現(xiàn)綠色時,其G值大于R值;當像素呈現(xiàn)介于黃色和紅色之間的顏色時,雖然R值也大于G值,但是二者的差值遠小于紅色像素的R值與G值的差值。根據(jù)這個特征,可以實現(xiàn)對圖像的兩次分割。令T=R-G。第一次分割:如果T≤0,認為是背景像素,令該像素的R值、G值、B值都為0;如果T>0,認為該像素可能屬于番茄,令該像素的R值、G值、B值都為T。經(jīng)過第一次分割后,圖像轉(zhuǎn)變?yōu)榛叶葓D像。屬于番茄部分的像素的灰度值大部分集中在高灰度區(qū)域,非番茄部分的像素的灰度值大部分集中在低灰度區(qū)域,選擇合適的閾值進行第二次分割。閾值確定后,把灰度值小于閾值的像素變?yōu)榘咨袼?灰度值為255),灰度值大于閾值的像素變?yōu)楹谏袼?灰度值為0),這樣圖像就轉(zhuǎn)化成二值圖像,可進行下一步處理。為適用于在不同光照條件下拍攝到的圖像,閾值需要根據(jù)具體圖像自動設定,閾值確定采用迭代法[3]。為了顯示第一次分割和第二次分割的效果,特對第一次分割后的圖像作如下處理:令T≤0的像素的顏色值為(255,255,255),即變?yōu)榘咨袼兀頣>0的像素保持原來原始圖像中的顏色。圖1(a)為原始圖像,圖1(b)為第一次分割后的效果圖,圖1(c)為第二次分割后的圖像。

1.2 噪聲消除

經(jīng)過第二次分割后的圖像中仍有許多非番茄部分的像素。對于較小的在視覺上表現(xiàn)為散點的噪聲,可以用形態(tài)學開運算和中值濾波相結合的方法去掉。對于較大的噪聲區(qū)域,其面積和周長同番茄的面積和周長相比是比較小的,可以根據(jù)面積或周長特征去掉。圖1(d)是經(jīng)過輪廓提取、曲線標記,基于周長特征的識別結果。

2 定位

番茄位置的確定采用雙目立體視覺技術。雙目立體視覺技術是用兩個攝像頭模擬人的雙眼,同時從兩個不同位置對同一目標拍攝圖像,然后通過目標匹配根據(jù)三角關系計算目
標的空間位置。

2.1 攝像頭到番茄之間距離的計算

如圖2所示,L、R表示左右兩個攝像頭,點O表示番茄上的特征點,攝像頭焦距為f,攝像頭之間距離為b,Lo為左攝像頭L拍攝到的圖像(簡稱左邊圖像)的中心,Lx為點O在左邊圖像上的成像,Ro為右攝像頭R拍攝到的圖像(簡稱右邊圖像)的中心,Rx為點O在右邊圖像上的成像。根據(jù)三角關系,可以計算出O點到LR連線的垂直距離為

其中xL為點Lx在左邊圖像中的橫坐標,xR為點Rx在右邊圖像中的橫坐標。

利用雙目立體視覺技術測量距離的關鍵是特征點(即O點)的選取和匹配。常用的方法是選擇一幅圖像中目標的形心為特征點,根據(jù)灰度值在另一幅圖像中進行匹配,所用的匹配算法通常比較復雜,計算量大,而且對采集到的圖像質(zhì)量要求很高,否則造成錯誤匹配的概率很大。針對上述問題和本研究的具體對象,本文提出以下采用形心匹配取代常規(guī)特征點選擇和匹配的方法。如圖3所示,圓O1表示番茄, Lo為左左邊圖像的中心,Lx為左邊圖像上番茄的形心,Ro為右邊圖像的中心,Rx右邊圖像上番茄的形心。我們認為Lx和Rx是番茄上同一點在兩幅圖像上的成像。很明顯,如果存在這樣一點,它一定是圓心O1。

根據(jù)前面圖像識別的結果,很容易求得兩幅圖像中番茄的形心坐標。這樣利用式(1)就可以求得圓心O1到LR連線的距離d。但是真正需要得到的是番茄上C點到LR連線的距離d1,所以測距公式應該變成

當研究對象是理想球體時,c就是球體的半徑。實際工作時,番茄是不規(guī)則的半球體,并且大小有差別,在工作前,必須對c進行標定。根據(jù)對實驗大棚和田間番茄生長情況觀察,在同一時期,在同一個大棚或者同一塊田地里,大部分成熟番茄的半徑差異基本上都在10mm以內(nèi),這樣的誤差應該可以滿足采摘的需要。這樣只要選取有代表性的番茄,將其擺放在距離攝像頭不同的位置,通過處理、計算,即可標定c值。圖4是對3個番茄在不同位置的試驗結果,c用另外一個西紅柿進行標定,標定值為22mm。表1中橫坐標是測量距離,縱坐標是根據(jù)式(2)計算得到的距離與測量距離之間的偏差,單位都是mm。

從圖4可以看出,當工作距離小于500mm時,除了個別奇異點,誤差基本上都在±10mm以內(nèi)。這是因為攝像機有一定的取景范圍,距離較遠時,圖像上番茄的像比較小,微小的偏差就會造成較大誤差。

2.2 番茄空間坐標換算

如果取兩攝像頭鏡頭中心連線向右為x軸正方向,連線中點為空間坐標系原點,垂直于x軸所在水平面向下為y軸正方向,根據(jù)右手規(guī)則,z軸正方向為垂直于x、y所在平面離開攝像頭指向番茄的方向。根據(jù)三角關系可求得番茄特征點空間坐標為

其中b、xL、xR、f的意義同式(1),yL和yR是兩幅圖像中番茄形心的縱坐標。
3 結論
本文提出的識別與定位技術在Visual C++ 6.0編譯環(huán)境下編程實現(xiàn),運行效果良好。綜上所述可以得出以下結論:

(1)對不同光照條件下采集到的圖像進行處理,紅色成熟番茄都可以識別;
(2)番茄的空間位置可以基本確定,當工作距離在小于500mm時,距離誤差可以控制在±10mm以內(nèi);
(3)由于不需要根據(jù)像素的顏色值或者灰度值進行特征點匹配,本文提出的識別和定位技術對圖像質(zhì)量要求不高,只要人眼可以從圖像上根據(jù)顏色識別出紅色番茄,該技術就可以識別并確定番茄的位置;
(4)該識別與定位技術稍加修改,也可用于其它與背景有明顯顏色差別的球形果實的識別與定位。其中,ke和kc為量化因子。取Ke=3,kc=3,ku=1.2,當速度給定為2 000rpm時,實測的系統(tǒng)輸出響應曲線如圖5(a)所示??梢?,系統(tǒng)的動態(tài)特性較好,但存在穩(wěn)態(tài)誤差。為此,可改為Fuzzy-PID開關切換型混合控制方式,偏差絕對值較大時,采用模糊控制,以獲得較好的動特性,偏差絕對值較小時,自動切換成PID控制,利用積分作用消除穩(wěn)態(tài)誤差。當切換閾值為0.8(給定值)時,系統(tǒng)響應曲線見圖5(b)??梢姡藭r,系統(tǒng)得到了滿意的動、靜態(tài)特性。

因為性能分析是基于實際的物理系統(tǒng)進行的,且分析所得的結果直觀明了,故具有與一般仿真分析不同的客觀真實性,這對于實時控制系統(tǒng)的教學以及新的控制策略和算法的研究都有非?,F(xiàn)實的意義。

3 結束語

本文結合計算機控制、智能控制和網(wǎng)絡通信等高新技術,構建了可實現(xiàn)聯(lián)網(wǎng)控制的計算機實時控制系統(tǒng)。該系統(tǒng)硬、軟件有所創(chuàng)新,對于促進理論研究與實際應用的結合有現(xiàn)實的意義。該項目已通過江蘇省科技廳組織的鑒定。

參考文獻
1 Ko C C, Chen B M. Development of a Web-based Laboratory forContol Experiments on a Coupled Tank Apparatus.IEEE Trans.Educ.,2001, 44(2):76-86
2 王耀南. 智能控制系統(tǒng)[M]. 長沙:湖南大學出版社,1996
3 龐文堯. 基于高速局域網(wǎng)絡的實時控制程序開發(fā)[J]. 上海:電氣自動化, 2001,(6)
4 易繼鍇. 智能控制技術[M].北京:北京工業(yè)大學出版社,1999

下一篇: PLC、DCS、FCS三大控

上一篇: 索爾維全系列Solef?PV

推薦產(chǎn)品

更多
主站蜘蛛池模板: 车间除尘设备,VOCs废气处理,工业涂装流水线,伸缩式喷漆房,自动喷砂房,沸石转轮浓缩吸附,机器人喷粉线-山东创杰智慧 | 佛山市钱丰金属不锈钢蜂窝板定制厂家|不锈钢装饰线条|不锈钢屏风| 电梯装饰板|不锈钢蜂窝板不锈钢工艺板材厂家佛山市钱丰金属制品有限公司 | 拉曼光谱仪_便携式|激光|显微共焦拉曼光谱仪-北京卓立汉光仪器有限公司 | 东莞动力锂电池保护板_BMS智能软件保护板_锂电池主动均衡保护板-东莞市倡芯电子科技有限公司 | 超细|超微气流粉碎机|气流磨|气流分级机|粉体改性机|磨粉机|粉碎设备-山东埃尔派粉体科技 | 安徽华耐泵阀有限公司-官方网站 安德建奇火花机-阿奇夏米尔慢走丝|高维|发那科-北京杰森柏汇 | 二手色谱仪器,十万分之一分析天平,蒸发光检测器,电位滴定仪-湖北捷岛科学仪器有限公司 | 锂离子电池厂家-山东中信迪生电源 | 包装设计公司,产品包装设计|包装制作,包装盒定制厂家-汇包装【官方网站】 | 手机存放柜,超市储物柜,电子储物柜,自动寄存柜,行李寄存柜,自动存包柜,条码存包柜-上海天琪实业有限公司 | 扬尘在线监测系统_工地噪声扬尘检测仪_扬尘监测系统_贝塔射线扬尘监测设备「风途物联网科技」 | 电竞学校_电子竞技培训学校学院-梦竞未来电竞学校官网 | 高温高压釜(氢化反应釜)百科 | 丹尼克尔拧紧枪_自动送钉机_智能电批_柔性振动盘_螺丝供料器品牌 | 粤丰硕水性环氧地坪漆-防静电自流平厂家-环保地坪涂料代理 | 智能监控-安防监控-监控系统安装-弱电工程公司_成都万全电子 | 洛阳防爆合格证办理-洛阳防爆认证机构-洛阳申请国家防爆合格证-洛阳本安防爆认证代办-洛阳沪南抚防爆电气技术服务有限公司 | 交联度测试仪-湿漏电流测试仪-双85恒温恒湿试验箱-常州市科迈实验仪器有限公司 | 权威废金属|废塑料|废纸|废铜|废钢价格|再生资源回收行情报价中心-中废网 | 智能汉显全自动量热仪_微机全自动胶质层指数测定仪-鹤壁市科达仪器仪表有限公司 | HV全空气系统_杭州暖通公司—杭州斯培尔冷暖设备有限公司 | 红立方品牌应急包/急救包加盟,小成本好项目代理_应急/消防/户外用品加盟_应急好项目加盟_新奇特项目招商 - 中红方宁(北京) 供应链有限公司 | Eiafans.com_环评爱好者 环评网|环评论坛|环评报告公示网|竣工环保验收公示网|环保验收报告公示网|环保自主验收公示|环评公示网|环保公示网|注册环评工程师|环境影响评价|环评师|规划环评|环评报告|环评考试网|环评论坛 - Powered by Discuz! | 珠海白蚁防治_珠海灭鼠_珠海杀虫灭鼠_珠海灭蟑螂_珠海酒店消杀_珠海工厂杀虫灭鼠_立净虫控防治服务有限公司 | 全国国际化学校_国际高中招生_一站式升学择校服务-国际学校网 | 3d打印服务,3d打印汽车,三维扫描,硅胶复模,手板,快速模具,深圳市精速三维打印科技有限公司 | 开平机_纵剪机厂家_开平机生产厂家|诚信互赢-泰安瑞烨精工机械制造有限公司 | 根系分析仪,大米外观品质检测仪,考种仪,藻类鉴定计数仪,叶面积仪,菌落计数仪,抑菌圈测量仪,抗生素效价测定仪,植物表型仪,冠层分析仪-杭州万深检测仪器网 | 雷达液位计_超声波风速风向仪_雨量传感器_辐射传感器-山东风途物联网 | 重庆磨床过滤机,重庆纸带过滤机,机床伸缩钣金,重庆机床钣金护罩-重庆达鸿兴精密机械制造有限公司 | 铝镁锰板厂家_进口钛锌板_铝镁锰波浪板_铝镁锰墙面板_铝镁锰屋面-杭州军晟金属建筑材料 | 恒压供水控制柜|无负压|一体化泵站控制柜|PLC远程调试|MCGS触摸屏|自动控制方案-联致自控设备 | 新能源汽车教学设备厂家报价[汽车教学设备运营18年]-恒信教具 | 钢结构-钢结构厂房-钢结构工程[江苏海逵钢构厂] | 分光色差仪,测色仪,反透射灯箱,爱色丽分光光度仪,美能达色差仪维修_苏州欣美和仪器有限公司 | 数控车床-立式加工中心-多功能机床-小型车床-山东临沂金星机床有限公司 | 奥运星-汽车性能网评-提供个性化汽车资讯| elisa试剂盒-PCR试剂盒「上海谷研实业有限公司」 | 生物风-销售载体,基因,质粒,ATCC细胞,ATCC菌株等,欢迎购买-百风生物 | 自动售货机_无人售货机_专业的自动售货机运营商_免费投放售货机-广州富宏主官网 | 医学模型生产厂家-显微手术模拟训练器-仿真手术模拟训练系统-北京医教科技 |