环球电气之家-午夜精彩视频-中国专业电气电子产品行业服务网站!

產品分類

當前位置: 首頁 > 傳感測量產品 > 工業傳感器 > 視覺傳感器

類型分類:
科普知識
數據分類:
視覺傳感器

基于以太網的嵌入式視覺傳感器

發布日期:2022-10-09 點擊率:79

引言

隨著計算機科學和自動控制技術的發展,視覺系統被廣泛用于工業檢測、生物醫學、軍事偵察等領域。嵌入式視覺系統,是將圖像的采集、處理與通信功能集成于單一相機內,從而提供了具有多功能、模塊化、高可靠性、易于實現的機器視覺解決方案。同時,視覺傳感器需要通過網絡化設計完成控制信息、圖像數據的通信任務,網絡通信裝置是視覺傳感器的重要組成部分。筆者采用DSP和CPLD作為核心芯片來控制圖像采集處理和傳輸,采集的圖像經DSP的處理后,可經以太網傳輸至微機進一步處理,或與其他視覺系統、自動化檢測裝置通信,組成分布式監測網絡。本系統的設計優點為:

·使用CMOS為圖像傳感器直接采集數字圖像,采用高速DSP和CPLD作為核心芯片來控制圖像采集和處理,簡化了電路的復雜度,提高了系統的集成度,降低了成本。 ?在DSP內對采集到的圖像實現快速圖像的預處理,提高了系統的智能化。

·通過以太網將圖像數據傳輸到聯網計算機,利于圖像的傳輸、保存和與其他視覺傳感器通信交換數據,組成視覺網絡。并可與PLC、機器人和其他自動化裝置通信。

系統設計

圖1為系統框圖,系統通過DSP給CPLD發出一個采集命令,由CPLD控制CMOS圖像傳感器向FIFO寫入圖像數據,同時DSP通過DMA將圖像轉移至SDRAM中并進行圖像處理,在處理結束后,將處理的結果通過以太網傳給微機或其他設備,對其I/O接口經擴展后,可與PLC等執行裝置相連,被外部執行器觸發,完成圖像的采集處理,達到控制檢測目的。


圖1 系統框圖

圖像采集過程

圖像采集過程主要通過DSP給CPLD(ALTERA的MAX II系列 EPM240)發送命令字,包括單幀采集、連續采集等控制命令。每次采集的圖像時都先復位FIFO,防止上一次采集過程出錯有數據滯留而導致本次采集的圖像出錯。CPLD采集程序的仿真波形如圖2所示,可以看出當采集單幀數據時,CPLD通過控制連續兩個VSYNC(幀同步信號)間的FIFO( CYPRESS的CYCY7C4291V)的/WE(寫使能信號)低有效來達到圖像采集的目的。OV7640每幀圖像的時間為33ms(30f/s),工作在黑白模式下,每幅圖像數據有300K(640×480),即9.3MByte/s,而DSP讀取的速度可以到66.7Mbyte/s,若采用16Bit總線寬度的FIFO,則可達到133Mbyte/s。本系統中由CPLD對圖像的行進行計數,為保證圖像數據不溢出FIFO(FIFO為128K字節),選取每80行圖像數據觸發一次DMA傳輸(DMA選擇為外觸發模式),每幅圖像分成6次傳輸(共480行數據)。


圖2 CPLD采集程序的仿真波形

以太網的圖像傳輸

本系統的以太網設計,采用Wiznet公司全功能硬件協議棧芯片W5100。W5100內有16K的發送/接收緩存,支持TCP、UDP、ICMP、IPV4 ARP、IGMP等協議,本系統中采用TCP/IP協議,接收上位機的命令并執行相應的圖像采集和處理任務。Wiznet公司提供了完整的Socket API函數,其工作方式類似于Windows的Socket API,程序在TI公司的CCS集成開發環境下,非常方便用C語言編寫。圖3是利用VC編寫的基于異步Socket的系統軟件。在不同的命令代碼下上傳圖像。如果所示輸入命令1,可以上傳單幅不加任何圖像處理的灰度圖。


圖3 帶有命令選項的圖像接受軟件

軟件流程

系統的軟件流程如圖4所示。系統初始化后配置網絡設置,建立命令Socket,Socket連接成功后處在TCP連接狀態中。當接收到命令時,通過中斷觸發使DSP從W5100讀取命令字,根據命令字做出相應的操作,添加圖像預處理程序。然后關閉命令Socket,啟動數據Socket進行數據傳輸,發送處理后的圖像數據以便上位機進行更高級的圖像處理,最終得到用戶想要的結果和數據。


圖4 軟件流程圖

圖像采集和處理程序示例

本系統可以應用于視覺系統的多個領域,通過開發標準的軟件處理模塊,如幾何邊緣提取、Blob、灰度直方圖、OCV/OCR、簡單的定位和搜索等,由用戶根據實際的測量需求選擇相應的處理模塊,由上位機編譯成相應的固件并下載到系統中,從而實現特定功能的視覺檢測。目前系統開發,只能完成特定的幾種功能,以下以圓盤的直徑檢測為例,介紹系統的處理效果。

算法的基本思想是:先對采集的圖像進行濾波,再用邊緣檢測算法檢測出圓的邊緣,最后再利用圓檢測算法算出圓的外徑和孔徑。

檢測基本過程如下:

標定

在能夠進行檢測之前,系統必須要標定。標定決定圖像與物理世界之間的映射關系。因此,把圖像中的每個點與一定的物理世界坐標以及反過來建立一一映射。使用一個無畸變的理想二維標定平面來進行標定。首先,可以使用一個標準的網格變換把物理坐標變換到目標平面;然后使用非線性映射把這些中間坐標變換到圖像平面。用于變換運算的參數可以通過對一個包含已知位置信息的已知特征標定物成像來獲取。非線性變換是通過在確定的測量點之間進行線性插補來實現。

圖像預處理

圖5為采集到的原始圖象。由于CMOS傳感器本身的噪聲或系統的擾動等其它原因,原始圖像中會含有噪聲,所以要先對原始圖像做低通濾波處理,可采用3×3模板的低通濾波器,或選擇一些其它的更為復雜的濾波器,如自適應濾波器。


圖5 原始采集圖片

邊緣檢測

采用牛頓插值法對圖像實現高精度的邊緣檢測,具體計算步驟如下:

·搜索像邊緣過渡區計算向量

根據像邊緣的位置沿著灰度值對應的行或列從亮區向暗區搜索,若相鄰的兩個點的灰度值下降幅度大于閾值(閾值應由實驗確定),即認為該點為像邊緣過渡區的起始節點,過渡區包含有3~4個節點,把其定義為一維數組,以像邊緣過渡區起始節點為首項,沿灰度值矩陣的行或列順序存放由亮到暗像邊緣的灰度值。

·使用牛頓插值函數實現像邊緣光強函數軟件解調設向量u[m]={u1,u2,......un},m=0,1,.......n。

在基點m=0處向前5階差分為:

D1u0=u1-u0

D2u0=u2-u1+u0

D3u0=u3-3u2+u1-u0 (1)

D4u0=u4-4u3+6u2-4u1+u0

D5u0=u5-5u4+10u3-10u2+5u1-u0

設t為[0.5]內的連續變量,則五階牛頓向前插值函數為:

v(t)=u0+tD1u0+(t-1)D2u0/2+t(t-1)(t-2)D3u0/6+t(t-1)(t-2)(t-3)D4u0/24+t(t-1)(t-2)(t-3)(t-4)D5u0/120 (2)

·確定像邊緣特征點的坐標

式(2)給出了表征象邊緣位置的連續函數,對其求二階導數,即,

d2u/dt2=D2u0+(t-1)D3u0+(12t2-36t+22)D4u0/24+(20t3-120t2+210t-100)D5u0/120 (3)

其零交叉點(d2u/dt2=0)即為特征點。圖6為邊緣檢測的效果圖。


圖6 邊緣檢測效果圖

直徑的計算

通過圓檢測算法,計算出圓的外徑和內徑。限于篇幅,具體算法在此不作詳細介紹。

在實驗中,使用的f=35mm的鏡頭,采用LED環形光源從底部同軸照明,圖像分辨率為640×480,相面尺寸為3.6mm×2.7mm。系統標定在XY方向上每像素為0.0375mm。對標稱外徑為15mm,內徑為9mm的元件做了10次檢測,檢測直徑的平均外徑值為401.6像素即15.06mm,內徑為241.3像素即9.049mm。

實驗結果

圖7為我們設計的視覺傳感器樣機的系統實物圖。其由三部分組成,分別為主板、電源板和CMOS電路板。采用抓包程序Ethereal對數據傳輸速度進行了測試。我們分別對發送數據量為100kbyte,200kbyte和300kbyte進行了測試,實驗結果如表1所示,對于本系統可以達到10f/s的圖像傳輸速度。

圖7 系統實物圖

表1 傳輸數據速度實驗結果

結語

本文介紹的的視覺系統,在硬件系統,采用CMOS圖像傳感器,CPLD時序控制,以及高速DSP和以太網高速數據傳輸,構成了一個典型嵌入式視覺系統。通過以太網接口可組成分布式視覺檢測網絡。對于簡單的視覺檢測任務,系統可滿足在線檢測的要求。當然,要想最終脫離微機高速的完成復雜的圖像處理任務,單DSP還不能滿足要求。今后改進是添加FPGA實現FPGA與DSP融合的處理系統以及多DSP并行處理系統,實現高速嵌入式視覺系統。

參考文獻:
1. TMS320C5000系列DSPs原理與應用(第2版),電子工業出版社,2003
2. 趙建、劉濟林、于海濱,基于以太網的立體視覺圖像采集系統,電視技術,2005,12
3. 張飛舟、鄧旭明,嵌入式工業以太網接口開發與應用,計算機工程,2003,29(16)
4. WIZNET Corporation .W5100 Datasheet (version 1.0.1). 2006
5. Wang Xu-Fa,Zhuang Zhen-Quan,Wang Dong-Sheng. Image Processing Programming in C.Hefei: Publishing House of University of Science & Technology of China.1994(e

下一篇: PLC、DCS、FCS三大控

上一篇: 索爾維全系列Solef?PV

推薦產品

更多
主站蜘蛛池模板: 洗瓶机厂家-酒瓶玻璃瓶冲瓶机-瓶子烘干机-封口旋盖压盖打塞机_青州惠联灌装机械 | 日本东丽膜_反渗透膜_RO膜价格_超滤膜_纳滤膜-北京东丽阳光官网 日本细胞免疫疗法_肿瘤免疫治疗_NK细胞疗法 - 免疫密码 | 汽车整车综合环境舱_军标砂尘_盐雾试验室试验箱-无锡苏南试验设备有限公司 | 偏心半球阀-电动偏心半球阀-调流调压阀-旋球阀-上欧阀门有限公司 | 大立教育官网-一级建造师培训-二级建造师培训-造价工程师-安全工程师-监理工程师考试培训 | 德国EA可编程直流电源_电子负载,中国台湾固纬直流电源_交流电源-苏州展文电子科技有限公司 | 青岛侦探_青岛侦探事务所_青岛劝退小三_青岛调查出轨取证公司_青岛婚外情取证-青岛探真调查事务所 | 长沙印刷厂-包装印刷-画册印刷厂家-湖南省日大彩色印务有限公司 青州搬家公司电话_青州搬家公司哪家好「鸿喜」青州搬家 | 临沂招聘网_人才市场_招聘信息_求职招聘找工作请认准【马头商标】 | 超声波分散机-均质机-萃取仪-超声波涂料分散设备-杭州精浩 | 东莞工厂厂房装修_无尘车间施工_钢结构工程安装-广东集景建筑装饰设计工程有限公司 | 河南卓美创业科技有限公司-河南卓美防雷公司-防雷接地-防雷工程-重庆避雷针-避雷器-防雷检测-避雷带-避雷针-避雷塔、机房防雷、古建筑防雷等-山西防雷公司 | 电动打包机_气动打包机_钢带捆扎机_废纸打包机_手动捆扎机 | 电子天平-华志电子天平厂家 | 特种阀门-调节阀门-高温熔盐阀-镍合金截止阀-钛阀门-高温阀门-高性能蝶阀-蒙乃尔合金阀门-福建捷斯特阀门制造有限公司 | 环氧乙烷灭菌器_压力蒸汽灭菌器_低温等离子过氧化氢灭菌器 _低温蒸汽甲醛灭菌器_清洗工作站_医用干燥柜_灭菌耗材-环氧乙烷灭菌器_脉动真空压力蒸汽灭菌器_低温等离子灭菌设备_河南省三强医疗器械有限责任公司 | 杭州可当科技有限公司—流量卡_随身WiFi_AI摄像头一站式解决方案 | 沈阳缠绕包装机厂家直销-沈阳海鹞托盘缠绕包装机价格 | 培训无忧网-教育培训咨询招生第三方平台 | 吸污车_吸粪车_抽粪车_电动三轮吸粪车_真空吸污车_高压清洗吸污车-远大汽车制造有限公司 | 北京四合院出租,北京四合院出售,北京平房买卖 - 顺益兴四合院 | 蓝鹏测控平台 - 智慧车间系统 - 车间生产数据采集与分析系统 | 南京和瑞包装有限公司| 二次元影像仪|二次元测量仪|拉力机|全自动影像测量仪厂家_苏州牧象仪器 | 深圳市超时尚职业培训学校,培训:月嫂,育婴,养老,家政;化妆,美容,美发,美甲. | 环氧树脂地坪漆_济宁市新天地漆业有限公司| 飞行者联盟-飞机模拟机_无人机_低空经济_航空技术交流平台 | 耐火砖厂家,异形耐火砖-山东瑞耐耐火材料厂 | Copeland/谷轮压缩机,谷轮半封闭压缩机,谷轮涡旋压缩机,型号规格,技术参数,尺寸图片,价格经销商 CTP磁天平|小电容测量仪|阴阳极极化_双液系沸点测定仪|dsj电渗实验装置-南京桑力电子设备厂 | 蒸汽热收缩机_蒸汽发生器_塑封机_包膜机_封切收缩机_热收缩包装机_真空机_全自动打包机_捆扎机_封箱机-东莞市中堡智能科技有限公司 | 物联网卡_物联网卡购买平台_移动物联网卡办理_移动联通电信流量卡通信模组采购平台? | 聚合氯化铝厂家-聚合氯化铝铁价格-河南洁康环保科技 | 手术室净化厂家_成都实验室装修公司_无尘车间施工单位_洁净室工程建设团队-四川华锐16年行业经验 | 希望影视-高清影视vip热播电影电视剧免费在线抢先看 | OLChemim试剂-ABsciex耗材-广州市自力色谱科仪有限公司 | 行吊_电动单梁起重机_双梁起重机_合肥起重机_厂家_合肥市神雕起重机械有限公司 | 铝箔袋,铝箔袋厂家,东莞铝箔袋,防静电铝箔袋,防静电屏蔽袋,防静电真空袋,真空袋-东莞铭晋让您的产品与众不同 | UV固化机_UVLED光固化机_UV干燥机生产厂家-上海冠顶公司专业生产UV固化机设备 | 农业仪器网 - 中国自动化农业仪器信息交流平台| 滚筒烘干机_转筒烘干机_滚筒干燥机_转筒干燥机_回转烘干机_回转干燥机-设备生产厂家 | 校车_校车价格_19座幼儿园校车_幼儿园校车_大鼻子校车 |