2023 年1月18日,工業和信息化部、教育部等十七部門印發《“機器人+”應用行動實施方案》(以下簡稱《方案》)。
《方案》提出,研制交互、教學、競賽等教育機器人產品及編程系統,分類建設機器人服務平臺。加大機器人教育引導,完善各級院校機器人教學內容和實踐環境,針對教學、實訓、競賽等場景開發更多功能和配套課程內容。強化機器人工程相關專業建設,提升實驗機器人產品及平臺水平,加強規范管理。推進5G、人工智能、智能語音、機器視覺、大數據、數字孿生等技術與機器人技術融合應用,積極培育機器人校園服務新模式和新形態,深化機器人在教學科研、技能培訓、校園安全等場景應用。
為響應國家大力發展新工科的號召,為高職、本科等院校的機器人與人工智能相關專業的學習和教育提供全面、良好的條件,大象機器人推出了一套基于視覺識別+機械臂的整體解決方案-人工智能套裝 2023版,實現從識別到分揀的全自動化作業,并期望最終攜手用戶一起打造產學研的閉環,形成高質量的新工科人才培養體系,助力國家科技教育的向前發展!
在已部署數千套第一代人工智能套裝后,歷經2年研發,人工智能套裝 2023版 全新升級,
●5大視覺識別算法
●6種適配機械臂
●7大硬件升級
● 8大機器人學習點!
并支持可視化軟件,是定位抓取、自動分揀模塊為一體的入門級人工智能套裝?;?a href="http://www.asorrir.com/tags/python/" target="_blank">python平臺,可通過開發軟件實現機械臂的控制,簡單易學,能夠快速入門學習人工智能基礎知識,啟發創新思維,領悟開源創意文化。
本套裝擴展性好,開放性高,可以被用于多種用途??梢子酶咝嵱柶脚_、機器人學科搭建、機器人實驗室或個人學習與使用。
2023
產品特點
01五大視覺識別算法
機器視覺是用機器來代替人眼進行目標對象識別、判斷和測量的技術。機器視覺通過計算機模擬人的視覺功能,主要技術涉及目標圖像獲取技術、圖像信息處理技術、目標對象測量與識別技術。典型機器視覺系統主要由視覺感知單元、圖像信息處理與識別單元、處理結果顯示單元和視覺系統控制單元組成。
1
顏色識別
顏色識別能力可以對輸入圖片的顏色信息進行分析,輸出顏色值(RGB形式和HEX格式)與對應的占比信息。
人工智能套裝 2023版使用eye-to-hand的模式,使用攝像頭,通過OpenCV進行顏色定位,并將符合情況的顏色物塊框出,通過相關點位計算出物塊相對于機械臂的空間坐標位置。為機械臂設置一套相關動作,根據識別的物塊顏色不同放置不同的物料框中。
2形狀識別
物體的形狀識別是模式識別的重要方向,在計算機中物體的形狀有多種表示方式,基于不同的形狀表示方式,提出了多種形狀識別方法,如基于傅里葉描述子、主分量分析、不變性距等方法。在形狀識別中,識別所基于的模式特征非常重要。
形狀識別的一般流程:形狀提取、形狀特征提取和分類識別。
3、特征點識別
FAST角點檢測,通過考察像素點與周圍領域內的16個像素點的差異來確定特征點,并且通過分割測試算法對檢測效率做了極大的提升。
圖像特征點帶你學習圖像分割、保存圖片特征。
4、yolov5識別
傳統的目標檢測系統利用分類器來執行檢測。為了檢測對象,這些系統在測試圖片的不同位置不同尺寸大小采用分類器對其進行評估。如目標檢測系統采用deformable parts models (DPM)方法,通過滑動框方法提出目標區域,然后采用分類器來實現識別。近期的R-CNN類方法采用region proposal methods,首先生成潛在的bounding boxes,然后采用分類器識別這些bounding boxes區域。最后通過post-processing來去除重復bounding boxes來進行優化。這類方法流程復雜,存在速度慢和訓練困難的問題。
我們將目標檢測問題轉換為直接從圖像中提取bounding boxes和類別概率的單個回歸問題,只需一眼(you only look once,YOLO)即可檢測目標類別和位置。
5、AR二維碼識別
在特征提取模塊中,我們使用紋理特征提取算法從原始輸入圖像中提取出多分辨率直方圖特征、局部二值模式特征和邊緣方向直方圖特征,這三種紋理特征的表達形式均為一維數組。我們將這 3 個數組連接為 1 個一維數組,作為后續分類模塊的輸入。
四種ID二維碼識別學習二維和三維世界之間的投影關系。
02、高精度相機
提供完整的視覺硬件設備,相機能夠實時的“看到”工件所處的位置以及姿態,自動判斷得到下一個抓取的工件信息。機械臂系統根據相機的分析結果,自動規劃路徑并同時避開障礙物實現對工件的抓取。
支持相機光源調整,對反光、暗色等金屬件,緊密貼合或隨意擺放物件均可有效識別相機點云成像細膩,抓取精度高,引導精準,高效準確的完成引導操作,抓取精度可到0.5mm。
03 六種適配機械臂
適配6種桌面級小型機械臂-M5Stack和樹莓派版本,采用高度集成的伺服單元,在融合機械臂的基礎原理的同時,精簡結構設計,方便進行課程教學。
(M5版本和樹莓派版本)
04、可視化軟件
支持可視化軟件操作,可以選擇對應視覺算法,全自動識別抓取放置,方便觀看效果展示,并且支持分步運行,可以只識別、只抓取、只放置,讓用戶理解每一過程原理。同時,可以通過圖形化的方式,實時顯示坐標信息,物體定位坐標與機械臂實時坐標;顯示物體識別信息,比如形狀識別三角形,會顯示形狀為三角形。
總而言之,幫助用戶實現所有可監測信息的圖形化顯示,用戶也可以在軟件控制界面下,修改XY坐標,完成精準抓取。
05、開源軟件系統ROS
軟件系統基于開源機器人操作系統ROS進行架構設計,方便利用各種人工智能開源資源,開發如視覺抓取、3D感知場景規劃等智能化應用。
2023
機械臂視覺抓取過程
01、手眼標定
手眼標定即相機內參和外參的標定,用于矯正圖像和后續數據推算。內參即與相機安裝位置無關的本身硬件參數(如焦距、像素大小等),內參標定功能包為 camera-calibration ;外參即相機在世界坐標系中的參數(如相機的位置、旋轉方向等),外參標定的功能包easy_handeye 。
02、實現物體識別與定位
視覺抓取的第一步自然是對于目標物體的識別和定位,目前可以借助開源視覺庫Opencv的內置庫以及ROS開源包進行實現。不論是通過二維圖像的深度信息或是物體的顏色形狀 還是三維點云的識別分析,相機需要傳回目標物體在世界坐標系中的位置和姿態。
對于物體的識別分析,后續可以進一步采用機器學習 / 深度學習的方法。
03、計算位置坐標
計算位置坐標,需要根據上一步相機返回物體的像素中心點坐標,再根據抓取區域中心點相對于機械臂坐標和可識別物體相對與機械臂的坐標,以及兩個aruco二維碼的相關距離數值,推算出機械臂抓抓取物體的坐標。
4.運動規劃
機械臂的運動規劃(這里包括路徑規劃)屬于上層算法內容,是機械臂算法的研究重點。
插件Movelt!為我們提供了一個易于使用的集成化開發平臺。它由一系列移動操作的功能包組成,包括運動規劃、操作控制、3D感知、運動學、動力學、控制與導航算法等。我們可以通過 Moveit! 提供的的編程接口來進行機械臂的運動規劃控制,根據第三步中的目標姿態,得到一個可達路徑。
2023
完整配套
針對實驗教學和實踐教學,完整配套系列教材、實訓指導書等,輕松開展教與學活動。
01 八大學習點
視覺教育套裝你能學到什么?
OpenCV
Python編程
ROS學習
逆運動學
手眼標定
機器視覺
末端執行器使用
AI機器視覺
機器人控制原理
末端執行器使用
02 課程大綱
2023
套裝組件
(點擊放大查看)
2023
產品參數
名稱 :人工智能套裝 2023版
整體尺寸:500X400X405mm
識別速度:顏色/形狀/二維碼:300ms特征點:600ms
識別精度:3mm
攝像頭名稱:USB無畸變攝像頭
圖像像素:2M 1080p
支持圖像格式:MJPG/YUY2
像元尺寸:3.0umx3.0um
最高幀率:MJPG:1920*1080@30fpsYUV:1920*1080@30fps
USB 協議:標準 UVC 協議
視場角度:110°無畸變
鏡頭焦距:2.8mm
支持的系統:Windows XP/7/8/10/VISTA/SEVEN/MAC、LINUX(include uvc)/樹莓派/Android 4.2+
2023
應用案例
適用于中高職、及應用型本科,面向人工智能、機器人工程、自動化等相關專業的實驗實訓教學使用。
1.某兩所中等職業學校-人工智能實訓項目
2.某中學人工智能項目
審核編輯黃宇
-
機器人
+關注
關注
213文章
29508瀏覽量
211640 -
機器視覺
+關注
關注
163文章
4514瀏覽量
122318
發布評論請先 登錄
恩智浦推出第二代OrangeBox車規級開發平臺
大象機器人攜手進迭時空推出 RISC-V 全棧開源六軸機械臂產品
【「具身智能機器人系統」閱讀體驗】1.初步理解具身智能
【「具身智能機器人系統」閱讀體驗】+數據在具身人工智能中的價值
廣汽第二代具身智能機器人亮相2024年明珠灣國際氣候投融資大會
AMD推出第二代Versal Premium系列
一加正式發布第二代東方屏,獲全球首個DisplayMate A++認證
機器視覺 歡創播報 Figure 02人形機器人發布

評論