隨著人工智能、機器學習以及傳感器技術的持續迭代升級,機器人產業正處于高速發展的黃金時期。智能機器人的應用領域不斷拓展,功能也日益豐富多樣。具身機器人、機器狗、無人機、工業機械臂等各類智能機器人,正逐步融入人們的日常生活。從協助家務勞動,到承擔醫療配送任務,再到推動農業自動化進程,智能機器人已在家居、醫療、農業、救援等多個領域,發揮著不可或缺的重要作用。?
人形機器人是機器人技術與人工智能深度融合的產物,近年來發展勢頭極為迅猛。《人形機器人產業研究報告》指出,中國人形機器人市場規模預計在 2029 年將達到 750 億元,到 2035 年更有望突破 3000 億元。在電子發燒友網《人形機器人的電機控制和傳感器》專題中,思特威高級銷售總監宗翔表示,人形機器人的不同模塊依賴不同類型的芯片來實現其功能,其中包括 SoC 芯片、圖像傳感芯片、觸覺傳感芯片、電池管理芯片等。思特威作為一家專注于 CMOS 圖像傳感器芯片研發的企業,旗下的 SmartGS?-2 Plus 系列全局快門圖像傳感器,在智能機器人領域展現出極高的適配性。
宗翔指出,在實際工作中,智能機器人需要頻繁與現實世界進行交互。人形機器人與現實世界的交互,在很大程度上依賴于機器人的視覺成像技術。清晰、準確、高效且穩定的視覺感知能力,對于機器人完成避障、定位等交互任務至關重要。CMOS 圖像傳感器作為機器人視覺感知能力的核心部件,就如同機器人的 “電子眼”。
思特威作為行業領先的CMOS 圖像傳感器供應商,基于 SmartGS?-2 Plus 技術平臺,已推出了 SC038HGS(0.3MP)、SC133HGS(1.3MP)與 SC233HGS(2.3MP)等一系列全局快門產品。這些產品集高感光度、高動態范圍、高幀率等諸多優勢于一身,憑借出色的成像效果,能夠充分滿足各類智能機器人在避障識別與 3D 定位感知方面的需求,助力機器人實現精準的現實交互。
SmartGS?-2 Plus 系列產品作為全局快門(Global Shutter)圖像傳感器,能夠有效抑制成像過程中出現的運動形變與拖尾模糊等問題,實現高速且精準的成像。因此,在實際作業場景中,該系列產品能夠保障智能機器人對運動物體進行高清、無形變的圖像捕捉,實現高效移動視物。這不僅大幅提升了機器人對周圍環境判別的準確性,也顯著提高了其避障與定位識別的效率。
此外,人形機器人在實際作業中常常面臨昏暗、無可見光源等各種復雜光線條件,此時 CIS 芯片的感光能力與動態范圍就顯得尤為重要。SC038HGS、SC133HGS 與 SC233HGS 具備在可見光和近紅外光下的雙重超高感光度,同時有著出色的動態范圍表現,能夠幫助機器人實現無懼明暗的高清圖像捕捉能力,為智能機器人行動提供精準的視覺依據。
宗翔認為,為提升機器人現實交互的精度和效率,人形機器人的視覺傳感正朝著更高精度與處理能力的 3D 視覺感知系統發展。例如目前已被廣泛應用的雙目立體視覺模組,就是一種 3D 視覺感知系統,并且仍在不斷升級發展之中。未來人形機器人的視覺傳感技術,將不斷朝著模擬并超越人眼綜合視覺能力的方向發展,通過兩個或多個攝像頭,為機器人提供豐富而準確的環境理解能力,以應對復雜精密的識別工作需求。
在實際應用中,思特威聯合飛凌微圍繞 A1 芯片推出了一系列端側 AI SoC + Sensor組合方案:?
·智能硬件領域:A1 芯片適配 0.3MP - 2MP 全局快門 CMOS 圖像傳感器,形成單目 / 雙目智能視覺感知模組方案。以 AI 寵物機器人為例,A1 芯片在精準處理影像的同時,運行人臉 / 物體檢測識別等視覺算法,實現設備在端側對用戶表情、狀態和情緒的實時感知,減輕設備系統后端的運算壓力。單目模組方案兼具視頻拍照與檢測識別功能,有效節省小體積智能硬件的系統架構設計與硬件空間。?
·智能家居領域:將 A1 AI SoC 芯片與 3MP - 6MP 低功耗快啟 CMOS 圖像傳感器及魚眼鏡頭相結合。當檢測到視野范圍內有人出現時,系統即刻喚醒并啟動實時感知。A1 芯片運行暗光降噪、畸變矯正等人形檢測算法,助力智能空調、電扇等設備確定人員位置,調整運行狀態,為用戶營造智能化的舒適體驗。?
·工業掃碼領域:同樣適配 0.3MP - 2MP 全局快門 CMOS 圖像傳感器,A1 芯片通過 AI ISP 功能提升影像清晰度,并運行條碼讀取識別、計數檢測等輕量級算法,在工業相機端側實現快速、精準的掃碼識別與檢測,有效提升工業機器視覺系統的運行效率與成本效益。例如,在自動化生產線上,能快速準確地完成掃碼流程。?
·夜視模組領域:A1 芯片搭配 4MP - 8MP 夜視全彩 CMOS 圖像傳感器,借助 AI ISP 功能進行優化處理,為多種夜視場景攝像頭提供清晰、層次分明且低噪點的夜視全彩影像。?
宗翔認為,隨著人工智能、機器學習以及傳感器技術的不斷迭代升級,機器人產業也將步入高速發展的黃金時期,未來增長潛力巨大。在此過程中,思特威具有獨特的競爭優勢。
在圖像傳感器技術創新方面,思特威憑借成熟的 SmartGS?-2 Plus 全局快門技術,能夠有效避免運動失真問題,為機器人的避障、步態調整等關鍵功能,提供穩定可靠的視覺輸入。此外,依托思特威的近紅外增強、高動態范圍、暗光成像等多項先進技術,使機器人在暗光環境下的障礙物識別以及眼球追蹤與手勢識別等功能的識別精度不斷提升。
在產業協同方面,思特威將積極與模組、機器人終端廠商深入溝通,從技術、需求、應用場景等維度,剖析機器人市場發展趨勢。通過聯合開發新技術、定制深度適配產品,助力機器人產業升級。?
人形機器人是機器人技術與人工智能深度融合的產物,近年來發展勢頭極為迅猛。《人形機器人產業研究報告》指出,中國人形機器人市場規模預計在 2029 年將達到 750 億元,到 2035 年更有望突破 3000 億元。在電子發燒友網《人形機器人的電機控制和傳感器》專題中,思特威高級銷售總監宗翔表示,人形機器人的不同模塊依賴不同類型的芯片來實現其功能,其中包括 SoC 芯片、圖像傳感芯片、觸覺傳感芯片、電池管理芯片等。思特威作為一家專注于 CMOS 圖像傳感器芯片研發的企業,旗下的 SmartGS?-2 Plus 系列全局快門圖像傳感器,在智能機器人領域展現出極高的適配性。

思特威高級銷售總監宗翔
視覺傳感器在人形機器人系統中的作用
人形機器人由多個子系統構成,包括傳動系統、伺服系統、感知系統、控制系統。其中,感知系統負責采集和處理環境信息,如圖像、聲音、觸覺和力量等,以幫助人形機器人更好地理解周圍環境,實現安全高效的人機交互。宗翔指出,在實際工作中,智能機器人需要頻繁與現實世界進行交互。人形機器人與現實世界的交互,在很大程度上依賴于機器人的視覺成像技術。清晰、準確、高效且穩定的視覺感知能力,對于機器人完成避障、定位等交互任務至關重要。CMOS 圖像傳感器作為機器人視覺感知能力的核心部件,就如同機器人的 “電子眼”。
思特威作為行業領先的CMOS 圖像傳感器供應商,基于 SmartGS?-2 Plus 技術平臺,已推出了 SC038HGS(0.3MP)、SC133HGS(1.3MP)與 SC233HGS(2.3MP)等一系列全局快門產品。這些產品集高感光度、高動態范圍、高幀率等諸多優勢于一身,憑借出色的成像效果,能夠充分滿足各類智能機器人在避障識別與 3D 定位感知方面的需求,助力機器人實現精準的現實交互。
SmartGS?-2 Plus 系列產品作為全局快門(Global Shutter)圖像傳感器,能夠有效抑制成像過程中出現的運動形變與拖尾模糊等問題,實現高速且精準的成像。因此,在實際作業場景中,該系列產品能夠保障智能機器人對運動物體進行高清、無形變的圖像捕捉,實現高效移動視物。這不僅大幅提升了機器人對周圍環境判別的準確性,也顯著提高了其避障與定位識別的效率。
此外,人形機器人在實際作業中常常面臨昏暗、無可見光源等各種復雜光線條件,此時 CIS 芯片的感光能力與動態范圍就顯得尤為重要。SC038HGS、SC133HGS 與 SC233HGS 具備在可見光和近紅外光下的雙重超高感光度,同時有著出色的動態范圍表現,能夠幫助機器人實現無懼明暗的高清圖像捕捉能力,為智能機器人行動提供精準的視覺依據。
宗翔認為,為提升機器人現實交互的精度和效率,人形機器人的視覺傳感正朝著更高精度與處理能力的 3D 視覺感知系統發展。例如目前已被廣泛應用的雙目立體視覺模組,就是一種 3D 視覺感知系統,并且仍在不斷升級發展之中。未來人形機器人的視覺傳感技術,將不斷朝著模擬并超越人眼綜合視覺能力的方向發展,通過兩個或多個攝像頭,為機器人提供豐富而準確的環境理解能力,以應對復雜精密的識別工作需求。
視覺傳感器和 AI 的融合
在人形機器人領域,視覺傳感器與 AI 算法的融合能夠幫助更好地實現環境感知。宗翔稱,在 AI 視覺布局上,思特威通過與子公司飛凌微合作,借助其推出的集成高性能 AI ISP 和輕算力 NPU 的 AI SoC 芯片 A1,搭配 0.3MP 至 8MP 不同分辨率的 CIS,能夠全面滿足不同場景對 AI 視覺處理的多樣化需求。在實際應用中,思特威聯合飛凌微圍繞 A1 芯片推出了一系列端側 AI SoC + Sensor組合方案:?
·智能硬件領域:A1 芯片適配 0.3MP - 2MP 全局快門 CMOS 圖像傳感器,形成單目 / 雙目智能視覺感知模組方案。以 AI 寵物機器人為例,A1 芯片在精準處理影像的同時,運行人臉 / 物體檢測識別等視覺算法,實現設備在端側對用戶表情、狀態和情緒的實時感知,減輕設備系統后端的運算壓力。單目模組方案兼具視頻拍照與檢測識別功能,有效節省小體積智能硬件的系統架構設計與硬件空間。?
·智能家居領域:將 A1 AI SoC 芯片與 3MP - 6MP 低功耗快啟 CMOS 圖像傳感器及魚眼鏡頭相結合。當檢測到視野范圍內有人出現時,系統即刻喚醒并啟動實時感知。A1 芯片運行暗光降噪、畸變矯正等人形檢測算法,助力智能空調、電扇等設備確定人員位置,調整運行狀態,為用戶營造智能化的舒適體驗。?
·工業掃碼領域:同樣適配 0.3MP - 2MP 全局快門 CMOS 圖像傳感器,A1 芯片通過 AI ISP 功能提升影像清晰度,并運行條碼讀取識別、計數檢測等輕量級算法,在工業相機端側實現快速、精準的掃碼識別與檢測,有效提升工業機器視覺系統的運行效率與成本效益。例如,在自動化生產線上,能快速準確地完成掃碼流程。?
·夜視模組領域:A1 芯片搭配 4MP - 8MP 夜視全彩 CMOS 圖像傳感器,借助 AI ISP 功能進行優化處理,為多種夜視場景攝像頭提供清晰、層次分明且低噪點的夜視全彩影像。?
宗翔認為,隨著人工智能、機器學習以及傳感器技術的不斷迭代升級,機器人產業也將步入高速發展的黃金時期,未來增長潛力巨大。在此過程中,思特威具有獨特的競爭優勢。
在圖像傳感器技術創新方面,思特威憑借成熟的 SmartGS?-2 Plus 全局快門技術,能夠有效避免運動失真問題,為機器人的避障、步態調整等關鍵功能,提供穩定可靠的視覺輸入。此外,依托思特威的近紅外增強、高動態范圍、暗光成像等多項先進技術,使機器人在暗光環境下的障礙物識別以及眼球追蹤與手勢識別等功能的識別精度不斷提升。
在產業協同方面,思特威將積極與模組、機器人終端廠商深入溝通,從技術、需求、應用場景等維度,剖析機器人市場發展趨勢。通過聯合開發新技術、定制深度適配產品,助力機器人產業升級。?
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。
舉報投訴
-
機器視覺
+關注
關注
163文章
4508瀏覽量
122212 -
CIS
+關注
關注
4文章
207瀏覽量
30008 -
人形機器人
+關注
關注
7文章
684瀏覽量
17454
發布評論請先 登錄
相關推薦
熱點推薦
肇觀電子賦能人形機器人視覺技術革新
近日,央視財經頻道《經濟半小時》欄目播出《“小”零件里見“大”勢:人形機器人加速“進化”》專題報道,聚焦人形機器人行業應用及產業趨勢,重點介紹了肇觀電子在
伺服電動缸在人形機器人中的應用
集成高精密減速器、高性能電機、絲桿機構、傳感器以及伺服控制系統,伺服電動缸在保證更小體積的基礎上實現了驅控一體化,從而滿足了人形機器人復雜場景的應用需求。四、提升
發表于 02-06 09:04
【「具身智能機器人系統」閱讀體驗】2.具身智能機器人的基礎模塊
具身智能機器人的基礎模塊,這個是本書的第二部分內容,主要分為四個部分:機器人計算系統,自主機器人的感知系統,自主
發表于 01-04 19:22
【「具身智能機器人系統」閱讀體驗】2.具身智能機器人大模型
近年來,人工智能領域的大模型技術在多個方向上取得了突破性的進展,特別是在機器人控制領域展現出了巨大的潛力。在“具身智能機器人大模型”部分,作者研究并探討了大模型如何提升
發表于 12-29 23:04
【「具身智能機器人系統」閱讀體驗】+初品的體驗
的學習資源,以培養更多的專業人才。隨著具身智能機器人技術對社會的影響越來越大,該書還可以向公眾普及相關的知識,以提升社會對新技術的認知和接受度,從而為技術的發展創造良好的社會環境。
隨著具身智能
發表于 12-20 19:17
解鎖機器人視覺與人工智能的潛力,從“盲人機器”改造成有視覺能力的機器人(上)
正如人類依賴眼睛和大腦來解讀世界,機器人也需要自己的視覺系統來有效運作。沒有視覺,機器人就如同蒙上雙眼的人類,僅能執行預編程的命令,容易碰撞障礙物,

適用于機器人視覺系統的LED光源
工業光源在機器視覺系統中扮演著至關重要的角色,它們直接影響到圖像采集的質量以及后續圖像處理的效率和準確性。在自動化生產線上,光源用于輔助機器人進行精確的零件裝配。通過提供穩定且高質量的照明,光源幫助

水星Mercury X1輪式人形機器人結合openc算法&STag標記碼視覺系統實現精確抓取!
本案例展示了如何利用視覺系統提升機械臂的抓取精度,成功實現了人形機器人的雙臂抓取不在局限于單臂抓取。 引言 如今市面上已經有了許多不同類型的人形機器

機器視覺 歡創播報 Figure 02人形機器人發布
,正式揭開了其第二代人形機器人Figure 02的神秘面紗。這款被譽為“地球上最先進的AI硬件”的機器人,不僅標志著人工智能技術的又一里程碑,也預示著人形

NVIDIA 加速人形機器人發展
—SIGGRAPH— 當地時間 2024 年 7 月 29 日— 為加速全球人形機器人的發展,NVIDIA 于今日宣布,為全球領先的機器人制造商、AI 模型開發者和軟件制造商提供一套
發表于 07-30 09:15
?899次閱讀

人形機器人感知系統的特點:多模態感知、高精度、實時性
優必選、小米科技、宇樹科技等。 ? 人形機器人感知系統包括哪些傳感器和算法 ? 人形機器人感知系統
人形機器人的未來:從英偉達到特斯拉的機器人革命
在科技飛速發展的今天,機器人技術正逐步從科幻走向現實。近日,英偉達CEO黃仁勛在一次采訪中大膽預測,機器人技術將在未來2-3年內取得重大突破,并預言
評論