女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

視網膜形態芯片及其不同的圖像信息處理方式

ExMh_zhishexues ? 來源:知社學術圈 ? 作者:知社學術圈 ? 2020-07-01 16:22 ? 次閱讀

在人腦處理的信息中,超過80%都是通過眼睛獲得的。人眼不僅可以進行信息的探測和同步處理,而且整體功耗極小(遠小于20瓦)。相比而言,傳統的機器視覺系統需要先探測再處理,使用的圖像傳感器在探測目標圖像的同時會產生大量冗余信息,此類信息通過有限的帶寬傳輸給所連接的計算機進行處理和分析,從而導致較大的時間延遲和較高的功耗。因此,構建一個可以媲美人眼、具備同步進行信息探測和處理功能的類腦視覺傳感器是人們一直追求的夢想,對于智能工業、自動駕駛、智能安防等應用的發展也至關重要。近日,南京大學物理學院繆峰教授團隊基于二維材料異質結,在可重構類腦視覺傳感器領域取得重要進展。

二維材料有望成為后摩爾時代重要的基礎電子材料,該領域的發展也讓人們可以對原子層材料進行樂高式的堆疊和集成。近年來,南京大學繆峰團隊(https://nano.nju.edu.cn)利用“原子樂高”分別在耐高溫憶阻器(Nature Electronics 2018)、彈道雪崩探測器件(Nature Nanotechnology 2019)、室溫高靈敏紅外探測器(Science Advances 2017)等方向取得突破。

在此基礎上,該團隊近日提出,利用二維材料范德華異質結器件的結構特點和可調的光響應特性,能夠實現對人眼視網膜的層狀結構和感光細胞、雙極細胞的生物特性模擬,基于這種類視網膜形態器件,團隊進一步構建了能夠對感知的圖片信息進行同步處理的類腦視覺器件陣列。該工作有望為未來開發基于范德華異質結的新型類腦視覺芯片提供物理和技術基礎。相關研究成果以《Gate tunable van der Waals heterostructure for reconfigurable neural network vision sensor》(基于柵極可調范德華異質結的可重構神經網絡視覺傳感器)為題于 2020年6月24日發表在Science Advances上。南京大學物理學院博士生王晨宇和梁世軍副研究員為共同第一作者,繆峰教授和美國麻省大學的楊建華教授為該工作的共同通訊作者,該工作同時得到了王振林教授課題組、陳坤基教授課題組和王肖沐教授課題組的實驗協助,和國家杰出青年科學基金、國家自然科學基金等項目的資助,以及微結構科學與技術協同創新中心的支持。

研究成果

人類視覺系統強大的信息處理能力很大程度上依賴于視網膜的結構和功能。視網膜中的主要細胞包括感光細胞、雙極細胞等,這些細胞之間是垂直分層分布的結構。光透過瞳孔入射到視網膜上后,感光細胞將入射光轉換為電學信號,流經雙極性細胞,利用雙極性細胞的生物特性對電學信息進行一定的加工和處理,加工后的圖像信息僅僅保留其主要的特征,再傳輸至大腦皮層進行進一步的圖像處理和理解。通過這種方式,視網膜在一定程度上實現了信息探測和處理的同步進行。為了實現對視網膜結構和功能的逼真模擬,在該工作中,繆峰團隊提出可以通過“原子樂高”的方式搭建基于二維材料垂直異質結的類腦視覺傳感器,這些垂直結構不僅能夠自然地模仿視網膜的垂直分層結構,而且異質結中包含的不同二維材料可被用來模擬視網膜中不同細胞的功能。

在實驗中,繆峰團隊首先將機械剝離的薄層硒化鎢和氮化硼以及氧化鋁制備成垂直異質結器件。該異質結器件在無背柵或者正背柵電壓作用下,呈現出正的光電導行為,類似于雙極細胞的正的光響應;當所加背柵電壓為負的時候,器件展現出了負光電響應特征與雙極細胞的負響應類似。研究團隊通過一系列的對比實驗結果,指出器件的負光學響應來源于光誘發帶電雜質產生的電場屏蔽效應。通過控制垂直異質結器件的柵壓,團隊首次實現了對感光細胞和雙極細胞的生物功能的模擬,器件的響應時間和功耗均接近人類視網膜的水平(圖1)。

圖 1. 視網膜和視網膜形態器件。(a)視網膜的垂直分層結構包括了視錐細胞和雙極性細胞以及視神經節細胞;(b)雙極性細胞在不同刺激條件下所具有的生物光學響應特征;(c)類視網膜形態器件的光學圖;(d)垂直異質結器件在不同柵壓作用下展現出不同的光學響應,類似于視網膜結構中雙極性細胞的生物特征。

進一步,研究團隊將垂直異質結器件組裝成 3×3 的一個陣列,利用異質結器件柵壓可調的光電響應特征,將圖像處理中常用的數學卷積核映射到3×3 的器件陣列中,實現了可重構的圖像信息處理功能(圖2),包括邊緣增強、圖像風格化、圖像強度校正等。研究發現這些實驗結果與采用相同卷積核處理后的模擬結果一致,這表明基于垂直異質結陣列能夠被用于在硬件上直接進行圖片信息的處理。

圖 2. 可重構的視網膜形態芯片及其不同的圖像信息處理方式。(a)背柵獨立控制的可重構視覺傳感器陣列示意圖;利用傳感器陣列對南京大學校徽圖片進行(b)圖像風格化(c)邊緣增強(d)強度校正處理,所處理后的圖片信息和采用相同卷積核的模擬結果一致。

基于范德華異質結器件的功能應用除了同步的探測和信息的處理之外,研究團隊發現器件陣列還可以用于圖片的分類任務。通過將器件電導作為神經網絡的權值,背柵的調節變化作為更新神經網絡權值的一種手段,范德華異質結器件陣列可以執行神經網絡的功能。研究團隊在實驗中采用軟件輔助硬件的訓練方法實現了對輸入圖像“N”,” J”, “U”字母的快速識別(圖3)。這一項工作從原理上證明,利用范德華異質結的特性模擬人類視網膜結構和功能的研究思路有望將來被用來實現新型的類腦視覺芯片。

圖 3. 基于范德華異質結視覺形態的傳感器神經網絡及訓練示意圖和識別結果。(a)待識別的圖片字母信息;(b)異質結視覺形態傳感器神經網絡訓練示意圖;(c)N”,” J”, “U”三類字母平均識別結果與訓練次數的關系;(d)N”,” J”, “U”三類字母的分類情況與訓練次數的關系。
責任編輯:pj

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 圖像傳感器
    +關注

    關注

    68

    文章

    1963

    瀏覽量

    130416
  • 機器視覺
    +關注

    關注

    163

    文章

    4510

    瀏覽量

    122254
  • 自動駕駛
    +關注

    關注

    788

    文章

    14198

    瀏覽量

    169531
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    基于LockAI視覺識別模塊:C++使用圖像的統計信息

    }/lib/cmake/lockzhiner_vision_module\") find_package(LockzhinerVisionModule REQUIRED) ? # 圖像信息處理
    發表于 05-08 10:31

    經顱電刺激系列之視功能的電刺激神經調控

    視覺通路人類獲取外界信息的80%依賴視覺系統。光線進入眼球后,經過角膜、晶狀體聚焦成像于視網膜(圖1A),視網膜上的感光細胞(視桿細胞:暗視覺/視錐細胞:捕捉色彩與細節)將光信號轉化為電信號,通過雙
    的頭像 發表于 03-10 21:25 ?1162次閱讀
    經顱電刺激系列之視功能的電刺激神經調控

    圖像采集卡:現代圖像處理技術的關鍵組件

    在現代科技快速發展的背景下,圖像處理技術已成為信息技術領域不可或缺的一部分。圖像采集卡,作為連接計算機與各種圖像采集設備的重要硬件組件,扮演
    的頭像 發表于 02-20 10:42 ?366次閱讀
    <b class='flag-5'>圖像</b>采集卡:現代<b class='flag-5'>圖像</b><b class='flag-5'>處理</b>技術的關鍵組件

    FPGA上的圖像處理算法集成與優化

    、Tophat形態學濾波、RAW8轉RGB888、彩色圖像均值濾波、Alpha背景疊加、直方圖灰度拉伸算法以及自動白平衡算法。每種算法都提供了實現方法和相關公式,涵蓋了圖像處理的核心概
    的頭像 發表于 02-14 13:46 ?507次閱讀
    FPGA上的<b class='flag-5'>圖像</b><b class='flag-5'>處理</b>算法集成與優化

    TVP7002SOG 4線制的復合同步可以按照綠同步的處理方式進行處理嗎?

    我這邊VGA的信號源是4線制的,即R、G、B及復合同步信號,想用TVP7002將其轉換為數字信號,想問下復合同步信號能否通過一個電容接到SOGIN管教,或者直接接到SOGIN管教嗎,想知道4線制的復合同步可以按照綠同步的處理方式進行處理嗎?謝謝
    發表于 01-17 07:32

    多領域廣泛應用,DSP芯片市場有多大?

    。 過去數字信號處理主要是通過微處理器來完成,但是隨著終端應用產品的發展與更迭,傳統微處理器的處理速度已經無法滿足大信息量的高速實時要求。在
    的頭像 發表于 12-12 10:28 ?588次閱讀
    多領域廣泛應用,DSP<b class='flag-5'>芯片</b>市場有多大?

    觸摸屏的信息可以直接和DS90UB928 I2C通信嗎?

    想請問下,觸摸屏的信息可以直接和928通信嗎?參考928的datasheet,他支持I2C,理論上是可以的,有沒有大神用過這樣的處理方式
    發表于 12-02 06:20

    百問FB顯示開發圖像處理 - BMP圖像處理

    2 圖像處理 ?前言:所有的圖像文件,都是一種二進制格式文件,每一個圖像文件,都可以通過解析文件中的每一組二進制數的含義來獲得文件中的各種信息
    發表于 11-28 13:52

    LSTM神經網絡在圖像處理中的應用

    LSTM通過引入門控機制來解決傳統RNN的梯度消失和梯度爆炸問題。這些門控機制包括輸入門、遺忘門和輸出門,它們控制著信息的流動,使得網絡能夠記住或忘記信息。 LSTM在圖像處理中的應
    的頭像 發表于 11-13 10:12 ?1433次閱讀

    圖像處理器是什么意思

    圖像處理器(Image Processor)是一種專門用于圖像處理和計算的硬件設備或芯片,它通過高速數據傳輸、
    的頭像 發表于 08-14 09:28 ?1722次閱讀

    INA592 DRC封裝里的+INOP和–INOP引腳除了接+IN和-IN引腳還有其它處理方式嗎?可以直接懸空不?

    INA592: DRC封裝里的+INOP和–INOP 引腳除了接+IN和-IN引腳還有其它處理方式嗎?可以直接懸空嗎?
    發表于 07-30 08:13

    圖像識別技術包括自然語言處理

    計算機視覺技術對圖像進行處理、分析和理解,從而實現對圖像中的目標、場景、行為等信息的識別和理解。圖像識別技術包括
    的頭像 發表于 07-16 10:54 ?1351次閱讀

    神經元芯片的主要特點和優勢

    神經元芯片,又稱神經芯片或神經元網絡芯片,是一種專為實現網絡通信和控制功能而設計的先進半導體芯片。這類芯片的設計靈感部分源自于對人腦神經元網
    的頭像 發表于 07-12 16:42 ?1897次閱讀

    如何利用CNN實現圖像識別

    卷積神經網絡(CNN)是深度學習領域中一種特別適用于圖像識別任務的神經網絡結構。它通過模擬人類視覺系統的處理方式,利用卷積、池化等操作,自動提取圖像中的特征,進而實現高效的圖像識別。本
    的頭像 發表于 07-03 16:16 ?2476次閱讀

    FPGA設計經驗之圖像處理

    傳感器芯片連接獲得圖像數據流,如果是RAW格式的則還可以進行差值以獲得RGB圖像數據。FPGA能進行實時流水線處理的關鍵是它可以用其內部的Block Ram緩存若干行的
    發表于 06-12 16:26