加快打造原始創(chuàng)新策源地,加快突破關(guān)鍵核心技術(shù),努力搶占科技制高點(diǎn),為把我國建設(shè)成為世界科技強(qiáng)國作出新的更大的貢獻(xiàn)。

——習(xí)近平總書記在致中國科學(xué)院建院70周年賀信中作出的“兩加快一努力”重要指示要求

面向世界科技前沿、面向經(jīng)濟(jì)主戰(zhàn)場、面向國家重大需求、面向人民生命健康,率先實(shí)現(xiàn)科學(xué)技術(shù)跨越發(fā)展,率先建成國家創(chuàng)新人才高地,率先建成國家高水平科技智庫,率先建設(shè)國際一流科研機(jī)構(gòu)。

——中國科學(xué)院辦院方針

首頁 > 院所動(dòng)態(tài)新聞 > 工作動(dòng)態(tài)

上海微系統(tǒng)所研制出觸嗅一體智能仿生機(jī)械手,實(shí)現(xiàn)應(yīng)急救援掩埋場景下人體識(shí)別救援

發(fā)布時(shí)間:2022-01-11 【字體: 】【打印】 【關(guān)閉
  由地震、滑坡、塌方等掩埋事故造成的視覺感知障礙對受困人員的搜索和定位造成了極大阻礙。為了確保最佳救援時(shí)機(jī),提升搜救成功率和生還率,依托國家科技創(chuàng)新2030“新一代人工智能”重大項(xiàng)目,針對極端環(huán)境無視覺輸入情況下對受困人員的識(shí)別與救援需求,中國科學(xué)院上海微系統(tǒng)與信息技術(shù)研究所陶虎團(tuán)隊(duì)受自然界星鼻鼴鼠“觸嗅融合”感知啟發(fā),將MEMS嗅覺、觸覺柔性傳感器陣列與多模態(tài)機(jī)器學(xué)習(xí)算法融合,構(gòu)建了仿星鼻鼴鼠觸嗅一體智能機(jī)械手(圖1)。得益于硅基MEMS氣體傳感器(靈敏度超越人類1個(gè)數(shù)量級)、壓力傳感器(探測限超越人類1個(gè)數(shù)量級)的優(yōu)異性能,該機(jī)械手手指觸摸物體后可準(zhǔn)確獲取其局部微形貌、材質(zhì)硬度和整體輪廓等關(guān)鍵特征,掌心可同步嗅出物體“指紋”氣味,進(jìn)一步通過仿生觸嗅聯(lián)覺 (BOT) 機(jī)器學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)實(shí)時(shí)處理,最終完成識(shí)別人體、確認(rèn)部位、判斷掩埋狀態(tài)、移開障礙物、閉環(huán)救援。

  與應(yīng)急管理部上海消防研究所合作,通過到一線消防救援單位實(shí)地調(diào)研,真實(shí)還原構(gòu)建了人體被瓦礫石堆覆蓋的掩埋場景,在此環(huán)境下對包括人體在內(nèi)的11種典型物體進(jìn)行識(shí)別,觸嗅聯(lián)覺識(shí)別準(zhǔn)確率達(dá)96.9%,較單一感覺提升了15%。相較麻省理工學(xué)院發(fā)表于NatureDOI10.1038/s41586-019-1234-z)的單一觸覺(548個(gè)傳感器)感知研究,本工作通過觸(70個(gè))、嗅(6個(gè))聯(lián)覺,僅使用1/7數(shù)量的傳感器,達(dá)到了更理想的識(shí)別目的。并且縮小后的傳感器規(guī)模和樣本量,更適合復(fù)雜環(huán)境、資源有限條件下的快速反應(yīng)和應(yīng)用。除此之外,面對在實(shí)際救援中經(jīng)常遇見的存在干擾氣體或器件部分損壞等情況,通過多模態(tài)感知的互補(bǔ)和神經(jīng)網(wǎng)絡(luò)的快速調(diào)節(jié),該系統(tǒng)仍保持良好的準(zhǔn)確率(>80%)。

  相關(guān)研究成果以“A star-nose-like tactile-olfactory bionic sensing array for robust object recognition in non-visual environments”為題于2022110日發(fā)表在國際重要學(xué)術(shù)期刊Nature CommunicationsNat. Commun. 2022, 13, 79.)上。

  該論文的通訊作者為上海微系統(tǒng)所陶虎研究員、第一通訊單位為中科院上海微系統(tǒng)所,合作單位有應(yīng)急管理部上海消防研究所、中科院自動(dòng)化所、蘇州慧聞納米科技有限公司。該工作得到科技創(chuàng)新2030-重大項(xiàng)目、國家重點(diǎn)研發(fā)計(jì)劃、國家自然科學(xué)基金優(yōu)秀青年基金、中國科學(xué)院基礎(chǔ)前沿科學(xué)研究計(jì)劃“從01”原始創(chuàng)新項(xiàng)目、上海市優(yōu)秀學(xué)術(shù)帶頭人計(jì)劃等相關(guān)研究計(jì)劃的支持。  

  論文鏈接:https://www.nature.com/articles/s41467-021-27672-z。

   

  1. 用于應(yīng)急救援掩埋場景的觸嗅一體仿生智能機(jī)械手