感知傳感器是人形機器人邁向智能化的基礎。

 

如同智能駕駛需要感知-決策-執(zhí)行三部曲，人形機器人也需要這樣的流程：通過傳感器感知關鍵狀態(tài)，經過微處理器、計算機或神經網(wǎng)絡處理分析后，交由機械臂、雙足或輪子等移動裝置或加熱/制冷設備等非移動裝置執(zhí)行相關工作。

 

 

來源：中華網(wǎng)，YOLE，艾瑞咨詢，CSDN，電子產品世界

 

傳感器是能感受被測量并按照一定的規(guī)律轉換成可用輸出信號的器件或裝置，一般由敏感元件、微處理器、信號轉換電路三部分組成。其中敏感元件是指直接感受測量信息，并輸出與被測量信息成確定關系的某一物理量的元件；微處理器是指以敏感元件的輸出為輸入，把輸入數(shù)據(jù)轉化為電路信息的元件；信號轉換電路再將電路參數(shù)轉換成便于測量的電信號，實現(xiàn)信號的獲取與輸出。

 

 

傳感器通過各種元件測量外部信息，來源《面向機器人的多維力/力矩傳感器綜述》鐘曉玲等

 

感知傳感器作為人形機器人感知系統(tǒng)的核心組件，作為人形機器人實現(xiàn)檢測和控制的首要環(huán)節(jié)，是機器人系統(tǒng)獲取外界狀態(tài)和自身狀態(tài)的重要途徑，也是機器人邁向自主化、智能化的基礎。本文主要探討人形機器人的視覺傳感器、力/力矩傳感器、觸覺傳感器、IMU慣性傳感器。

 

 

一、視覺傳感器

人所獲得外界信息的80%是靠視覺得到的，機器也類似。機器視覺本質上是為機器植入“眼睛”，利用環(huán)境和物體對光的反射來獲取和感知信息。

 

視覺傳感器是一種使用光電傳感器件來獲取物體圖像的設備，它能夠將物體圖像轉化為數(shù)字信號，并且對圖像進行處理和分析。視覺傳感器的工作過程包含檢測、分析、描繪和識別四部分：視覺檢測主要利用圖像信號輸入設備，將視覺信息轉換成電信號；視覺圖像分析是把攝取到的所有信號去掉雜波及無價值像素，重新把有價值的像素按線段或區(qū)域等排列成有像素集合；視覺描繪和識別是從物體圖像中提取特征，給予標志。

 

根據(jù)圖像信息獲取維度、處理數(shù)據(jù)類型的不同，機器視覺可劃分為 2D 視覺與 3D 視覺。2D 視覺通過工業(yè)相機來獲取平面圖片，主要基于物體的一個平面特征進行后續(xù)分析，無法獲取物體的空間坐標信息。3D 視覺能夠采集視野內空間每個點位的三維坐標信息，通過算法獲取三維立體成像，并根據(jù)這些數(shù)據(jù)信息分析得出有關目標對象在空間中的位置、形狀、體積、平面度等信息，以達到檢測、引導、測量、定位等功能。

 

隨著智能制造的不斷深入，面對復雜的物件辨識和尺寸量度任務，以及人機互動所需要的復雜互動，2D 視覺在精度和距離測量方面均出現(xiàn)部分技術局限，市場對 3D 視覺的需求開始與日俱增。在人形機器人應用領域，3D 視覺傳感器可以幫助機器人高效完成人臉識別、距離感知、避障、導航等功能，使其更加智能化。

 

 

測量方法圖示，來源：傳感器技術公眾號

 

3D重構目前主要的技術有結構光、iToF、dToF、立體視覺、Lidar、工業(yè)三維測量等，人形機器人視覺傳感技術主要使用多目立體視覺和 iToF 法。多目立體視覺是立體視覺方法中的一種，最少使用 3 個攝像頭即可實現(xiàn)，用單個或多個相機從多個視點獲取同一個目標場景的多幅圖像，重構目標場景的三維信息，特斯拉和 UCLA 均使用3 個 3D 相機即可實現(xiàn)多目立體視覺。iToF 是指時間往返行程采用時間選通光子計數(shù)器或電荷積分器外推獲得而不需要精準計時的方案，可以實現(xiàn)面積范圍成像，小米和波士頓動力使用該方案。
 

 

目前人形機器人主流視覺解決方案
機器視覺市場的市場主要被美、德、日品牌占據(jù)，主要有美國康耐視、德國巴斯勒、日本基恩士和歐姆龍等，其中基恩士和康耐視作為全球機器視覺行業(yè)的兩大巨頭，壟斷了超60%的全球市場份額。我國機器視覺市場起步較晚，直到20世紀末期才陸續(xù)有相關技術公司成立，且銷售規(guī)模較小，相關企業(yè)有奧比中光、偉景智能、遠形時空等。

 

此外，3D視覺傳感器相關企業(yè)有英飛凌、奧比中光、瑞芯微、 華捷艾米等。

 

 

二、力/力矩傳感器

 

力/力矩傳感器是一種能感知力、力矩并轉換成可用輸出信號的傳感器，主要包括本體單元和應變/形變檢測系統(tǒng)兩部分。力/力矩傳感器的核心原理是將力作用下的形變轉換成電信號，當有力/力矩作用時，力/力矩施加于傳感器本體單元上，并引起本體單元的應變或形變，檢測系統(tǒng)可感知本體的應變或形變，通過電路將其轉化為相應電壓，通過測量電壓值來表征力/力矩大小，并轉換成可用輸出信號，實現(xiàn)力/力矩的測量。

 

根據(jù)其測量原理不同，力/力矩傳感器可以分為光電式、應變式、電容式、壓電式等多種類型。這其中，應變式力/力矩傳感器是當前技術最為成熟、應用最廣泛的傳感器類型。壓電、電容和光電等測量原理的力傳感器有一定的理論研究和實驗基礎，但下游尚未得到廣泛應用。

 

 

來源：儀器信息網(wǎng)、化工儀器網(wǎng)、傳感器專家網(wǎng)，《Handbook of Modern Sensors》、霍盾官網(wǎng)、漢矢德官網(wǎng)、TE Connectivity 官網(wǎng)、安信證券

 

根據(jù)特斯拉 AI DAY，預計特斯拉機器人關節(jié)處使用單維力傳感器，執(zhí)行器末端使用六維力傳感器。根據(jù)測量維度，力傳感器可以分為一維、多維（三維、六維）力傳感器。一維力傳感器僅檢測一個方向的作用力或力矩，工業(yè)中應用廣泛，價格也較為便宜（大多為數(shù)百元）。多維力傳感器僅包括三維力和六維力傳感器，均需要標定 XYZ 坐標軸，區(qū)別在于應變片的數(shù)量及解耦算法。六維力傳感器是最高端的力矩傳感器，同時測量 XYZ 軸向力和環(huán)繞軸的力矩，內部的算法可以解耦各個方向的力和力矩的干擾，應用于高端機器人和精密設備中，價格也十分昂貴（大多在數(shù)千元至上萬元）。

 

 

力傳感器按測力維數(shù)分類,來源:坤維科技

如下圖所示，六維力傳感器共由四部分機械元件組成：十字梁型彈性體(簡稱彈性體)、底盤、基座和頂蓋。彈性體結構的主梁的正反面或側面貼有應變片，當外力/力矩作用于傳感器上時，彈性體變形，使粘貼在彈性體上的應變片發(fā)生形變,然后通過應變電橋轉換成電橋的電壓輸出出來。應變片和彈性體是六維力傳感器核心元件。

 

 

 

六維力矩傳感器主要結構，來源：付立悅《多維力傳感器的靜動態(tài)性能研究》

 

六維力傳感器技術壁壘

 

結構設計、標定與檢測、算法設計是六維力/力矩傳感器領域的三大壁壘。

 

 

結構設計：兼顧高靈敏度、高動態(tài)性能和低維間耦合的原理和結構創(chuàng)新是當前電阻應變式多維力傳感器研制中面臨的一大挑戰(zhàn)。高靈敏度要求應變測量區(qū)域的剛度盡可能小而易于產生應變，而高動態(tài)性能則通常要求整個結構的剛度盡可能大。此外，結構上的連續(xù)性導致彈性體各區(qū)域之間在受外載荷時不可避免地會產生耦合變形（應變），進而可能導致耦合輸出。因此，對于六維力/力矩傳感器而言，結構設計至關重要。

 

 

 

標定與檢測：標定指通過對樣本空間中的樣本點進行精確加載，建立傳感器信號與力和力矩的映射關系，獲得解耦算法的數(shù)學模型和參數(shù)。六維力/力矩傳感器需要對六維樣本空間進行標定，難度遠高于一維傳感器。主要體現(xiàn)在樣本空間更大、標定設備更復雜、數(shù)學模型理論基礎更深三個方面。

 

 

 

算法設計：六維力傳感器的內部算法，會解耦各方向力和力矩間的干擾，使力的測量更為精準。高精準度的軍用六維力傳感器，可以確保在六維度聯(lián)合承載的情況下，測量值偏差在量程的 0.3%FS 以內。

 

 

目前六維力矩傳感器成本高的主要說法有兩種：

 

說法一：成本高主要在于應變片和人工成本。

 

 

應變片：每個六維力矩傳感器通常需要使用約30-40個應變片，在軟硬件方面都存在諸多技術難點，導致應變片成本較高。

 

 

 

人工成本：在目前國內外技術條件下，六維力矩傳感器生產的貼片、溫度補償、測試等核心環(huán)節(jié)仍然須由人工完成，生產過程全自動化存在困難，人工成本較高。

 

 

說法二：成本高主要是因為坐標軸標定設備和解耦算法研發(fā)的高額投入。

 

六維力傳感器存在多種檢測原理，硅基/金屬箔等電阻應變片具有更好的性能優(yōu)勢，原理是應變片受力后產生的微米級別的變形導致電阻和電壓的變化，金屬箔應變片價格較高，目前為 10 元人民幣左右，而 MEMS 工藝下的硅基應變片可以降低至 1 元以下，因此應變片成本并不是六維力傳感器成本高昂的最主要原因。其高昂的成本主要來源于坐標軸標定設備和解耦算法研發(fā)的投入，多維力矩傳感器需要應對因結構加工和工藝偏差引起的各維度間相互干擾的問題，以及動態(tài)和靜態(tài)標定問題，同時還需要解決矢量運算中的解耦算法和電路實現(xiàn)等問題，此外還要確保產品的一致性，因此在未大規(guī)模放量的情況下成本依然較為高昂，即使國內廠商具有顯著的成本優(yōu)勢，也需要上千元的平均成本。

 

 

三、觸覺傳感器

 

根據(jù)Tesla Bot Update 視頻，一代機器人靈巧手具有“自適應性（Adaptive grasp）”和“非反向驅動能力（Non-backdrivable fingers）”，可以做到能做到收拾杯盤等復雜活動、分揀樂高等；二代機器人靈巧手的仍保持11個自由度，但是運動的速度和抓取性能大幅提升，指尖中陣列觸覺傳感器的使用是重要增量，可以做到精準力控并雙指捏起雞蛋。

 

 

二代靈巧手拿起、傳遞、釋放雞蛋的精準力控過程，來源：Tesla Optimus Gen 2 發(fā)布視頻
根據(jù)去年12月特斯拉在YouTube公布的視頻，二代靈巧手指尖配有觸覺傳感器，機器人先用左手的大拇指和食指抓取雞蛋，之后傳遞給右手，右手的食指和拇指接到雞蛋后將雞蛋放到托盤上，其中的亮點包括：①精準力控：依靠觸覺傳感器反饋，力控恰到好處，雙指捏起但不捏碎雞蛋；②軟硬件協(xié)同升級：機器人“大腦”知道何時加力、何時減力，并指導靈巧手進行操作，執(zhí)行裝置可以精準完成大腦下達的命令并連貫完成動作。

 

觸覺傳感器，是Optimus Gen 2 精準力控的核心器件，它是人形機器人僅次于視覺的重要信息源。與視覺不同，觸覺本身有很強的敏感能力，可直接測量對象和環(huán)境的多種性質特征，因此觸覺不僅僅是視覺的一種補充，觸覺的主要任務是為獲取對象與環(huán)境信息和為完成某種作業(yè)任務而對機器人與對象、環(huán)境相互作用時的一系列物理特征量進行檢測或感知。

 

廣義的觸覺包括觸覺、壓覺、力覺、滑覺、冷熱覺等，它能感知機器人與環(huán)境的交互情況，以及所接觸目標的各種物理屬性，如位置、形狀、柔軟度、文理、顏色、剛度等。觸覺傳感器本質上是將接觸面形狀、壓力、摩擦力、溫度等信息進行感知識別和轉換的傳感器，其組成部分包括電極、敏感材料和導電材料等。按照敏感元件原理，觸覺傳感器可分為壓電式、壓阻式、電容式、摩擦電式、電感式、光纖式等，其中壓電式、壓阻式、電容式、摩擦電觸覺傳感器應用較為廣泛。

 

 

五類不同原理的觸覺傳感器的對比分析

 

本節(jié)主要探討的是當下觸覺傳感器兩種主要的技術路線：MEMS、柔性觸覺傳感器。

 

1、MEMS壓力陣列傳感器：

 

1）區(qū)分幾個概念

 

MEMS（Micro-Electro-Mechanical System）是一個廣泛的技術領域，是一種微型而精密的機械系統(tǒng)，它將微型機構、微型傳感器、微型執(zhí)行器以及信號處理和控制電路等集成于一塊或多塊芯片上，產品尺寸一般都在 3mm×3mm×1.5mm。MEMS技術結合了微電子技術和微機械加工技術，具有體積小、功耗低、集成度高、成本低和效能高等特點。

 

MEMS傳感器是采用微電子和微機械加工技術制造出來的新型傳感器，是MEMS技術中的一種具體應用，專門用于感知和測量各種物理量。MEMS傳感器能夠感知并測量各種物理量，如溫度、濕度、光照強度、壓力、加速度等，并將這些物理量轉化為電信號進行處理。與傳統(tǒng)的傳感器相比，MEMS傳感器具有體積小、重量輕、成本低、功耗低、可靠性高、易于集成和實現(xiàn)智能化等優(yōu)點。

 

MEMS壓力陣列傳感器則是MEMS傳感器的一個子類，專注于壓力測量，并具有陣列式結構。與普通MEMS壓力傳感器相比，MEMS壓力陣列傳感器通常包含多個壓力傳感單元，這些單元以陣列的形式排列，能夠同時測量多個點的壓力變化。這種設計使得MEMS壓力陣列傳感器在需要高空間分辨率和壓力分布測量的應用場景中具有顯著優(yōu)勢。

 

2）基于MEMS技術的優(yōu)勢，大部分常用的觸覺傳感器或多或少地應用MEMS技術。前述五類不同的觸覺傳感器中，壓阻式觸覺傳感器為目前的主流選擇，其靈敏度高、分辨率高、技術相對成熟且成本較低，其中MEMS 壓阻式傳感器為主要的應用趨勢。與傳統(tǒng)的傳感器相比，MEMS傳感器具有體積小、重量輕、成本低、功耗低、可靠性高、適于批量化生產、易于集成和實現(xiàn)智能化的特點。同時，微米量級的特征尺寸使得它可以完成某些傳統(tǒng)機械傳感器所不能實現(xiàn)的功能。

2、柔性觸覺傳感器（電子皮膚）：

 

柔性觸覺傳感器是利用柔性材料的物理特性，將外部的力學量轉換為電信息，從而實現(xiàn)對觸覺感知的傳感器產品。柔性觸覺傳感器又稱為“電子皮膚”，能夠實現(xiàn)與環(huán)境接觸力、溫度、濕度、震動、材質、軟硬等特性的檢測，是機器人直接感知環(huán)境作用的重要傳感器。傳統(tǒng)的觸覺傳感器以各種剛性材料為敏感元件，存在笨重和硬脆的缺點；柔性觸覺傳感器則具備類似于人類皮膚的柔韌性，可以適應任意載體形狀，更利于測量物體表面受力信息、感知目標物體性質特征,具有研發(fā)和產業(yè)化價值，目前正處于研發(fā)和小批量應用階段。

 

 

 

機器人多類傳感器和柔性電子皮膚,來源《Energy autonomous electronic skin》Carlos García Nú?ez
按照轉換信號原理的不同，柔性觸覺傳感器可以分為壓阻式（電阻式）、電容式、電感式、壓電式、光電式等，其中電容式、壓阻式柔性傳感器應用較多。

 

 

電子皮膚的四種轉換機制,來源:宋愛國《機器人觸覺傳感器發(fā)展概述》

柔性壓阻式傳感器以器件結構簡單、靈敏度高、響應快、制造成本低、穩(wěn)定性好等優(yōu)點被認為是下一代柔性壓力傳感器的理想選擇。劣勢是體積大，不易實現(xiàn)微型化；功耗高，接觸表面易碎；易受噪聲影響。

 

柔性觸覺傳感器主要由基底材料、電極材料、功能層材料構成。基底材料是柔性觸覺傳感器的基礎，是決定傳感器彈性形變性能的關鍵因素。電極材料主要用于傳輸電信號。功能層材料則是傳感器的核心部分，能夠將外部的力、溫度、濕度等物理量轉化為電信號。

 

 

基底材料：決定傳感器彈性性能的關鍵因素。基底材料起著支撐和保護傳感器的作用，要求它具有良好的柔韌性、耐腐蝕性、絕緣性以及溫度穩(wěn)定性等。常用的柔性基底材料有 PET、PI、PDMS、Ecoflex、NR、TPU 等。

 

 

 

電極材料：電信號傳輸。傳統(tǒng)的電極一般為金屬材料，其本身不具有柔性，多采用減薄金屬膜層厚度或設計特殊結構等方法賦予其柔性，這將極大地提高成本且制備工藝復雜。目前，液態(tài)金屬和導電水凝膠的發(fā)展為其提供了新思路。

 

 

 

功能層材料：柔性觸覺傳感器的核心部分。將外部的力、溫度、濕度等物理量轉化為電信號。具有優(yōu)異力電特性的功能層材料是決定柔性觸覺傳感器性能的關鍵，多采用金屬基材料、碳基材料及導電橡膠等。

 

 

柔性觸覺傳感器高端產能被外國占據(jù)，市場格局較為集中。根據(jù)QYReaearch數(shù)據(jù)，全球柔性觸覺傳感器市場主要被海外企業(yè)占據(jù)，全球排名TOP5的廠商主要包括Novasentis、Tekscan、Japan Display Inc. (JDI)、Baumer、Fraba，合計占有大約57.1%的市場份額；國內企業(yè)主要包括鈦深科技、柯力傳感、漢威科技等。

 

 

全球觸覺傳感器代表企業(yè)產品及應用,來源公開資料整理

 

 

四、IMU慣性傳感器

 

慣性傳感器作為機器人的位覺感受器，是人形機器人姿態(tài)控制的核心。

 

慣性傳感器是一種用于測量物體的加速度、角速度和傾斜角度等參數(shù)的電子傳感器，可為機器人提供運動感知和控制能力。根據(jù)被測物理量，慣性傳感器可以分為加速度傳感器（加速計）和角速度傳感器（陀螺儀）。另外，也有一些傳感器將加速度計和陀螺儀結合在一起，稱為慣性測量單元（Inertial Measurement Unit，簡稱 IMU）。

 

具體而言IMU是一種測量物體三軸角速度和加速度的設備，通常包括三個單軸的加速度計和三個單軸的陀螺儀，有時還包括磁力計。狹義上，一個 IMU 內在正交的三軸上安裝陀螺儀和加速度計，共 6 個自由度，來測量物體在三維空間的角速度和加速度，就是“6 軸 IMU”；廣義上，IMU 可在加速度計和陀螺儀的基礎上加入磁力計，形成了“9軸 IMU”。通過這種方式，9 軸 IMU 能夠提供更全面的運動信息，尤其是在需要確定物體在三維空間中的方向時。

 

 

IMU的組成，來源:深迪,村田制作所,道合順芯聞

IMU取代獨立MEMS加速計和陀螺儀大勢所趨，獨立的MEMS加速度計和陀螺儀越來越多地被MEMS IMU所取代。

 

IMU 在人形機器人領域應用廣泛，特別是在姿勢跟蹤、運動控制和導航方面。通過測量機器人加速度與角速度，幫助跟蹤機器人姿勢和運動狀態(tài)；提供實時運動數(shù)據(jù)并分析，實現(xiàn)機器人運動軌跡、速度精確控制；檢測機器人偏移與傾斜，進行實時姿態(tài)穩(wěn)定和調整。在結合算法后，IMU 提供的機器人運動信息，可用于估計機器人的位置，并根據(jù)機器人的運動軌跡構建環(huán)境地圖。幫助機器人進行環(huán)境感知并避開障礙物，規(guī)劃安全路徑。同時實現(xiàn)路徑規(guī)劃、自主探索等智能導航功能。

IMU產品生產工藝難度大，準入門檻高，市場份額分布相對集中，國際廠商占據(jù)壟斷地位，主要有BOSCH、ST、TDK等企業(yè)。國內主要有矽?？萍?、深迪半導體、士蘭微、明皜傳感、敏芯股份等企業(yè)，市場份額比較小。

 

 

典型人形機器人廠商IMU方案,來源公開資料整理

 

小結

 

人形機器人感知傳感器作為機器人感知系統(tǒng)的核心組件，是實現(xiàn)機器人智能感知和自主操作的關鍵。隨著技術的不斷發(fā)展，各類傳感器在性能、成本、應用等方面都將不斷取得突破。未來，人形機器人將在更多領域發(fā)揮重要作用，為人類的生產和生活帶來更多便利和驚喜。