NEC開發「遠距離視線推定技術」
NEC日前宣佈開發出「遠距離視線推定技術」,作為「NEC the WISE」(註1)的尖端AI技術群之一,本技術能利用城市或店舖既有的監視攝影機,即時偵測出遠處人群的視線方向。
以往要偵測人的視線,會運用裝有紅外線燈與攝影機的專用裝置,在近距離用紅外線燈照射人眼,從其反射方向來進行偵測。
本次所開發的技術,是運用NEC世界No.1的人臉辨識技術(註2)之核心——「多重比對人臉偵測法」(註3),蒐集視線偵測時的必要資訊,包括眼頭、眼角、瞳孔等眼睛周圍的特徵點都予以正確鎖定,即便使用一般攝影機也能偵測出極為精確的視線方向,誤差值僅在上下左右5度以內。
再者,本技術不易受到低解析度或明暗變化影響,監視器與對象距離10公尺也能偵測出視線。值得一提的是,經由能高速計算的特徵量抽出技術,以往視為難關的「複數人群視線方向」也能夠同時偵測出來。
NEC表示,透過本技術可以從行人的視線動向,將疏散、避難的標誌設置在市街中最適合的位置,也能監視可疑人物等,運用在安全、安心的用途上。另外,在超市等店舖內的顧客、注視電子看板內容的顧客,從這些顧客的視線動向,來推測出受歡迎的商品與內容,像這樣的行銷用途也是未來實用化的方向。
NEC致力於「社會解決方案事業」,以本技術為代表,運用尖端AI技術,為實現安全、安心的豐裕社會而有所貢獻。
背景
為了實現安全、安心的社會,城市中的監視攝影、在行銷策略上調查顧客需求等方面,有關「瞭解人們在注視什麼」的視線偵測技術,開發進度近來頗受矚目。
以往要偵測人的視線方向,會需要用紅外線燈照射人眼,從其反射的方向來得知。為此會需要運用裝有紅外線燈與攝影機的專用裝置,一般攝影機所拍攝的影像並無法進行高度精準的偵測。
本次開發出的「遠距離視線推定技術」,是運用了NEC世界No.1的人臉辨識技術之核心——「多重比對人臉偵測法」,只須使用一般的攝影機,就能即時且精準地偵測出遠處人群的視線方向。
新技術的特徵
- 使用一般攝影機就能偵測視線
NEC活用「多重比對人臉偵測法」,蒐集視線偵測時的關鍵資訊,包括眼頭、眼角、瞳孔等眼睛周圍的特徵點,運用獨家演算法計算出相對於攝影機方向的視線角度,從攝影機拍攝的影像,就能高度精確地推定出人物的視線。因此,不需要特殊的專用裝置,只需要從網路攝影機、監視攝影機、平板電腦與智慧型手機的攝影鏡頭等一般的攝影機,就能達到高度精確的視線偵測。
- 從遠處也能推定視線方向
傳統技術因為攝影機與拍攝對象有數公尺以上的距離,在進行視線偵測時,因影像解析度低,無法掌握眼睛周圍的特徵點,因此要正確偵測視線十分困難。這次NEC所開發的「遠距離視線推定技術」,運用了「多重比對人臉偵測法」,針對低解析度影像進行強化學習,因此即使低解析度或明暗變化都不受影響。(圖2)透過這樣的技術,即使距離10公尺遠,也能偵測到該名人物所注視的方向,未來預期也能運用在超市、大賣場等店舖,自動辨識出特別吸引顧客的商品。
- 複數人群的視線能夠同時推定
藉由能高速計算的特徵量抽出技術,計算視線的時間每人僅需不到001秒,偵測精確度毫不降低。因此,在攝影機拍到複數人群的狀況,所有人的視線都能同時推定,例如,觀眾在欣賞電子看板畫面時,能即時掌握吸引人的內容,也能運用在判斷廣告效果的用途上。
NEC集團致力於全球推廣「社會解決方案事業」,以提供安全.安心.效率.公平的社會價值,融合先進的ICT技術與知識,實現更為明亮而豐裕、更具效率而精粹的社會。
- (註1)「NEC the WISE」是NEC最尖端AI技術群的品牌名稱。”The WISE”也有「智者們」的涵義。面對日益複雜高深的社會課題,NEC希望藉由人與AI技術的協調,運用更高層級的智慧來予以解決。詳見新聞稿:NEC發表AI技術群全新品牌名稱「NEC the WISE」NEC有關AI的研究成果請參考:(日文網頁)http://jpn.nec.com/rd/crl/ai/
- (註2)人臉辨識技術:NEC人臉辨識技術 連續3次榮獲NIST評比全球第一
指紋辨識技術:NEC指紋辨識精確度於NIST評比5度奪冠 - (註3) 多重比對人臉偵測法:從人臉的方形區域,找出瞳孔中心、鼻翼、口角等特徵點位置的技術。在特徵點附近加上較亮的圖案,找出最適當的位置。不僅從人臉輪廓偵測,更加上特徵點的配置,因此能夠精準找到特徵點的位置。相關技術解說請參考:(日文網頁)http://jpn.nec.com/rd/research/DataAcquition/technologies.html