NEC開發「遠距離視線推定技術」

NEC日前宣佈開發出「遠距離視線推定技術」,作為「NEC the WISE」(註1)的尖端AI技術群之一,本技術能利用城市或店舖既有的監視攝影機,即時偵測出遠處人群的視線方向。

以往要偵測人的視線,會運用裝有紅外線燈與攝影機的專用裝置,在近距離用紅外線燈照射人眼,從其反射方向來進行偵測。

本次所開發的技術,是運用NEC世界No.1的人臉辨識技術(註2)之核心——「多重比對人臉偵測法」(註3),蒐集視線偵測時的必要資訊,包括眼頭、眼角、瞳孔等眼睛周圍的特徵點都予以正確鎖定,即便使用一般攝影機也能偵測出極為精確的視線方向,誤差值僅在上下左右5度以內。

再者,本技術不易受到低解析度或明暗變化影響,監視器與對象距離10公尺也能偵測出視線。值得一提的是,經由能高速計算的特徵量抽出技術,以往視為難關的「複數人群視線方向」也能夠同時偵測出來。

NEC表示,透過本技術可以從行人的視線動向,將疏散、避難的標誌設置在市街中最適合的位置,也能監視可疑人物等,運用在安全、安心的用途上。另外,在超市等店舖內的顧客、注視電子看板內容的顧客,從這些顧客的視線動向,來推測出受歡迎的商品與內容,像這樣的行銷用途也是未來實用化的方向。

NEC致力於「社會解決方案事業」,以本技術為代表,運用尖端AI技術,為實現安全、安心的豐裕社會而有所貢獻。

背景

為了實現安全、安心的社會,城市中的監視攝影、在行銷策略上調查顧客需求等方面,有關「瞭解人們在注視什麼」的視線偵測技術,開發進度近來頗受矚目。

以往要偵測人的視線方向,會需要用紅外線燈照射人眼,從其反射的方向來得知。為此會需要運用裝有紅外線燈與攝影機的專用裝置,一般攝影機所拍攝的影像並無法進行高度精準的偵測。

本次開發出的「遠距離視線推定技術」,是運用了NEC世界No.1的人臉辨識技術之核心——「多重比對人臉偵測法」,只須使用一般的攝影機,就能即時且精準地偵測出遠處人群的視線方向。

新技術的特徵

  1. 使用一般攝影機就能偵測視線
    NEC活用「多重比對人臉偵測法」,蒐集視線偵測時的關鍵資訊,包括眼頭、眼角、瞳孔等眼睛周圍的特徵點,運用獨家演算法計算出相對於攝影機方向的視線角度,從攝影機拍攝的影像,就能高度精確地推定出人物的視線。因此,不需要特殊的專用裝置,只需要從網路攝影機、監視攝影機、平板電腦與智慧型手機的攝影鏡頭等一般的攝影機,就能達到高度精確的視線偵測。
  1. 從遠處也能推定視線方向
    傳統技術因為攝影機與拍攝對象有數公尺以上的距離,在進行視線偵測時,因影像解析度低,無法掌握眼睛周圍的特徵點,因此要正確偵測視線十分困難。這次NEC所開發的「遠距離視線推定技術」,運用了「多重比對人臉偵測法」,針對低解析度影像進行強化學習,因此即使低解析度或明暗變化都不受影響。(圖2)透過這樣的技術,即使距離10公尺遠,也能偵測到該名人物所注視的方向,未來預期也能運用在超市、大賣場等店舖,自動辨識出特別吸引顧客的商品。
  1. 複數人群的視線能夠同時推定
    藉由能高速計算的特徵量抽出技術,計算視線的時間每人僅需不到001秒,偵測精確度毫不降低。因此,在攝影機拍到複數人群的狀況,所有人的視線都能同時推定,例如,觀眾在欣賞電子看板畫面時,能即時掌握吸引人的內容,也能運用在判斷廣告效果的用途上。

NEC集團致力於全球推廣「社會解決方案事業」,以提供安全.安心.效率.公平的社會價值,融合先進的ICT技術與知識,實現更為明亮而豐裕、更具效率而精粹的社會。