ITRI "Grab-and-Go" Cashierless Smart Store
技術簡介
結合多重感測器融合方式與電腦視覺達成高準確度的實體消費購物流程辨識能力，其中包含「消費者動作辨識技術」及「消費者店內追蹤連結技術」。
技術特色
本技術採用多重感測融合辨識系統架構，進行即時顧客商品取放辨識及追蹤綁定，實現「拿了就走」的購物情境，以明確的感測器觸發 (如紅外線光柵) 為商品取放運算的起點，相對於以電腦視覺為主的「拿了就走」智慧商店做法，估計約只需1/60運算量。
圖1 工研院「拿了就走」無人收銀智慧商店
技術規格
本技術為實現「拿了就走」的實體零售購物情境，包含5項關鍵技術：
- 事件偵測：以紅外線光柵 (被遮蔽) 模組的觸發做為商品取放事件的起始點，接著才會通知底下模組進行運算，可大幅降低運算需求
- 人員追蹤：輸入多攝影機影像，以跨攝影機人員追蹤、人員偵測修正位移、再加上少量資料人員辨識進行身份重新確認取得人員位置
- 人員動作辨識：輸入單張影像辨識人員是否有伸手的動作
- 商品取放辨識：結合紅外線遮蔽資訊/重量/影像辨識模組結果，並同時考慮目前各貨架上的商品及使用者購物車中的情況等，做最終物品辨識的推論
- 人員綁定：將不同攝影機座標下的人員追蹤、人員動作辨識等模組的結果投影至同一世界座標下，再透過最佳化技術決定兩者間的最佳配對，找出與事件發生 (物品取放的層板位置) 距離最短的可能人選
應用範圍
於零售業等智慧場域，節省人力(可節省2/3人力)外，同時解決消費者不喜歡排隊的痛點應用。
聯絡窗口
聯絡人：陳婉瑜/巨量資訊科技與應用推廣部(C300)
電話：886-3-5912218
Email：Michelle.Chen@itri.org.tw
https://www.itri.org.tw/
工研院資訊與通訊研究所
