日立製作所とドイツ人工知能研究センター(Deutsches Forschungszentrum für Künstliche Intelligenz:DFKI)は3月8日、ウェアラブルデバイスを着用した作業員の作業内容を認識する人工知能(AI)を開発したと発表した。

同AIは、眼鏡型のデバイスである「アイトラッキンググラス」を活用して、作業者が注視している物体を認識する技術とアームバンド型デバイスを活用して、作業者の動作を認識する技術を組み合わせ、作業者の行動をリアルタイムに認識するというもの。具体的には、アイトラッキンググラス装着者の眼球の動きから注視点データを抽出し、ディープラーニングによる画像認識技術を活用することで、背景や他の物体の写り込みなどの周辺環境に影響されずに、「ネジ」や「ドライバー」といった物体を認識する技術を開発したほか、アームバンド型デバイスは、腕の動きに合わせてセンサから出力される、筋電位などの微小かつ瞬間的な信号から、動作に関わる情報を抽出し、ディープラーニングで学習することで、「回す」「押す」などの腕の動きを伴う身体動作を認識する技術を開発。これらを組み合わせることで、「ネジ締め」といった作業内容を認識する技術「階層型行動モデル」を開発することに成功。生産現場で想定する物体と身体動作をそれぞれ個別に事前学習することで、多様な作業を認識することができるようになったと日立では説明している。

なお、DFKIと日立では、これらの技術を活用することで、例えば「点検作業」を、「ネジ締め」「ボタンを押す」などの行動としてリアルタイムに認識するAIが実現できたとしており、今後は、今回開発したAIを活用し、作業手順のガイドや逸脱行動の検知など、生産現場での作業支援や、ヒューマンエラー防止に向けた技術開発を進めていきたいとしている。

開発したAIを用いた作業内容の認識の流れ