NECは工場での組み立てなどの人手による作業において、手指の動きを捉えて数十種類の細かい作業を高精度に識別することで、全工程の流れを見える化する技術を開発したと発表した。
同社では今後、本技術について製造や建設、物流、小売などの現場作業で検証を進め、2022年度中の事業化を目指す。
今回開発した技術では、各指の関節と指先（両手合計42ヵ所）の動きを基にして、捉えた手指形状の特徴量と、指周辺の画像特徴量との共起関係（ある手指の形と、特定の部品や道具が同時に現れる状況）を学習する方式となっている。そのため、個別の部品や道具を登録して学習する必要がないとのこと。
これにより、本技術では数回分のお手本映像だけで学習モデルを作成し、「モジュラージャックを取る」「マイクをはめ込む」や「電動ドライバーでネジを締める」などの数十種類の細かい作業を高精度に識別することが可能だ。
NECプラットフォームズの事業所にて撮影した製品組み立て実験映像に適用した結果では、各作業時間を高精度に実測し、あらかじめ規定した時間との差異を把握することができたという。これにより、部品置き場の再調整、組み立て方の指導、手順の再考などの対策を講じて生産性の向上を図ることが可能になるとしている。
【関連記事】
・オンラインホワイトボードの「Miro」が日本語に対応 NECはアジャイル開発で活用
・NECが新たな顔認証ソフトウェアを販売開始 AIによる不正入室防止のほか、通信障害でも継続運用可能
・NEC、5G利用環境を共創するコミュニティハブを開設 顧客やパートナーによる社会実装研究を促す
