NECは2025年1月29日、映像解析で手本となる動作と実際の作業の違いを把握し、改善に向けたアドバイスを生成する技術を開発したと発表した。手指を使う細かな作業から体全体を使う作業まで、改善のための適切なアドバイスを提示する。製造、物流、建設といった作業現場で、指導者なしでもセルフ型でスキルを習得可能になる。生成AIを活用している。2025年度中に実証と製品開発を進め、2026年度内のサービス提供を目指す。
NECは、映像解析から、手本となる動作と実際の作業の違いを把握し、改善に向けたアドバイスを生成する技術を開発した。手指を使う細かな作業から体全体を使う作業まで、改善のための適切なアドバイスを自動で提示する。物品の組み立て作業や箱詰め、運搬作業など各業種の現場において、指導者を必要とせずにセルフ型で作業スキルを習得可能である（図1）。
図1：自動生成したアドバイスの例（出典：NEC）拡大画像表示
開発したのは、(1)手本となる動作との細かな動きの差異が発生している区間を検知する映像解析技術、(2)手本の動作に近づくための適切なアドバイス文を生成AIが生成する技術の2つである。
(1)差異区間を検知する映像解析技術では、手本となる動作と実際の作業を比較し、同じ動作が行われている区間を対応づける。その際、人の動きだけでなく、作業対象の物体に対する「つかむ」「持つ」といったインタラクションも捉えることで、手本となる動作と動作時間が異なっても正確に対応づけられるという（図2）。
図2：差異区間を検知する映像解析技術の概要（出典：NEC）拡大画像表示
(2)アドバイス文を生成する技術では、検出した差異区間映像に加え、腰や膝の動き、手・指の形状といった骨格情報を大規模視覚言語モデル（Vision and Language Model：VLM）に入力する。VLMは、改善すべき作業姿勢や動作を特定し、具体的なアドバイス文を生成する。生成したアドバイス文を該当部分の映像と共に提示する（図3）。
NECは2025年度中に実証と製品開発を進め、2026年度内のサービス提供を目指す。
図3：アドバイス文を生成する技術の概要（出典：NEC）拡大画像表示
