株式会社メルカリによる「AIロボットを活用した出品および検品作業の自動化に関わる研究開発」が、経済産業省および国立研究開発法人新エネルギー・産業技術総合開発機構（以下「NEDO」）が実施する国内の生成AIの開発力強化と社会実装の促進を目的としたプロジェクト「GENIAC（Generative AI Accelerator Challenge）」のロボット基盤モデルの研究開発支援事業に採択されました。RIISEは、本プロジェクトに共同研究先パートナーとして参画し、「マルチモーダルVLA」の研究開発を担当します。
本研究では、カメラ等の視覚情報だけでは困難だった繊細な力加減を要するロボット制御の実現に挑みます。ロボットの行動を生成するVLA（Vision-Language-Action）モデルに力覚・触覚センサを追加し、力触覚データと言語情報を結びつけて学習させることで、ロボットが手触りや接触状態を正しく理解できる技術の確立に取り組んでいます。これにより、靴の検品など柔軟性や不確実性を伴うタスクにおいて、作業能力と成功率の向上を図るものです。
本取り組みは、特定の検品自動化にとどまらず、従来の「視覚＋言語」に「力触覚」を融合させた多次元マルチモーダル基盤モデルへと進化させ、国際的な評価指標（ベンチマーク）において世界トップレベルの優位性を実証することを目指しています。
人間のように力触覚を頼りに複雑な作業をこなすフィジカルAI基盤を確立し、物流・検品を超えた多様な社会課題の解決と持続可能で豊かな社会の実現に貢献していきます。