Shinsuke Mori 研究室

主宰者：Shinsuke Mori
京都大学

AI 要約（直近 5 年の研究成果）

この研究室は、映像とテキストの両方の情報から物体の操作方法を学ぶ研究に取り組んでいます。特に、ロボットが人間の指示に従って道具を使ったり物体を扱ったりできるようにするため、一人称視点の映像に基づいて接触点や動作の軌跡を自動で学習する手法を開発しています。テキスト説明と映像を結びつけることで、大規模な実験データセットを作成し、様々な操作に対応できるアプローチの構築を進めています。 同時に、映像から手順や説明文を自動生成する課題にも取り組んでいます。調理やバイオ実験などの映像から、何が起きているかを理解し、それを自然な文章で記述するモデルを開発しています。このプロセスでは、物質や道具の状態の変化を追跡することが重要であり、映像の内容と生成されるテキストの対応付けが課題となります。 加えて、テキスト自体の分析も行っており、言語から事象の事実性や時間情報を抽出する研究や、地理的情報をテキストから自動抽出する研究も進めています。これらの研究は、言語処理とコンピュータビジョンを統合し、現実世界の様々な活動を機械が理解できるようにすることを目指しています。

※ AI（Claude）が、公開されている論文要旨から研究の問い・手法・主要な発見を事実情報として抽出・再構成して自動生成しています。誤りを含む可能性があるため、正確性は研究室公式情報でご確認ください。

外部リンク

関連研究室(8 件)

研究成果（15 件）

続きを表示（残り 5 件）

科研費（0 件）

まだデータがありません（KAKEN 取り込み後に表示）。

所属学会・役職（0 件）

まだデータがありません（学会データ連携後に表示）。