10 フロンティアサイエンス 実用段階

画像解析AIによる
番組映像自動要約システム

気軽に視聴できるショート動画の充実に向けて

展示概要

視聴者に多くの番組を知ってもらうための「ネット配信向けショート動画」の制作支援を目的として、映像自動要約技術の研究を進めています。ここでは、「画像解析AI」が選び出したシーンを使って、番組の要約動画を自動生成するシステムを展示しています。

画像解析AIによる番組映像自動要約処理の概要

重要シーンならではの構図とカメラワークを学習した「画像解析AI」の利用

本システムの「画像解析AI」は、「要約動画で使われるべき重要シーン」の構図(人・物・景色などの映し方)やカメラワークの特徴を学習しています。このAIを用いて映像を抽出することにより、実際の制作者が編集したものに近い要約動画の生成が可能です。

自動生成された要約動画を利用者が簡単に修正可能

ショート動画の制作者は、「顔のアップは控えたい」「カメラの動きは遅めで」「各カットの長さは短めに」などの多様な意図や好みを持っています。それらにきめ細かく応えるために、自動生成された要約動画を簡単な操作で修正できる機能を実装しました。

この技術を応用した「ニュース番組自動要約システム」の実用化

「画像解析AI」と音声認識技術を組み合わせて開発した「ニュース番組自動要約システム」が、NHK内のさまざまな部署の協力により、ニュースの制作現場で実用化されました。ニュース番組の要約動画が番組終了後のわずかな時間で生成され、SNSなどに展開されています。

【今後の予定】

「ニュース番組自動要約システム」の利用拡大に取り組むとともに、より多くの番組ジャンルを対象とした自動要約システムの実用化を目指します。