1. トップ
  2. 学校・団体
  3. 千葉工大、世界最大の動画キャプションデータセットを共同開発

2019年3月13日

千葉工大、世界最大の動画キャプションデータセットを共同開発

千葉工業大学人工知能・ソフトウェア技術研究センター(ステアラボ)は12日、産業技術総合研究所(産総研)、新エネルギー・産業技術総合開発機構(NEDO)と共同で、世界最大で、日本語では初となる、動画キャプションデータセット「STAIR Actions キャプションデータセット」を開発したと発表した。

このデータセットは、7万9822万本の動画に付与された39万9233個のキャプション(動画内容を説明する日本語記述)で構成。ディープラーニングの訓練用データとして用いれば、動画を日本語に変換するモデルを構築することができる。

ステアラボ・産総研・NEDOの3者は、2016年から、人の動作のきめ細かい認識の研究に取り組んできた。

ディープラーニングによってきめ細かい動作認識を実現するためには人の動作を収録した動画やその動画を日本語で記述したデータが大量に必要だが、この3者のプロジェクトではディープラーニングによる動作認識モデル構築のための日常シーンをおさめた動作動画10万本からなるデータセット「STAIR Actions」を構築し、昨年7月に公開。

今回、STAIR Actionsに含まれる動画7万9822本の動画に対して日本語で内容を記述した39万9233個のキャプションデータセットを構築し、12日にインターネットで公開した。

人の動作動画キャプションデータセットとしては、マイクロソフト社の26万件を超えて世界最大規模のデータセットとなり、日本語では初の大規模データセットとなるという。

1本の動画あたり平均5つの日本語キャプションで、キャプションは動画の内容を日本語で記述しており、記述は「誰が」「どこで」「何をしている」の3つの要素で構成されている。

関連URL

STAIR Actions キャプションデータセット

9月開催!教育分野 西日本最大 第3回 関西 教育ITソリューションEXPO 会期 2019.9.25(水)-27(金) 会場 インテックス大阪 詳細はこちら
iPadの管理をもっと簡単に! 世界中で20,000社を超える導入実績。1,200万台のデバイス管理に携わっています。 jamf
教育改革を見据えICT×紙で行う新しい授業実践 Classi NOTE 授業への参加意欲があがった 詳しくはこちら
プログラミングの基本が楽しく身につく、toio(TM)の特別ワークショップ資料公開! お得なセット新登場!!
プログラミングを子どもに教えたい大人向け1日講座 毎月開催 ユーバー株式会社
EDIX関西2019 9月25日~27日開催 出展情報・商談予約 出展者特集

アーカイブ

  • Connected Ink 2019 11.27 wed 参加費無料 詳細および登録はこちら wacom
  • 教育ICTって現場じゃ使われないと思ってませんか? ちゃんと使われている事例がたくさんあります。 みらいスクールステーション 成功の秘訣はこちら FUJISOFT
  • 学校法人 大多和学園 開星中学校・高等学校 すらら×CBT入試
  • お試し無料! 小学生向け 漢字・計算 クラウド型デジタル教材 CHIeru
  • プログラミング教室ポータルサイト コエテコ by GMO 掲載教室数 No.1
  • 事例紹介作って掲載します。 ICT教育ニュースの楽々 事例作成サービス