Bandai-Namco-Research-Motiondataset - このリポジトリは、バンダイナムコリサーチ株式会社が収集したモーションデータセットを提供します。

(This repository provides motion datasets collected by Bandai Namco Research Inc)

Created at: 2022-04-27 19:15:48
Language: Python

バンダイ-ナムコ-リサーチ-モーションデータセット

このリポジトリは、バンダイナムコリサーチ株式会社が収集したモーションデータセットを提供します。

日本語のREADEMEはこちらをご覧ください。

リアルで表現力豊かなキャラクターアニメーションを追求するゲームや映画の多様な様式化されたモーションを作成することに長年の関心があります。ただし、既存の方法を使用して、さまざまな表現スタイルをすべて含む新しいムーブメントを作成することは困難です。このため、最近注目を集めているのは、特定のコンテンツを含むクリップ内のモーションを、同じコンテンツを維持しながら別のスタイルの別のモーションに変換することを目的としたモーションスタイル転送(MST)です。モーションはコンテンツとスタイルで構成され、コンテンツはモーションのベースであり、スタイルはモーションに関連付けられたキャラクターの気分や性格などの属性で構成されます。

データセットには、日常の活動、戦闘、ダンスなど、さまざまなコンテンツが含まれています。アクティブ、疲れ、幸せなどのスタイルで。これらは、MSTモデルのトレーニングデータとして使用できます。以下のアニメーションは、視覚化されたモーションの例を示しています。

現在、このリポジトリには2つのデータセットがあり、どちらも

dataset
ディレクトリの下にあります。

  • バンダイナムコ-リサーチ-モーションデータセット-1詳細
    • 日常の活動、ファイティング、ダンスなど、17種類の幅広いコンテンツ。
    • 表現の多様性を含む15のスタイル。
    • 合計36,673フレーム。

  • バンダイナムコ-リサーチ-モーションデータセット-2詳細
    • 主に移動と手の動作に焦点を当てた10種類のコンテンツ。
    • 単一の統一された表現を使用する7つのスタイル。
    • 合計384,931フレーム。

utils
ディレクトリの下に、ステップバイステップの説明を含む視覚化用のサンプルスクリプト(Blenderを使用)があります。詳しくはこちらをご覧ください。

データ収集

各データセットは、バンダイナムコのモーションキャプチャスタジオで収集された3人のプロの俳優のモーションに基づいています。ノイズ除去、プロポーションアラインメント、クリッピングなどの後処理を適用しました。BVH形式で保存されます。

ライセンス

データセットとスクリプトは、次のlincenseで利用できます。

  • バンダイナムコリサーチモーションデータセット-1:CC BY-NC-ND 4.0
  • バンダイナムコリサーチモーションデータセット-2:CC BY-NC-ND 4.0
  • Blenderでのモーションビジュアライゼーション:MIT

関連事業

前述のように、MSTの分野は最近注目を集めています。このトピックに興味がある場合は、以下の調査とデータセットの網羅的ではないリストを参照してください。これらの論文で紹介されたモデルは、高レベルのパフォーマンスを示しており、MSTに関連するデータセットはさまざまなモーションデータを提供します。

論文

  • (Journal of Sensors 2021)運動学的制約と組み合わせた周期的一貫性モーションスタイル転送法[論文]
  • (CVPR 2021)生成フローを使用した自己回帰定型化モーション合成[論文]
  • (CVPR 2021)インタラクティブな画像からビデオへの合成のためのオブジェクトダイナミクスの理解[論文]
  • (ACMTrans。Graph2020)ビデオからアニメーションへの対になっていないモーションスタイルの転送[紙]

データセット

  • ディープモーション編集[GitHub]
  • UbisoftLaForgeアニメーションデータセット[GitHub]

©[2022]バンダイナムコリサーチ株式会社無断複写・転載を禁じます