人生にゲームをプラスするメディア

【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity

ゲームビジネス 開発

【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
  • 【Unite Japan 2014】初音ミクが人気ロックバンド「BUMP OF CHICKEN」とコラボ、PV制作に使われたUnity
ゲームエンジンながら、今ではゲーム以外のさまざまな用途でも使用されているUnity。人気ロックバンドのBUMP OF CHICKENと、初音ミクのコラボ曲『ray』のPVで作成された特設映像でも、Unityが使用されています。もっともCG合成ではなく、プロジェクターで投影された初音ミクと演奏者を同時に撮影するという状況だったため、さまざまな工夫がなされました。

Unite Japanで4月8日、クリプトン・フューチャー・メディアの田地正宏氏は「円筒スクリーンを撮影する実写カメラにセンサーを設置してモデルを実写カメラに追随させる」と題した講演で、その一端を披露。なお、本講演の概要はYoutubeの初音ミク公式チャンネル内で、「【Hatsune Miku】初音ミク ドキュメンタリー テクノロジー編」として、動画でも開設されていますので、あわせてご覧ください。

はじめにPVの撮影状況について簡単に整理しておきましょう。スタジオの中央に直径3メートルの円筒形スクリーンが設置され、ここに初音ミク(本作のためにデザインされた「14モデル」)が投影されます。スクリーンの周囲にはBUMP OF CHICKENのメンバーが立ち、楽曲を演奏。その周囲にドリーに載せた実写カメラが配置され、スクリーンに対してぐるぐる回転移動しながら、演奏風景とスクリーン上の初音ミクを同時に撮影していく仕組みです。

初音ミクの映像自体はUnity上でリアルタイムレンダリングされ、背景のエフェクト(ムービーテクスチャとして再生)とあわさってプロジェクターに出力されます。PC上では円筒スクリーンは横長の長方形スクリーンとして認識され、この上を初音ミクが左右に移動しながら歌い、踊ることになります。ただし前述のように「演出意図にあわせてメンバーと初音ミクを同時に撮影する」という仕様上、実写カメラの動きとスクリーン上のミクの表示位置を同期させる必要がありました。

まずUnityではマルチディスプレイ出力に対応していないため、今回のような横長のスクリーン出力は標準では不可能です。そこでマルチモニタ対応グラフィックボックスの「TripleHead2Go」を使用し、3840×1080ピクセルの画面サイズを確保しました。また背景に使用するエフェクト動画でも問題が発生。Unity標準のムービーテクスチャでは、動画の任意の地点から再生できなかったため、アセットストアからプラグインを購入して対応されました。

ドリー上の実写カメラには、3軸の加速度センサーとジャイロを合わせた6軸センサーを搭載し、Wi-fiでスクリーン中央部にある親機に角度情報を配信する形をとりました。センサー側で移動情報から角度情報を生成し、Androidデバイスを経由してWi-fiで送信。親機からUnity側に情報をわたし、角度情報を解析してミクの表示場所を決定しています。

ちなみに、このセンサーは当初人間の頭部に設置して使用することを目的に、研究開発されていたものでした。それが実写カメラの移動解析に用いられることになるとは、誰も想像できなかったようです。

このほかバックアップとして、MIDI信号を用いた同期システムも採用されています。MIDI信号をコンバータアプリで受信してコマンドに変換し、ソケット通信でUnityに送信した後に、解析して使用するという流れです。具体的には音楽演奏データをネットワーク経由でリアルタイムに共有するための通信プロトコル、OSCを用いて情報がやりとりされています。

田地氏の講演は短いながらも、非常に濃い内容のものでした。本講演内容を含む一連の技術開発は、すべてクリプトン・フューチャー・メディアが担当し、いわば共同開発といったところ。同社の高い技術力が大いに感じられました。
《小野憲史》

編集部おすすめの記事

特集

ゲームビジネス アクセスランキング

  1. AIが作ったゲームを遊ぶ日がくる―『がんばれ森川君2号』森川幸人氏が語るゲームとAIの未来

    AIが作ったゲームを遊ぶ日がくる―『がんばれ森川君2号』森川幸人氏が語るゲームとAIの未来

  2. 戦慄ホラー『Outlast 2』開発元が「専用おむつ」を発表!ファンからの「漏らした」報告を受け

    戦慄ホラー『Outlast 2』開発元が「専用おむつ」を発表!ファンからの「漏らした」報告を受け

  3. 「エロマンガ先生」山田エルフ大先生とお昼寝できるVRアプリ登場! 先行版ではツイスターゲームも

    「エロマンガ先生」山田エルフ大先生とお昼寝できるVRアプリ登場! 先行版ではツイスターゲームも

  4. 「高知県からスタークリエイターを」―若き経営者の考える地域の未来

  5. 2018年3月発売の新作ゲームは何を買う?―注目タイトルまとめ!

  6. 2018年4月発売の新作ゲームは何を買う?―注目タイトルまとめ!

  7. 『バイオハザード オペレーション・ラクーンシティ』を開発したSlant Sixスタジオで4分の1以上の従業員がレイオフ

  8. 【CEDEC 2017】AIは『人狼』をプレイできるのか!?カオスな人間vs AI戦も展開されたセッションレポ

  9. ミクシィXFLAG スタジオに訊くゲーム開発現場での“業務効率化”-我々が『SHOTGUN』を導入したワケ

  10. 【GDC 2009】サンフランシスコのゲームショップ巡り

アクセスランキングをもっと見る