イマーシブテレプレゼンス技術「Kirari!」の研究開発が進展 ～ 中継先において競技空間を取り囲む新しい視聴体験を実現 ～

1．Kirari! for Arenaについて

　競技空間を複数のカメラで取得して世界に伝送し、中継先で再構成することで、多方向から多人数で競技を観戦する新しい観戦スタイルを提案します。
　Kirari! for Arenaでは、中継元で選手の映像に加えて位置情報を把握することで、従来、主に左右方向の動きによる臨場感の再現であったものが、奥行き方向を含めた前後左右の自然な動きによる臨場感の再現が可能となり、多方向から多人数で観戦する形態で、競技会場をあたかもそこへ再現したかのような空間を実現しました。

（図1） Kirari! for Arenaの利用イメージ

2．Kirari!を支える技術の研究開発の進展について

　「Kirari!」を支える各要素技術のこの1年間の開発成果のポイントは以下の通りです。

1．現場（センシング）技術

2．中継（処理・配信）技術

3．再現（提示）技術

4．サービス化に向けた取り組み：超高臨場の再現コストの低減

　競技場や舞台を実物大で超高臨場に再現する提示系に加えて、講演中継等に適した簡易かつコンパクトに臨場感を体感できる表示装置の実現に取り組みました。今後も多様な提示系を実現し再現コストの低減の取り組みを進めます。

（図2）「Kirari!」を支える技術

（図3） 各技術の進展

3．今後の展開

　さらなるKirari!の研究開発として、各要素技術の高度化と経済化を進めます。高度化については、物理的な空間を超える技術開発に加え、時空間を超えることを目指します。一方経済化については、再現（提示）コストの低減だけでなく、現場（センシング）--中継（処理・配信）--再現（提示）のすべての処理プロセスでの技術開発を進めます。
　これらの取り組みにより、スポーツ・エンターテイメント分野でのライブビューイング、エンタープライズ分野での講演中継などへの展開を視野に、サービス化に向けた取り組みをより一層加速してまいります。

　なお、本研究開発成果は、2018年2月22日～23日に開催する「NTT R&Dフォーラム2018」にてご覧いただけます。
　また、本フォーラム内「Kirari!ホール」において、超高臨場によってお客様の感動を最大化することを目指す「Kirari!」の姿およびそれを支える技術を、演出家とのコラボレーションにより、空間の壁を超えるスポーツ体験、および、時空間を超えるエンターテイメント体験としてご体感いただけます。
　「NTT R&Dフォーラム2018」サイト　https://labevent.ecl.ntt.co.jp/forum2018/info

^※1粒子フィルタ
時系列のデータ群において、過去の時系列データを基に次フレームにおける状態の出現確率（選手の追跡の場合、選手が存在する確率が高い位置）を推定する方法。

^※2MMT（MPEG Media Transport）
国際標準化団体である、ISO/IEC JTC 1/SC 29/WG 11 MPEGで制定するメディアトランスポート規格。IPを含む多様なネットワークに柔軟に対応できるトランスポート規格を目指し、2009年より検討開始。2014年6月、コアパート（23008-1）が国際標準化。