VR体験録画システム VTREX 『VRチャリティライブ「EXISTENCE」』追体験バージョン
VRでの体験を映像以上の思い出として残したいという思いから開発した「VR体験録画システム」がついにアーリーアクセスリリース! VRで開催された能登半島地震支援メタバースチャリティライブ “EXISTENCE” を「VR体験録画システム」での来場者としての体験を記録しました。是非このアプリで追体験してみてください。 ------------------------------------------------- VR体験録画システムVRプレイヤー「VTREX VR Player」 ■ 製品情報 製品名:VR体験録画システムVRプレイヤー「VTREX VR Player」 製作者:ドコカノうさぎ 動作環境: Windows10 64bit Steam VR Index 、 OclusRift/Quest , HTC VIVE等のVR HMD ※動作はIndexで検証しています。 バージョン:0.10 (2021/09/22) ※アルファ版 バージョン:0.20 (2024/02/12) ※EXISTENCE1体験版 バージョン:0.21 (2024/02/19) ※アバター切り替え、デスクトップモード、カメラ実装 ■ 内容物 ● VR体験録画システムについて #VR体験録画システム VRからの配信や録画動画を視聴者もVRで体験できるシステムで #VR体験録画システム を開発中です。 VR内での録画映像にHMDやコントローラーのトラッキング情報(位置や角度)を記録しておき、その情報をもとに録画時のアバターの動きを再現するとこでその場にいたかのような臨場感まで記録・再現するシステムです。 VR内で再現して自分もはいりこむことで、録画時の体験を一緒に追体験でいる感覚を味わうことが出来ます。 ● 本アプリ VR体験録画システムで録画した映像(MP4動画)をVR空間内で再生するプレイヤーアプリです。 VR内での記録をアバターの動きと視界の先のスクリーンで再現します。 その空間にVRで(あるいはデスクトップで)入り込みて自由に移動しながら、記録時のアバターと一緒に映像を観ることができます。 体験している様子の映像 ▶ https://www.youtube.com/watch?v=OAq-x5Y3_uM ■ 使用方法 ● インストール方法 ダウンロードしたZIPファイルを適当な場所に展開してください ※フォルダー名には日本語が含まれないようにしてください ● 体験記録データダウンロード 能登半島地震支援メタバースチャリティライブ “EXISTENCE”を追体験できる記録データは別途ダウンロードしてください。 https://drive.google.com/file/d/15VmDFDhBG7d8_bZjRkUgyTHCD3F7t-sZ/view?usp=sharing ダウンロードしたファイルはアプリフォルダの「sample」フォルダに格納してください。 ● 起動方法 VRXPPlayerVR.exe をダブルクリックして起動してください ● 使い方 起動するとVR空間の中央にゆみうすさんのアバターが出現します。 同時にアバターの前面でビデオが再生されます。この映像はVR体験録画時の視界の映像です。また、アバターもその体験時の動きにあわせて動き出します。 あなたはゴシックなドコカノうさぎアバターとして出現します。 スティック操作で移動できます。 【操作方法(移動)】 ・左コントローラースティック 左右:左右に移動します 前後:前後似移動します ・右コントローラースティック 左右:左右に回転します 前後:前後似移動します ※左コントローラーをあわせて操作すると2倍の速度で移動できます 【操作方法(その他)】 ・右 Aボタン、Bボタン 押している間、デスクトップ映像が主観視点から外部カメラ映像にきりかわります ・左 Aボタン、Bボタン 対応するカメラの位置がその時点での視界の位置になります 再生する映像の操作 デスクトップ画面の右下にプレイヤーがあります。 ・OPEN ファイルを開きます。VR体験録画システムで録画したMP4ファイルを選択してください ※ファイルをドロップすることでも開くことができます ・PLAY/PAUSE 再生・停止します ● デスクトップモード VR機器がなくても使用できます カメラをキーボード(WASD+QEで移動、IJKL+UOで回転)またはマウスで移動できます。 キーボードの1,2,3キーでカメラを切り替えられます。 ● 制限事項 ・動作検証はOculusTouchでのみ行っているためVIVEコントローラーでは操作がうまくできないかもしれません ・アバターと実際のプレイヤーの高さのキャリブレーションは未実装です 頭の位置がプレイヤーの黒いアバターとあっていないと視界の前に顔の内側の茶色い部分がみえるなどします PlaySpaceMoverなど外部ソフトで高さを調整してください ● 今後の予定 ・キャリブレーション機能 ・再生アバターのキャリブレーション ・プレイヤーアバターのキャリブレーション ・プレイヤーアバターの表現力向上 ・VR内にカメラ実装 ・アバターの変更機能(VRMアバターをVrodi Hub,ConnectChatなどから取得) ・YouTube生配信の映像を再生できるようにする ※VR内での体験を視聴者が近い感覚で体験できるようになる、新世代のVTuber配信です! ● だいぶ先の予定 ・複数人で同時に試聴できるようにする ・メタバースとする ● VR体験録画システム用映像の作り方 以下のツールをダウンロードして展開・実行してください VR録画体験システム レコーダー for OBS https://drive.google.com/file/d/1U-JngyveZt4FEyYQXRt8etli72Cr2eWS/view?usp=sharing アプリを実行するとVR体験録画システム用のトラッキング情報映像が表示されます。 トラキング情報は画面の下部の白黒のコードです。 HMDやコントローラーを動かした際に、コード(白黒模様)が変化したら正常に動作しています。 このウィンドウをOBSで録画します。 OBSでは、VRChatなどのVRアプリやVRビューなどの主観映像を録画できるようにしてください その上に、本アプリの映像を重ねてください。 緑の部分はクロマキーで抜いてください。 主観映像の下の部分にコード(白黒模様)が見える状態になっていればOKです そのまま録画してください。 録画した映像は、プレイヤーアプリで再生できます。やったー ● プレイデモ動画・クレジット このアプリを使用したデモ動画はこちら 【VRライブ】 能登半島地震支援メタバースチャリティライブ “EXISTENCE” <アーカイブ無償公開中> https://www.youtube.com/watch?v=dV1Ju_yuubo 【VR体験記録・アバター提供】 ゆみうすさん https://twitter.com/JumiusV ■ 利用規約 ・本アプリは個人、法人とも追加ライセンス料金なしで自由に使えます。 ・本アプリを使用して生成した映像の権利は利用者にものであり、自由に頒布、配信、販売ができます。クレジット表記も不要です(ただしクレジット表記は歓迎です) ・本アプリの著作権はドコカノうさぎに帰属します / 自作発言は禁止します ・本アプリの再配布は禁止します ・本アプリを使用するにあたり生じたいかなるトラブル、損失等について製作者は一切責任を負いません ■ おねがい(必須ではありません。可能な場合で結構です) ・本アプリを使用した作品公開時に、クレジット表記をしてただけると嬉しいです(必須ではありません) クレジット「ドコカノうさぎ」または英語名「DokokanoUsagi」でおねがいします。 ・「ドコカノうさぎ」クレジットには以下のいずれかまたは両方のリンク先の記載が可能であればおねがいします a) https://twitter.com/patsupyon b) https://www.youtube.com/channel/UC-ONPiTE9sMKUQjrRIN94Xg ・作品のツイート時にはハッシュタグ #VR体験録画システム #VTEREX をつけていただけると嬉しいです。 ■ 連絡先 ドコカノうさぎ https://twitter.com/patsupyon