シーンを歩こう。

ガウシアンスプラットは、場所や物を3Dでキャプチャーしたもので、Polycam、Scaniverse、Postshot、Lumaなどのツールで作ります。Meta Quest 3または3Sでは、Immuch360がそれを実物大で目の前やまわりに置き、まわりを歩いたり中をすり抜けたりできます。

1. .spzまたは.plyのスプラットをSMBまたはWebDAVの共有、またはヘッドセットのフォルダーに置きます (「フォルダを参照」、または「ネットワーク共有」の+メニューの「スプラットファイルを開く」)。写真と動画の後に、「3D スプラット」のバッジとガウシアンの数付きで表示されます。
2. 1つを開き、「スプラットのシーンを探索」を選びます。物は目の高さで目の前に立ち、場所はまわりに広がります。左スティックで中をすり抜け、右スティックでは、たどり着いた場所を保ったままビューを自分のまわりに30°ずつ回します (「サムスティックの回転を反転」で逆向きになります)。A、Xまたはグリップで表示されるパネルの「リセット」で今立っている位置から置き直し、「向きを直す」で横倒しや逆さまのものを回転させ、そのファイルについて記憶します。
3. ヘッドセットはバイナリの.plyファイルとバージョン1から4までのSPZを読み込みます。バージョン4はビルド40から対応しています。

部屋、庭、像を撮影して、もう一度その中に立ちたいとします。Windowsコンピューターでは、Immuch360 Desktopが写真や動画からそれをガウシアンスプラットとして再構成し、Meta Quest 3または3Sや、上のスプラットビューアーでその中を歩けます。すべてあなたのコンピューターで動作します: クラウドもアカウントも不要です。Immichアプリには同様の機能はありません。

1. ゆっくり撮影するか、一歩ごとに写真を撮り、どの写真にも前の写真に写ったものの大部分が写るようにします。場所なら、壁沿いを歩きながら向かい側を見渡し、次に中央を通ります。物なら、そのまわりを二周します。一周目は物の高さで、二周目は少し上からです。光は均一に、ズームなし、動くものなし。鏡、逆光の窓、光沢のある表面は避けます。
2. ライブラリまたはフォルダーで写真や動画を選び、「スプラット シーンを作成 (AI)」を選んで、撮影したものを指定します: 「場所: 部屋、通り、庭」または「物 (周りを歩いて撮影)」。ダイアログには、除外する写真とその理由、ヘッドセットが受け取るもの (最大150,000個のガウシアン)、このコンピューターでのおおよその所要時間、ファイルの保存先 (写真の隣、または選んだフォルダー) が表示されます。「ほかの 3D アプリ用に .ply も保存する」で、同じガウシアンを.plyとしても保存します。
3. ダイアログが二つのコンポーネントを提示し、一度だけダウンロードします: プロセッサー上で写真を3D空間に配置するCOLMAP 4.2.1 (BSD 3 Clause、約10 MB) と、グラフィックスカード上でスプラットを学習するBrush 0.3.0 (Apache 2.0、約16 MB) です。
4. 「シーンを作成」。パネルにはフレームの取り出し、写真の3D配置、スプラットの学習という各ステップが残り時間とともに表示され、「キャンセル」で止められます。RTX 4060搭載のノートPCでは、部屋の写真150枚で約12分、物を撮った一分の動画で8分です。
5. シーン<name>_splat.spzは写真の隣か、選んだフォルダーに保存されます。ヘッドセットではNASまたはDownloadフォルダーから開くか (ヘッドセットの「設定」の「詳細設定」にある「大きなスプラット」ですべてが表示されます)、コンピューター、スマートフォン、タブレットのスプラットビューアーで開きます。ビューアーでは「Immich に保存」でサーバーに保管できます。物はヘッドセット用にそのまわりで切り抜かれ、目の前で開くようになります。.plyにはシーン全体が残ります。

Immichサーバーは.spzや.plyのファイルを受け付けません。Immuch360はスプラットシーンを、そのシーンを写した写真<name>_splat.jpgの中に保存し、どのImmichサーバーもこれを他の写真と同じように保管します: すべてのデバイスのタイムラインに表示され、Immuch360はそこからシーンを開きます。実験的機能で、既定でオンです。

1. コンピューター、Androidスマートフォン、タブレットのスプラットビューアーで、気に入った視点まで歩き、「Immich に保存」を選びます: 見ている視点がその写真になり、タイムラインのシーンの日付の位置と、アルバム「スプラットシーン」に入ります。共有やフォルダーの複数のスプラットは、それらを選び、「Immichにアップロード」を選びます。.plyはSPZとして保存され、わずかな損失を伴って圧縮されます。
2. タイムラインで写真を開き、「スプラットのシーンを探索」を選びます: コンピューター、Androidのスマートフォンやタブレット、またはGitHubビルドのMeta Quest 3か3Sで開けます。各デバイスはシーンを一度だけダウンロードし (モバイルデータでは大きいものの前に確認します)、その後はオフラインでもすぐに開きます。
3. 写真の隅には小さな3Dマークが付き、Immichや他のアプリで見分けられます。「設定」の「詳細設定」にある「保存したスプラットシーンの写真にマークを付ける」で、次からの写真にはマークを付けません。