你把地點和物體掃描成 3D 的高斯潑濺
穿行場景。
在 Android 手機或平板上,或在 Windows、Linux 和 macOS 上,你可以在場景中走動。
實驗性
你需要:
Android 手機和平板
Meta Quest
Windows
macOS
Linux
在你的手機、平板或電腦上探索高斯潑濺
用 Polycam、Scaniverse、Postshot、Luma 或其他工具製作的潑濺,或你的電腦用你的照片製作的潑濺,可以在 Android 手機或平板以及 Windows、Linux 和 macOS 上開啟,你可以像在頭戴裝置中一樣在其中走動。Immich 應用程式無法開啟任何潑濺。
- 把你的 .spz 或 .ply 潑濺放到 SMB 或 WebDAV 共用,或手機的資料夾中(「瀏覽資料夾」),或在「網路共用」的 + 選單中用「開啟潑濺檔案」挑選一個;在電腦上,用本程式開啟或拖放到其視窗上的潑濺檔案會立即開啟。潑濺會出現在照片和影片之後,帶有「3D 潑濺」標記和高斯數量。
- 開啟其中一個:地點會在你周圍展開,物體會出現在你面前。在電腦上,拖曳可環顧四周,用 W、A、S、D(AZERTY 鍵盤上為 Z、Q、S、D)或方向鍵行走,用滾輪前進和後退,用 E 和 Q 上升和下降,按 R 重設,按 Esc 返回;「環繞」會繞著物體轉動,而不是行走。在手機上,左手拇指控制行走,拖曳可環顧四周,雙指縮放可前進和後退,雙指滑動可平移,點兩下可重設;陀螺儀按鈕會隨著你轉動手機環顧四周。
- 「重設」會重新放置場景,「擺正」可以把躺倒或倒置的場景轉正,並在此裝置上為該檔案記住,資訊面板會說明正在顯示多少個高斯,以及它們的繪製速度。
在 Meta Quest 3 或 3S 中探索高斯潑濺
高斯潑濺是某個地點或物體的 3D 掃描,由 Polycam、Scaniverse、Postshot、Luma 等工具製作。在 Meta Quest 3 或 3S 上,Immuch360 會把它以真實大小放在你面前或你周圍,你可以走到它旁邊或在其中滑行。
- 把你的 .spz 或 .ply 潑濺放到 SMB 或 WebDAV 共用,或頭戴裝置的資料夾中(「瀏覽資料夾」,或「網路共用」的 + 選單中的「開啟潑濺檔案」)。它們會出現在照片和影片之後,帶有「3D 潑濺」標記和高斯數量。
- 開啟其中一個,然後點選「探索潑濺場景」。物體會立在你面前與眼睛同高,地點會在你周圍展開。左搖桿可以在其中滑行,右搖桿會以你為中心把視角轉動 30°,並保留你已到達的位置(「反轉搖桿轉向」會讓它往另一個方向轉動)。按 A、X 或握把鍵叫出的面板中的「重設」會從你所站的位置重新放置,「擺正」按鈕可以把躺倒或倒置的物體轉正,並為該檔案記住。
- 頭戴裝置可以讀取二進位 .ply 檔案以及第 1 至 4 版的 SPZ,第 4 版從 build 40 起支援。
用你的照片或影片製作潑濺場景(AI)
你拍攝了一個房間、一座花園或一尊雕像,想再次置身其中。在 Windows 電腦上,Immuch360 Desktop 會用你的照片或影片把它重建為高斯潑濺,你可以在 Meta Quest 3 或 3S 中,或在上述的潑濺檢視器中在其中走動。一切都在你的電腦上執行:沒有雲端,不需要帳號。Immich 應用程式沒有類似的功能。
- 慢慢拍攝影片,或每走一步拍一張照片,每一張都要拍到前一張所拍到的大部分內容。拍地點時,沿著牆壁走並朝對面拍,然後穿過中間;拍物體時,繞著它走兩圈,先在它的高度,再從稍高一點的位置。光線均勻、不要變焦、不要有任何移動的東西;避開鏡子、逆光的窗戶和反光的表面。
- 在圖庫或資料夾中選擇照片或影片,然後點選「製作潑濺場景(AI)」,並說明你拍的是什麼:「一個地方:房間、街道、花園」或「一個物體,繞著它拍攝」。對話框會說明它排除了哪些照片及原因、頭戴裝置會得到什麼(最多 150,000 個高斯)、在這台電腦上大約需要多久,以及檔案存放在哪裡:照片旁邊,或你選擇的資料夾。「同時為其他 3D 應用程式儲存 .ply」會把相同的高斯也保存為 .ply。
- 對話框會提供它的兩個元件,只需下載一次:COLMAP 4.2.1(BSD 3 Clause),約 10 MB,在處理器上把照片放到 3D 空間中,以及 Brush 0.3.0(Apache 2.0),約 16 MB,在顯示卡上訓練潑濺。
- 「製作場景」。面板會顯示每個步驟:擷取畫面、把照片放到 3D 空間中、訓練潑濺,以及剩餘時間,「取消」可停止它。在配備 RTX 4060 的筆記型電腦上,一個房間的 150 張照片約需 12 分鐘,一段一分鐘的物體影片約需 8 分鐘。
- 場景
<name>_splat.spz會放在照片旁邊或你的資料夾中。可在頭戴裝置中從你的 NAS 或其 Download 資料夾開啟(頭戴裝置「設定」、「進階」中的「大型潑濺」會完整顯示),或在電腦、手機或平板的潑濺檢視器中開啟,在那裡「儲存至 Immich」會把它保存在你的伺服器上。物體會為頭戴裝置裁切到其周圍,讓它在你面前開啟;.ply 則保留整個場景。
把潑濺場景保存在你的 Immich 伺服器上
Immich 伺服器不接受 .spz 或 .ply 檔案。Immuch360 會把潑濺場景保存在它的一張照片 <name>_splat.jpg 中,任何 Immich 伺服器都會像保存其他照片一樣保存它:它會出現在你所有裝置的時間軸中,Immuch360 則從它開啟場景。
- 在電腦、Android 手機或平板的潑濺檢視器中,走到你喜歡的視角,然後點選「儲存至 Immich」:你看到的畫面會成為它的照片,出現在你時間軸中場景的日期上,以及「潑濺場景」相簿中。共用或資料夾中的多個潑濺:選擇它們,然後點選「上傳至 Immich」。.ply 會保存為 SPZ,壓縮時有輕微損失。
- 在你的時間軸中開啟這張照片,然後點選「探索潑濺場景」:在電腦、Android 手機或平板,或使用 GitHub build 的 Meta Quest 3 或 3S 上。每台裝置只下載場景一次(使用行動數據時,大型場景會先詢問),之後立即開啟,離線也可以。
- 照片的一角帶有小小的 3D 標記,讓你在 Immich 和其他應用程式中分辨它;「設定」、「進階」中的「標記已儲存潑濺場景的相片」可讓之後的照片不加此標記。
場景:JamesBromberger, Wikimedia Commons,CC0
適用的螢幕
| 適用的螢幕 | 手機與平板 | 電腦 | Meta Quest | 電視 |
|---|---|---|---|---|
| 高斯潑濺,.spz 和 .ply實驗性 | 是 | 是 | 是 | |
| 以照片形式保存在 Immich 中的潑濺場景實驗性 | 是 | 是 | ||
| 由照片或影片製作的潑濺場景(AI)實驗性 | 是 |
