เดินผ่านฉาก

สแปลตเกาส์เซียนคือภาพจับ 3D ของสถานที่หรือวัตถุ ที่สร้างด้วย Polycam, Scaniverse, Postshot, Luma และเครื่องมืออื่น บน Meta Quest 3 หรือ 3S Immuch360 วางมันไว้ตรงหน้าหรือรอบตัวคุณในขนาดจริง และคุณเดินรอบ ๆ หรือเลื่อนผ่านมันได้ ฟีเจอร์นี้เป็นแบบทดลองและเปิดไว้เป็นค่าเริ่มต้น

1. วางสแปลต .spz หรือ .ply ของคุณไว้บนแชร์ SMB หรือ WebDAV หรือในโฟลเดอร์ของเฮดเซ็ต ("เรียกดูโฟลเดอร์" หรือเปิดไฟล์สแปลตจากเมนู + ของแชร์บนเครือข่าย) สแปลตจะแสดงต่อจากรูปภาพและวิดีโอ พร้อมป้ายสแปลต 3D และจำนวนเกาส์เซียน
2. เปิดหนึ่งไฟล์ แล้วสำรวจฉากสแปลต วัตถุจะตั้งอยู่ตรงหน้าคุณในระดับสายตา สถานที่จะเปิดออกรอบตัวคุณ ก้านควบคุมซ้ายเลื่อนผ่าน และก้านควบคุมขวาหมุนมุมมองรอบตัวคุณทีละ 30° โดยคงจุดที่คุณไปถึงไว้ ("กลับทิศการหมุนด้วยคันโยก" หมุนไปอีกทาง) รีเซ็ตในแผงที่ A, X หรือปุ่มกริปเปิดขึ้นจะวางใหม่จากจุดที่คุณยืน และปุ่มตั้งให้ตรงหมุนวัตถุที่มาแบบนอนหรือกลับหัว และจดจำไว้สำหรับไฟล์นั้น
3. เฮดเซ็ตอ่านไฟล์ .ply แบบไบนารีและ SPZ เวอร์ชัน 1 ถึง 4 ได้ โดยเวอร์ชัน 4 ตั้งแต่ build 40

คุณถ่ายวิดีโอห้อง สวน หรือรูปปั้นไว้ และอยากกลับไปยืนอยู่ในนั้นอีกครั้ง บนคอมพิวเตอร์ Windows Immuch360 Desktop สร้างมันขึ้นใหม่จากรูปภาพหรือวิดีโอของคุณเป็นสแปลตเกาส์เซียน ซึ่งคุณเดินผ่านได้ใน Meta Quest 3 หรือ 3S หรือในตัวดูสแปลตด้านบน ทุกอย่างทำงานบนคอมพิวเตอร์ของคุณ: ไม่มีคลาวด์ ไม่มีบัญชี ฟีเจอร์นี้เป็นแบบทดลองและเปิดไว้เป็นค่าเริ่มต้น แอป Immich ไม่มีอะไรแบบนี้

1. ถ่ายวิดีโอช้า ๆ หรือถ่ายรูปทุกก้าว ให้แต่ละภาพเห็นส่วนใหญ่ของสิ่งที่ภาพก่อนหน้าเห็น สำหรับสถานที่ ให้เดินเลียบผนังโดยมองข้ามไปอีกฝั่ง แล้วเดินผ่านตรงกลาง; สำหรับวัตถุ ให้เดินรอบมันสองรอบ ที่ระดับความสูงของวัตถุ แล้วจากสูงขึ้นมาเล็กน้อย แสงสม่ำเสมอ ไม่ซูม ไม่มีอะไรเคลื่อนไหว; หลีกเลี่ยงกระจกเงา หน้าต่างย้อนแสง และพื้นผิวมันวาว
2. เลือกรูปภาพหรือวิดีโอ ในคลังภาพหรือในโฟลเดอร์ แล้วกด "สร้างฉากสแปลต (AI)" และบอกว่าคุณถ่ายอะไร: "สถานที่: ห้อง ถนน สวน" หรือ "วัตถุ ที่คุณเดินถ่ายรอบ ๆ" กล่องโต้ตอบจะบอกว่าตัดรูปภาพใดออกและเพราะอะไร เฮดเซ็ตจะได้อะไร (สูงสุด 150,000 เกาส์เซียน) ใช้เวลาประมาณเท่าใดบนคอมพิวเตอร์เครื่องนี้ และไฟล์จะไปอยู่ที่ไหน: ข้างรูปภาพ หรือโฟลเดอร์ที่คุณเลือก "บันทึก .ply สำหรับแอป 3D อื่นด้วย" เก็บเกาส์เซียนชุดเดียวกันเป็น .ply ด้วย
3. กล่องโต้ตอบจะเสนอส่วนประกอบสองตัวให้ดาวน์โหลดครั้งเดียว: COLMAP 4.2.1 (BSD 3 Clause) ประมาณ 10 MB ซึ่งวางตำแหน่งรูปภาพเป็น 3D บนโปรเซสเซอร์ และ Brush 0.3.0 (Apache 2.0) ประมาณ 16 MB ซึ่งฝึกสแปลตบนการ์ดจอ ทั้งสองตัวสร้างโดย CI ของโปรเจกต์จากซอร์สโค้ด เซ็นลายเซ็นโดย APROGSYS และตรวจสอบด้วย SHA-256; หลังจากนั้นทำงานแบบออฟไลน์ได้
4. "สร้างฉาก" แผงจะแสดงแต่ละขั้นตอน คือการดึงเฟรม การวางตำแหน่งรูปภาพเป็น 3D และการฝึกสแปลต พร้อมเวลาที่เหลือ และ ยกเลิก จะหยุดงาน บนแล็ปท็อปที่มี RTX 4060 ใช้เวลาประมาณ 12 นาทีสำหรับรูปภาพ 150 ภาพของห้อง และ 8 นาทีสำหรับวิดีโอวัตถุความยาวหนึ่งนาที
5. ฉาก <name>_splat.spz จะไปอยู่ข้างรูปภาพหรือในโฟลเดอร์ของคุณ เปิดในเฮดเซ็ตจาก NAS ของคุณหรือจากโฟลเดอร์ Download ของเฮดเซ็ต ("สแปลตขนาดใหญ่" ในตั้งค่า, ขั้นสูง ของเฮดเซ็ต จะแสดงทั้งหมด) หรือในตัวดูสแปลตของคอมพิวเตอร์ โทรศัพท์ หรือแท็บเล็ต ซึ่ง "บันทึกลง Immich" เก็บฉากไว้บนเซิร์ฟเวอร์ของคุณ วัตถุจะถูกครอปรอบตัวมันสำหรับเฮดเซ็ต เพื่อให้เปิดขึ้นตรงหน้าคุณ; ไฟล์ .ply เก็บฉากไว้ครบทั้งหมด

เซิร์ฟเวอร์ Immich ไม่รับไฟล์ .spz หรือ .ply Immuch360 บันทึกฉากสแปลตไว้ภายในรูปภาพของฉากนั้น <name>_splat.jpg ซึ่งเซิร์ฟเวอร์ Immich ใดก็ได้จะเก็บไว้เหมือนรูปภาพอื่น ๆ: รูปภาพแสดงในไทม์ไลน์ของอุปกรณ์ทุกเครื่องของคุณ และ Immuch360 เปิดฉากจากรูปภาพนั้น ฟีเจอร์นี้เป็นแบบทดลองและเปิดไว้เป็นค่าเริ่มต้น โดยไม่ต้องเปลี่ยนอะไรบนเซิร์ฟเวอร์

1. ในตัวดูสแปลตของคอมพิวเตอร์ โทรศัพท์ Android หรือแท็บเล็ต เดินไปยังมุมมองที่คุณชอบ แล้วกด "บันทึกลง Immich": มุมมองที่คุณเห็นจะกลายเป็นรูปภาพของฉาก อยู่ในไทม์ไลน์ของคุณตามวันที่ของฉาก และในอัลบั้ม "ฉากสแปลต" หากมีหลายสแปลตในแชร์หรือโฟลเดอร์: เลือกสแปลตเหล่านั้น แล้วกด "อัปโหลดไปยัง Immich" ไฟล์ .ply จะถูกบันทึกเป็น SPZ ที่บีบอัดโดยสูญเสียคุณภาพเล็กน้อย
2. เปิดรูปภาพในไทม์ไลน์ของคุณ แล้วกด "สำรวจฉากสแปลต": บนคอมพิวเตอร์ โทรศัพท์หรือแท็บเล็ต Android หรือ Meta Quest 3 หรือ 3S ที่ใช้ build จาก GitHub อุปกรณ์แต่ละเครื่องดาวน์โหลดฉากครั้งเดียว (เมื่อใช้ข้อมูลมือถือ จะถามก่อนดาวน์โหลดฉากขนาดใหญ่) แล้วเปิดได้ทันที รวมถึงแบบออฟไลน์ด้วย
3. รูปภาพมีเครื่องหมาย 3D เล็ก ๆ ที่มุมหนึ่ง เพื่อให้คุณแยกออกได้ใน Immich และแอปอื่น; "ทำเครื่องหมายรูปภาพของฉากสแปลตที่บันทึกไว้" ในตั้งค่า, ขั้นสูง ใช้เพื่อไม่ใส่เครื่องหมายนี้ในรูปภาพถัด ๆ ไป