Splatting một trạm BTS
Đưa 3D Gaussian Splatting từ một căn phòng ra cả một trạm BTS, và điều gì giữ tốc độ render trong ngân sách
Phần lớn demo Gaussian Splatting diễn ra trong một căn phòng: cái bàn, chậu cây, chiếc xe đạp. Một trạm BTS thì khác hẳn: cấu trúc cao và mảnh, rất nhiều bầu trời, và những chiếc camera không bao giờ thống nhất về phơi sáng.
Bài toán
Yêu cầu: một digital twin để người vận hành bay xuyên qua, dựng từ một bộ ảnh drone và mặt đất cố định. Tốc độ render quan trọng ngang độ chi tiết: twin mất một phút cho mỗi khung hình thì chỉ là trình chiếu.
Chúng tôi bắt đầu từ pipeline chuẩn: structure-from-motion để lấy pose, rồi tối ưu vài triệu Gaussian.
Cấu trúc mảnh và bầu trời trống là nơi splatting lặng lẽ bỏ cuộc
Đã hỏng ở đâu
Ba kiểu lỗi xuất hiện ngay giờ đầu: điểm trôi trên trời, ăng-ten tan thành sương, và bộ nhớ tăng nhanh hơn chất lượng.
Ba mẹo nhỏ
- Che bầu trời trước khi tối ưu, để mô hình thôi bịa hình khối trong khoảng không
- Densification theo tỉ lệ cho các phần mảnh như ăng-ten và dây cáp
- Cắt tỉa mạnh tay theo lịch, với ngân sách bộ nhớ cứng
Tiếp theo
Chúng tôi đang gom các thí nghiệm thành một bài báo ngắn. Nếu bạn làm tái dựng cảnh lớn, hãy cùng trao đổi.
