Camera 360 độ giờ đây có khả năng tái tạo thế giới thực 3D cực chi tiết

Hãy tưởng tượng Google Street View, nhưng thay vì chỉ nhìn qua những tấm ảnh tĩnh, bạn có thể đi lại tự do như trong một trò chơi điện tử. Điều thú vị hơn là bạn không cần đợi Google đến quay phim, vì tất cả đều có thể tự làm (DIY). Insta360, nhà sản xuất camera 360 độ hàng đầu thế giới, đã bắt tay hợp tác với Splatica, một startup nhỏ tại Anh, để giúp các nhà sáng tạo hiện thực hóa điều này.

Mô tả hình ảnh

Vào tháng 1 năm ngoái, chúng tôi đã từng viết về Gaussian splatting, công nghệ hứa hẹn cho phép bất kỳ ai cũng có thể tái tạo các mảnh của thế giới thực dưới dạng 3D chân thực như ảnh chụp. Tuy nhiên, Splatica đã làm cho việc khai thác công nghệ này trở nên dễ dàng một cách đáng ngạc nhiên — chỉ cần một chiếc camera 360 độ phổ thông trên thị trường và một dịch vụ đăng ký để xử lý mọi thứ.

Đây không phải là video. Đây là bản sao kỹ thuật số 3D của sân sau nhà tôi mà tôi có thể khám phá như một màn chơi trong game.

Quy trình đơn giản đến bất ngờ

Khi nói là "dễ dàng", đó hoàn toàn là sự thật. Đây là tất cả những gì tôi phải làm để thực hiện:

• Thay đổi hai cài đặt trên một chiếc camera Insta360 hoặc drone Antigravity phổ thông.
• Quay một đoạn video trong khi đi bộ (hoặc bay) xung quanh khu vực cần quét.
• Đăng ký tài khoản Splatica và tải video lên.
• Chờ một ngày để một thế giới 3D thu nhỏ xuất hiện trên trình duyệt web của bạn.

Tôi đã thử nghiệm với cả camera Insta360 X5 và drone Antigravity A1. Mặc dù kết quả chưa hoàn hảo — các "splat" thường trông hơi mờ ảo, như thể bạn đang bước vào một bức tranh CG — nhưng tôi tin rằng một số nhà sáng tạo nội dung và doanh nghiệp sẽ mua camera 360 độ chỉ vì tính năng này. Max Richter, đồng sáng lập Insta360, cho biết các camera của công ty đã có nhu cầu cao cho các tour du lịch ảo bất động sản, báo cáo tiến độ xây dựng và kiểm tra cơ sở vật chất. Nếu tôi là một môi giới bất động sản, tôi sẽ mua một chiếc ngay lập tức cho tính năng này.

Kết quả quét 3D từ Splatica

Chi tiết và Giới hạn

Splatica có thể tự động chỉnh sửa hầu hết mọi người trong khung hình, giúp công viên trông vắng vẻ hơn so với thực tế. Tuy nhiên, công nghệ này có những hạn chế. Nếu bạn chỉ quay một vòng quanh vật thể, kết quả sẽ không tốt. Splatica chỉ có thể tái tạo những gì camera nhìn thấy, vì vậy bạn cần quay phim từ mọi vị trí mà bạn có thể muốn "đứng" trong thế giới ảo.

Dưới đây là nỗ lực mô phỏng việc kiểm tra một cây cầu tại công viên, tập trung vào một trụ đỡ của đường sắt. Tôi không chắc nó có đủ chi tiết để làm hài lòng các khảo sát viên hay thanh tra an toàn hay không — có lẽ là do tính năng tránh chướng ngại vật quá nhạy bén của drone đã liên tục làm gián đoạn chuyến bay.

Tất cả các bản quét này đều có thể được tải xuống ở định dạng PLY và USDZ và liên kết với các phép đo thực tế: Andrey Shelomentsev, đồng sáng lập Splatica, cho biết thường có tỷ lệ sai số một phần trăm trên mỗi 100 centimet, "đủ tốt cho việc khảo sát và khám phá sơ bộ không gian".

Công nghệ đằng sau "siêu năng lực"

Làm thế nào để điều này có thể thực hiện chỉ bằng cách đi bộ xung quanh với một chiếc camera? Shelomentsev cho biết công ty của ông đã xây dựng một phiên bản độc quyền của SLAM (kỹ thuật Định vị và Ánh xạ đồng thời — Simultaneous Localization and Mapping) được thiết kế đặc biệt để tạo ra các đám mây điểm chính xác từ video 360 độ. Bạn có thể hình dung đám mây điểm như "xương sống" của các vật thể 3D, sau đó được phủ màu lên.

Việc Insta360 và Antigravity nhúng siêu dữ liệu vào tệp video cũng giúp ích rất nhiều. "Các tệp chứa mọi thứ chúng tôi cần: thông số biến dạng ống kính, tốc độ màn trập, dữ liệu gia tốc kế và con quay hồi chuyển, cũng như GPS — được truyền trực tiếp từ ứng dụng Insta360 trên điện thoại sang camera trong quá trình quay," Eugene Nikolskii, CEO và đồng sáng lập Splatica chia sẻ.

Dự án Eternal và Chi phí

Insta360, Antigravity và Splatica đang khởi động một chiến dịch tiếp thị mang tên Project Eternal, được các công ty quảng bá là một "sáng kiến toàn cầu" để bảo tồn các địa danh văn hóa cho các thế hệ mai sau. Họ đang cung cấp giải thưởng cho các Gaussian splats tốt nhất, 1.000 lượt tải lên Splatica miễn phí (ưu tiên người đến trước) và một dự án thí điểm để quét Pompeii và Civita di Bagnoregio tuyệt đẹp tại Ý.

Hiện tại, rào cản lớn nhất để tham gia Splatica có thể là chi phí. Công ty tính phí từ 18 đến 25 xu cho mỗi giây video được xử lý, và bạn cũng phải trả phí đăng ký hàng tháng. Công ty hiện đang thử nghiệm các mức giá — tuần trước là 70, 200 hoặc 385 USD mỗi tháng tùy thuộc vào kích thước của bản quét, nhưng tuần này các gói tương ứng đã giảm xuống còn 50, 150 và 300 USD.

Tuy nhiên, nếu bạn muốn thử, có thể vẫn còn cơ hội nhận được một trong 1000 vị trí miễn phí. Splatica cho biết họ sẽ miễn phí đăng ký cho 1000 người dùng đầu tiên, những người này có thể chuyển đổi 10 phút quay video 360 độ thành các thế giới 3D nhỏ.