2 điểm bởi GN⁺ 2023-09-09 | 1 bình luận | Chia sẻ qua WhatsApp
  • Bài viết về bài báo có tiêu đề "Real-Time Radiance Field Rendering with 3D Gaussian Splatting"
  • Gaussian splatting là phương pháp biểu diễn cảnh 3D bằng hàng triệu hạt có vị trí, góc quay, kích thước, độ mờ đục và màu sắc
  • Các hạt này được render dưới dạng Gaussian 2D trong không gian màn hình, thay vì là các khối cầu mở rộng
  • Các tác giả của bài báo đã phát triển một phương pháp tạo ra hàng triệu hạt đại diện cho cảnh được biểu diễn bằng ảnh, sử dụng gradient descent và vi phân hóa quá trình render
  • Các tác giả cũng đã phát triển cách render nhanh hàng triệu hạt đã được scale này
  • Tác giả bài viết đang hiện thực phần trực quan hóa thời gian thực của Gaussian splatting trong Unity và cân nhắc các cách giảm kích thước dữ liệu
  • Bài viết cũng bàn về lịch sử của Gaussian splatting, được phát minh vào khoảng năm 2001-2002, cùng các ứng dụng trước đây của nó
  • Tác giả chia sẻ phần hiện thực Gaussian splatting trên GitHub và lưu ý rằng nó hoạt động được, nhưng không nhanh bằng phần hiện thực chính thức
  • Tác giả cũng đề cập rằng kích thước dữ liệu và mức sử dụng bộ nhớ là những yếu tố cần cân nhắc quan trọng khi dùng Gaussian splatting, và cảnh ví dụ được dùng trong bài viết cần 1.5GB dữ liệu trên đĩa

1 bình luận

 
GN⁺ 2023-09-09
Ý kiến Hacker News
  • Bài viết về tiềm năng của Gaussian splatting, một kỹ thuật tái tạo cảnh 3D từ nhiều hình ảnh, đã gây phấn khích trong giới đam mê công nghệ
  • Gaussian splatting là một công cụ đầy hứa hẹn để tái hiện các môi trường trong quá khứ, có khả năng khơi dậy làn sóng hoài niệm
  • Sử dụng gradient descent và "differentiable rendering", tránh dùng các thuật ngữ liên quan đến "neural", điều mà một số độc giả khen ngợi vì không chạy theo trào lưu
  • Tuy nhiên, một số độc giả cho rằng việc né tránh mạng nơ-ron có thể không phải là mục tiêu đáng được ca ngợi, vì chúng phổ biến là có lý do và là những bộ xấp xỉ hàm tốt
  • Bài viết cũng nhắc đến point-based rendering, nền tảng của hệ thống hạt trong game, và độc giả chú ý đến những thay đổi gần đây trong hệ thống hạt của game
  • Một số độc giả đặt câu hỏi liệu Gaussian splatting có thể hỗ trợ ánh sáng động và chuyển động hay không, vì cảnh/trường bức xạ thường là tĩnh và có ánh sáng được tích hợp sẵn
  • Kỹ thuật này được so sánh với khái niệm Braindance trong Cyberpunk 2077, cho phép người chơi di chuyển trong ký ức thị giác của người khác
  • Độc giả mong chờ bản triển khai tối ưu hóa cho WebGPU đầu tiên của kết xuất 3D Gaussian splatting, cùng với khả năng nén và giải nén dữ liệu cảnh hiệu quả
  • Một số độc giả chia sẻ tài liệu về cách sử dụng Gaussian splatting, chẳng hạn như hướng dẫn cho người mới bắt đầu trên YouTube
  • Kỹ thuật này không phải là mới, với các tham chiếu đến splatting cho volume rendering từ năm 1991 và việc sử dụng voxel iso-surface vào cuối những năm 90
  • Độc giả tò mò về trình độ kỹ thuật hiện nay của structure from motion, công nghệ biến video về một không gian thành cảnh 3D.