Vào thứ Sáu, các nhà nghiên cứu từ NVIDIA công bố Magic3D - mô hình trí tuệ nhân tạo có thể tạo mô hình 3D từ mô tả văn bản. Sau khi nhập một manh mối, chẳng hạn như "Con ếch phi tiêu độc màu xanh ngồi trên hoa súng", Magic3D tạo ra mô hình lưới 40D hoàn chỉnh với kết cấu màu trong khoảng phút. Với những sửa đổi, mô hình thu được có thể được sử dụng trong trò chơi điện tử hoặc cảnh nghệ thuật ở định dạng CGI.
Trong bài báo khoa học của mình NVIDIA coi Magic3D là một phản ứng đối với DreamFusion, mô hình chuyển văn bản thành 3D mà các nhà nghiên cứu của Google đã công bố vào tháng 2. Giống như DreamFusion sử dụng mô hình chuyển văn bản thành hình ảnh để tạo hình ảnh 3D, sau đó được tối ưu hóa thành dữ liệu thể tích NeRF (Trường bức xạ thần kinh), Magic3D sử dụng quy trình hai bước, lấy mô hình thô được tạo ở độ phân giải thấp và tối ưu hóa nó để độ phân giải cao hơn. Theo các tác giả của bài báo, phương pháp MagicD thu được có thể tạo ra các vật thể ba chiều nhanh gấp đôi so với DreamFusion.
Magic3D cũng có thể thực hiện chỉnh sửa trực tiếp các mắt lưới 3D. Với mô hình 3D có độ phân giải thấp và chú giải công cụ cơ bản, bạn có thể thay đổi văn bản để thay đổi mô hình kết quả. Magic3D cũng thể hiện việc duy trì cùng một cốt truyện qua nhiều thế hệ (một khái niệm thường được gọi là sự gắn kết) và ứng dụng kiểu hình ảnh 2D (chẳng hạn như tranh lập thể) cho mô hình 3D.
NVIDIA đã không phát hành bất kỳ mã Magic3D nào với công việc nghiên cứu của mình.
Khả năng tạo 3D từ văn bản dường như là một sự tiến hóa tự nhiên trong các mô hình khuếch tán hiện đại, sử dụng mạng thần kinh để tổng hợp nội dung mới sau khi đào tạo chuyên sâu về một mảng dữ liệu. Mãi cho đến năm 2022, chúng ta mới chứng kiến sự xuất hiện của các mô hình chuyển văn bản thành hình ảnh mạnh mẽ như DALL-E và Stable Diffusion, cũng như các trình tạo văn bản thành video thô sơ từ Google và Meta.
Đối với Magic3D, các nhà nghiên cứu đằng sau nó hy vọng nó sẽ cho phép mọi người tạo mô hình 3D mà không cần đào tạo đặc biệt. Sau khi được cải tiến, công nghệ thu được có thể đẩy nhanh quá trình phát triển trò chơi điện tử (và thực tế ảo), và cuối cùng có thể được sử dụng trong các hiệu ứng đặc biệt cho phim và truyền hình. Ở cuối bài viết, họ viết: "Chúng tôi hy vọng rằng với Magic3D, chúng tôi có thể dân chủ hóa quá trình tổng hợp 3D và mở khóa tiềm năng sáng tạo của mọi người trong việc tạo nội dung 3D."
Bạn có thể giúp Ukraine chiến đấu chống lại những kẻ xâm lược Nga. Cách tốt nhất để làm điều này là quyên góp quỹ cho Các lực lượng vũ trang của Ukraine thông qua Cuộc sống tiết kiệm hoặc thông qua trang chính thức NBU.
Đọc thêm:
- Ở Thụy Điển, họ đã học cách in vi điện tử trên máy in 3D
- Bụi có thể được sử dụng để in 3D trên sao Hỏa