VFusion3D - Mô hình AI đột phá của Meta và Đại học Oxford tạo nội dung 3D từ hình ảnh 2D và văn bản

• Các nhà nghiên cứu từ Meta và Đại học Oxford đã phát triển VFusion3D - một mô hình AI mạnh mẽ có khả năng tạo ra các đối tượng 3D chất lượng cao từ hình ảnh đơn hoặc mô tả văn bản.

• VFusion3D giải quyết thách thức lâu dài trong AI là sự khan hiếm dữ liệu đào tạo 3D so với lượng lớn hình ảnh 2D và văn bản có sẵn trực tuyến.

• Cách tiếp cận mới này tận dụng các mô hình AI video đã được đào tạo trước để tạo ra dữ liệu 3D tổng hợp, cho phép đào tạo một hệ thống tạo 3D mạnh mẽ hơn.

• Trong các bài kiểm tra, người đánh giá ưa thích các mô hình 3D của VFusion3D hơn 90% thời gian so với các hệ thống tiên tiến trước đây.

• Mô hình có thể tạo ra một tài sản 3D từ một hình ảnh duy nhất chỉ trong vài giây.

• VFusion3D có khả năng mở rộng cao. Khi các mô hình AI video mạnh mẽ hơn được phát triển và có thêm dữ liệu 3D để tinh chỉnh, khả năng của nó dự kiến sẽ tiếp tục cải thiện nhanh chóng.

• Công nghệ này có thể đẩy nhanh đổi mới trong các ngành công nghiệp dựa vào nội dung 3D như phát triển game, thiết kế sản phẩm và ứng dụng VR/AR.

• Một demo công khai của VFusion3D có sẵn trên Hugging Face thông qua Gradio, cho phép người dùng thử nghiệm khả năng của nó.

• Hệ thống hoạt động tốt với cả hình ảnh được tạo bởi AI, gợi ý về tương lai nơi toàn bộ quy trình tạo nội dung 3D có thể được điều khiển bởi AI.

• Mặc dù ấn tượng, công nghệ vẫn còn hạn chế. Hệ thống đôi khi gặp khó khăn với các loại đối tượng cụ thể như phương tiện giao thông và văn bản.

• Bài báo nghiên cứu về VFusion3D đã được chấp nhận tại Hội nghị Thị giác Máy tính Châu Âu (ECCV) 2024.

• Mã nguồn đã được công bố công khai trên GitHub, cho phép các nhà nghiên cứu khác phát triển dựa trên công trình này.

📌 VFusion3D của Meta và Đại học Oxford đánh dấu bước tiến quan trọng trong tạo nội dung 3D bằng AI. Với khả năng tạo mô hình 3D từ hình ảnh 2D trong vài giây và tỷ lệ ưa thích của người dùng trên 90%, công nghệ này hứa hẹn thay đổi cách thiết kế game, sản phẩm và ứng dụng VR/AR trong tương lai gần.

https://venturebeat.com/ai/meta-vfusion3d-a-leap-forward-in-ai-powered-3d-content-creation/