#Neuralangelo #Nvidia #AI #Chuyểnđổi2023
Các nhà nghiên cứu của Nvidia đã tạo ra một mô hình AI mới có tên Neuralangelo để biến các video clip hai chiều thành đồ họa 3D chi tiết. Với công nghệ này, các nhà nghiên cứu có thể tạo ra các bản sao sống động của các tòa nhà, tác phẩm điêu khắc và các vật thể trong thế giới thực khác. Khả năng của Neuralangelo trong việc chuyển đổi kết cấu của các vật liệu phức tạp từ video 2D sang nội dung 3D đã vượt trội so với các phương pháp trước đây. Công cụ này sẽ giúp các nhà phát triển và chuyên gia sáng tạo tái tạo 3D hơn để tạo các đối tượng ảo có thể sử dụng cho các dự án của họ bằng cách sử dụng cảnh quay được ghi lại bằng điện thoại thông minh.
Việc chuyển đổi sẽ được trình bày tại Hội nghị về Tầm nhìn Máy tính và Nhận dạng Mẫu (CVPR) tại Vancouver. Các bài báo mở rộng bao gồm ước tính tư thế, tái tạo 3D và tạo video.
Nvidia đang sử dụng các công nghệ AI để giúp ngành công nghiệp trò chơi phát triển và tối ưu hóa các khoản đầu tư vào AI để đạt được thành công và tránh những cạm bẫy phổ biến. Chuyển đổi 2023 sẽ diễn ra tại San Francisco vào ngày 11-12 tháng 7 để các giám đốc điều hành hàng đầu cùng chia sẻ kinh nghiệm của mình.
Neuralangelo của Nvidia là một công cụ mạnh mẽ giúp tái tạo thế giới thực trong thế giới kỹ thuật số. Điều này sẽ làm thay đổi cách chúng ta tạo ra và sử dụng nội dung 3D trong tương lai.
Bỏ lỡ sự phấn khích của Hội nghị thượng đỉnh GamesBeat? Đừng lo lắng! Điều chỉnh ngay bây giờ để xem tất cả các phiên trực tiếp và ảo đây.
thần kinhmột mô hình AI mới từ Nghiên cứu Nvidiasử dụng AI để quay các video clip hai chiều và biến chúng thành các cấu trúc đồ họa 3D chi tiết.
Với công nghệ này, các nhà nghiên cứu đã có thể tạo ra các bản sao ảo sống động như thật của các tòa nhà, tác phẩm điêu khắc và các vật thể trong thế giới thực khác.
Nvidia cho biết, giống như Michelangelo điêu khắc những hình ảnh tuyệt đẹp, sống động như thật từ các khối đá cẩm thạch, Neuralangelo tạo ra các cấu trúc 3D với các chi tiết và kết cấu phức tạp. Sau đó, các chuyên gia sáng tạo có thể nhập các đối tượng 3D này vào các ứng dụng thiết kế, chỉnh sửa thêm chúng để sử dụng trong nghệ thuật, phát triển trò chơi điện tử, người máy và cặp song sinh kỹ thuật số công nghiệp.
Khả năng của Neuralangelo trong việc chuyển đổi kết cấu của các vật liệu phức tạp — bao gồm ván lợp mái nhà, tấm kính và đá cẩm thạch nhẵn — từ video 2D sang nội dung 3D vượt trội đáng kể so với các phương pháp trước đây. Độ trung thực cao giúp các nhà phát triển và chuyên gia sáng tạo dễ dàng tái tạo 3D hơn để nhanh chóng tạo các đối tượng ảo có thể sử dụng cho các dự án của họ bằng cách sử dụng cảnh quay được điện thoại thông minh ghi lại.
Sự kiện
Chuyển đổi 2023
Hãy tham gia cùng chúng tôi tại San Francisco vào ngày 11-12 tháng 7, nơi các giám đốc điều hành hàng đầu sẽ chia sẻ cách họ đã tích hợp và tối ưu hóa các khoản đầu tư vào AI để đạt được thành công và tránh những cạm bẫy phổ biến.
Đăng ký ngay
Ming-Yu Liu, giám đốc nghiên cứu cấp cao và đồng tác giả của bài báo cho biết: “Khả năng tái tạo 3D mà Neuralangelo cung cấp sẽ mang lại lợi ích to lớn cho người sáng tạo, giúp họ tái tạo thế giới thực trong thế giới kỹ thuật số”. “Công cụ này cuối cùng sẽ cho phép các nhà phát triển nhập các đối tượng chi tiết — dù là những bức tượng nhỏ hay tòa nhà đồ sộ — vào môi trường ảo cho trò chơi điện tử hoặc cặp song sinh kỹ thuật số công nghiệp.”
Trong một bản demo, các nhà nghiên cứu của Nvidia đã giới thiệu cách mô hình này có thể tái tạo các vật thể mang tính biểu tượng như tượng David của Michelangelo và phổ biến như một chiếc xe tải phẳng. Neuralangelo cũng có thể tái tạo lại nội thất và ngoại thất của tòa nhà — được thể hiện bằng mô hình 3D chi tiết của công viên tại khuôn viên Khu vực Vịnh của Nvidia.
Mô hình kết xuất thần kinh nhìn thấy trong 3D
Nvidia cho biết các mô hình AI trước đây để tái tạo cảnh 3D đã gặp khó khăn trong việc nắm bắt chính xác các mẫu kết cấu lặp đi lặp lại, màu sắc đồng nhất và các biến thể màu mạnh. Neuralangelo áp dụng nguyên mẫu đồ họa thần kinh tức thì, công nghệ đằng sau NVIDIA Instant NeRF, để giúp nắm bắt những chi tiết tốt hơn này.
Sử dụng video 2D về một đối tượng hoặc cảnh được quay từ nhiều góc độ khác nhau, mô hình sẽ chọn một số khung hình ghi lại các góc nhìn khác nhau — giống như một nghệ sĩ xem xét một đối tượng từ nhiều phía để có cảm giác về chiều sâu, kích thước và hình dạng.
Khi đã xác định được vị trí máy ảnh của từng khung hình, AI của Neuralangelo sẽ tạo ra một hình ảnh 3D thô của cảnh, giống như một nhà điêu khắc bắt đầu đục đẽo hình dạng của đối tượng.
Sau đó, mô hình sẽ tối ưu hóa kết xuất để làm sắc nét các chi tiết, giống như một nhà điêu khắc cẩn thận đẽo đá để mô phỏng kết cấu của vải hoặc hình người. Kết quả cuối cùng là một đối tượng 3D hoặc cảnh quy mô lớn có thể được sử dụng trong các ứng dụng thực tế ảo, song sinh kỹ thuật số hoặc phát triển người máy.
Neuralangelo là một trong gần 30 dự án của Nvidia Research sẽ được trình bày tại Hội nghị về Tầm nhìn Máy tính và Nhận dạng Mẫu (CVPR), diễn ra từ ngày 18 tháng 6 đến ngày 22 tháng 6 tại Vancouver. Các bài báo mở rộng các chủ đề bao gồm ước tính tư thế, tái tạo 3D và tạo video.
Một trong những dự án này, DiffCollage, là một phương pháp khuếch tán tạo ra nội dung quy mô lớn — bao gồm hướng ngang dài, ảnh toàn cảnh 360 độ và hình ảnh chuyển động lặp. Khi được cung cấp tập dữ liệu đào tạo gồm các hình ảnh có tỷ lệ khung hình tiêu chuẩn, DiffCollage coi những hình ảnh nhỏ hơn này là các phần của hình ảnh lớn hơn — giống như các phần của ảnh ghép. Điều này cho phép các mô hình khuếch tán tạo ra nội dung lớn có vẻ gắn kết mà không cần đào tạo về các hình ảnh có cùng tỷ lệ.
Niềm tin của GamesBeat khi bao trùm ngành công nghiệp trò chơi là “nơi đam mê gặp gỡ kinh doanh.” Điều đó có nghĩa là gì? Chúng tôi muốn cho bạn biết tin tức quan trọng như thế nào đối với bạn — không chỉ với tư cách là người ra quyết định tại studio trò chơi mà còn với tư cách là người hâm mộ trò chơi. Cho dù bạn đọc bài viết của chúng tôi, nghe podcast hay xem video của chúng tôi, GamesBeat sẽ giúp bạn tìm hiểu về ngành và tận hưởng việc tương tác với ngành. Khám phá Briefings của chúng tôi.
[ad_2]
