• Nvidia vừa phát hành các plugin mới cho Unreal Engine 5 nhằm cải thiện độ chân thực của nhân vật kỹ thuật số được hỗ trợ bởi AI.
• Các plugin mới này là một phần của bộ công nghệ Nvidia Ace, bao gồm các công cụ tạo giọng nói, trí thông minh và hoạt hình được hỗ trợ bởi AI tạo sinh.
• Plugin Audio2Face-3D mới cho phép tạo hoạt hình khuôn mặt đồng bộ với giọng nói một cách tự động. Plugin này hiện đã có sẵn cho Autodesk Maya.
• Nemotron-Mini 4B Instruct là một plugin giúp tạo ra các phản hồi tự nhiên cho nhân vật AI.
• Plugin RAG (tạo sinh được tăng cường bởi truy xuất dữ liệu ngoài) cho phép nhà phát triển xây dựng cơ sở dữ liệu ngữ cảnh cho IP của họ, tạo ra các phản hồi phù hợp với độ trễ thấp.
• Các plugin này được tối ưu hóa để chạy trên Windows PC với độ trễ thấp và sử dụng ít bộ nhớ.
• Nvidia cũng phát hành một dự án mẫu Unreal Engine 5 để hướng dẫn nhà phát triển tích hợp nhân vật kỹ thuật số vào game và ứng dụng của họ.
• Plugin Audio2Face-3D cho Maya giúp đơn giản hóa quy trình tạo hoạt hình khuôn mặt chất lượng cao cho bất kỳ nhân vật nào. Mã nguồn và script có thể tùy chỉnh để sử dụng với các công cụ tạo nội dung kỹ thuật số khác.
• Nvidia cũng giới thiệu microservice renderer mới cho Unreal Engine 5 hỗ trợ Nvidia Animation Graph Microservice và hệ điều hành Linux ở giai đoạn truy cập sớm.
• Animation Graph là một microservice tạo điều kiện cho việc tạo ra các máy trạng thái hoạt hình và cây blend, cung cấp hệ thống linh hoạt dựa trên node để blend, phát lại và điều khiển hoạt hình.
• Microservice renderer mới cho phép nhà phát triển chạy nhân vật MetaHuman trên máy chủ đám mây và stream các khung hình và âm thanh đã render tới bất kỳ trình duyệt và thiết bị edge nào qua WebRTC.
• Nhà phát triển có thể đăng ký truy cập sớm để tải xuống microservice renderer Unreal Engine 5 với hỗ trợ cho microservice Animation Graph và hệ điều hành Linux.
📌 Nvidia đã phát hành các plugin mới cho Unreal Engine 5 nhằm cải thiện độ chân thực của nhân vật kỹ thuật số. Các công cụ như Audio2Face-3D, Nemotron-Mini 4B và RAG cho phép tạo ra các nhân vật MetaHuman sống động và tương tác tự nhiên hơn, với khả năng chạy trên Windows PC với độ trễ thấp.
https://venturebeat.com/ai/nvidia-releases-plugins-to-improve-digital-human-realism-on-unreal-engine-5/