Nvidia Buka Akses Teknologi Animasi Suara AI untuk Semua

Nvidia mengumumkan bahwa teknologi Audio2Face kini tersedia secara open source bagi siapa saja yang ingin mengintegrasikan animasi wajah berbasis suara ke dalam aplikasi atau game mereka. Teknologi ini memanfaatkan model pembelajaran mendalam untuk menganalisis fitur akustik suara dan menghasilkan data animasi yang dapat dipetakan ke ekspresi wajah serta gerakan bibir avatar tiga dimensi secara real time.

Audio2Face bekerja dengan mengambil masukan audio, mengekstrak fitur-fitur akustik seperti pitch, intonasi, dan ritme, lalu menggunakan jaringan saraf untuk menghasilkan rangkaian nilai parameter animasi. Parameter-parameter tersebut selanjutnya diterapkan pada model mesh wajah avatar, menghasilkan gerakan yang sinkron dengan suara tanpa memerlukan proses animasi manual yang memakan waktu.

Dengan membuka akses kode sumber, Nvidia memberi kesempatan kepada pengembang independen, studio kecil, hingga institusi pendidikan untuk memanfaatkan teknologi ini dalam berbagai skenario. Penggunaan dapat mencakup konten pra‑scripted seperti cutscene dalam game, serta siaran langsung dimana avatar dapat berinteraksi secara real time dengan penonton melalui suara.

Beberapa fitur utama yang dapat dimanfaatkan oleh komunitas meliputi: kemampuan integrasi dengan engine populer seperti Unreal Engine dan Unity, dukungan format mesh standar, serta dokumentasi lengkap untuk pelatihan model khusus. Pengembang juga dapat menyesuaikan pipeline untuk mengoptimalkan performa pada perangkat keras yang beragam, mulai dari workstation kelas atas hingga perangkat mobile.

Pembukaan sumber Audio2Face diharapkan mempercepat inovasi dalam bidang realitas virtual, metaverse, dan aplikasi edukasi interaktif. Dengan mengurangi hambatan teknis dan biaya produksi animasi wajah, para kreator dapat lebih fokus pada cerita dan interaksi yang memikat, sementara mesin menangani detail gerakan wajah yang realistis.

Iklan Morfotech no whatsapp +62 811-2288-8001 website https://morfotech.id