Bukan Lagi Kaku! AI Baru Ini Bikin Manusia Digital Bergerak Nyata Saat Bicara
Riset kolaborasi Tohoku University ciptakan DynaConTalk, AI penerjemah suara jadi gerak tubuh 3D alami tanpa jeda kaku bagi avatar digital.
Foto: TechXplore (Dokumentasi editorial)
Poin penting
- DynaConTalk ubah ucapan suara jadi gerak sinkron pada wajah, tangan, dan tubuh manusia digital 3D.
- Sistem pisahkan gerak cepat dan lambat guna cegah efek gemetar atau gestur berulang yang tidak alami.
- Unggul dalam empat uji evaluasi, teknologi ini dipersiapkan untuk panggung SIGGRAPH Asia 2026.
Karakter digital dan presenter virtual kini semakin dekat dengan ekspresi manusia asli. Terobosan terbaru datang dari peneliti Tohoku University dan University of Hong Kong yang berhasil merancang sistem kecerdasan buatan bernama DynaConTalk.
Dikutip dari laporan TechXplore, sistem ini sanggup menerjemahkan rekaman suara langsung menjadi serangkaian gerakan tiga dimensi (3D) yang menyatukan ekspresi wajah, gestur tangan, hingga perubahan postur tubuh secara terkoordinasi.
Rahasia Gerakan Halus DynaConTalk
Menghasilkan gerak tubuh penuh dari suara biasanya memicu masalah besar. Postur tubuh yang berubah drastis kerap menutupi gerakan mikro seperti kedipan atau ketukan jari tangan, sehingga avatar terlihat gemetar atau berulang tanpa ritme.
DynaConTalk memecahkan kendala itu dengan memilah gerak lambat dan cepat layaknya membedakan frekuensi audio. Sistem kemudian memanfaatkan data gerak sebelumnya agar sambungan animasi pada pidato panjang tetap mengalir mulus tanpa patahan gerak mendadak.
Temuan yang terbit di jurnal ACM Transactions on Graphics ini rencananya akan dipresentasikan pada ajang bergengsi SIGGRAPH Asia 2026 di Kuala Lumpur, Malaysia, pada 1 hingga 4 Desember mendatang.
Dalam uji coba bersama 30 partisipan pada set data BEAT2 dan SHOW, DynaConTalk meraih penilaian tertinggi dalam kealamian gerak, keselarasan ucapan, sinkronisasi, serta keberagaman gestur.
Kreator konten kini bisa memasang pose awal atau sampel rujukan, lalu membiarkan AI menyusun seluruh gestur pendukung secara fleksibel. Pengembang pun berencana memperluas kemampuan sistem hingga mencakup aksi berjalan di ruang terbuka.
Apa Artinya bagi Pelaku Usaha
Kehadiran teknologi manusia digital yang makin luwes langsung memangkas biaya mahal proses motion capture (perekaman gerak pemeran manusia) di industri periklanan, edukasi digital, dan layanan pelanggan interaktif.
Bagi studio gim, agensi kreatif, dan penyelenggara kursus daring, teknologi semacam ini mempercepat produksi aset video berskala besar tanpa perlu menyewa aktor dan studio rekaman fisik berulang kali.
Pelaku usaha di Indonesia disarankan mulai memetakan alur pembuatan konten edukasi atau promosi yang selama ini terhambat biaya produksi. Evaluasi kesiapan tim teknis dalam mengadopsi integrasi avatar AI demi menjaga efisiensi anggaran jangka panjang.
✓ Lolos pemeriksaan redaksi AI. (Klik untuk lihat hasil pemeriksaan fakta)
Artikel ini ditulis AI, 7 klaimnya dicocokkan dengan sumber, dan diuji keterbacaannya sebelum terbit. Menemukan kekeliruan? Laporkan ke redaksi.
- TechXplore: AI helps digital humans move more naturally as they speak
| Klaim | Putusan | Dasar di sumber |
|---|---|---|
| DynaConTalk dikembangkan oleh peneliti Tohoku University dan University of Hong Kong untuk menerjemahkan suara menjadi gerakan tubuh 3D. | Didukung | “Developed by researchers at Tohoku University and the University of Hong Kong, DynaConTalk generates three-dimensional (3D) human movements that correspond to spoken content.” TechXplore menyebutkan pengembang sistem DynaConTalk adalah peneliti dari Tohoku University dan University of Hong Kong. |
| Sistem DynaConTalk mengoordinasikan gerakan wajah, tangan, dan postur tubuh dari suara yang diucapkan. | Didukung | “translate speech into coordinated movements of the body, hands and face, potentially making digital characters and virtual presenters more expressive and lifelike.” TechXplore menyatakan sistem ini menerjemahkan ucapan menjadi gerakan terkoordinasi pada tubuh, tangan, dan wajah. |
| Perubahan postur tubuh yang besar dapat menutupi gerakan kecil sehingga memicu gestur berulang atau getaran tidak alami. | Didukung | “Large changes in body posture can overshadow smaller movements, such as finger gestures and facial expressions, making them difficult for AI models to learn. This can result in repetitive gestures” TechXplore menjelaskan tantangan pemodelan AI di mana perubahan postur besar dapat mengaburkan gestur kecil dan menimbulkan gerakan berulang atau gemetar. |
| DynaConTalk memisahkan gerakan menjadi komponen lebih cepat dan lambat mirip pemisahan frekuensi suara serta memanfaatkan informasi gerakan sebelumnya. | Didukung | “DynaConTalk separates movement into slower and faster components while keeping them synchronized. This is similar to separating sound into low- and high-frequency components.” TechXplore memaparkan mekanisme pemisahan gerakan lambat dan cepat serta penjagaan kontinuitas berbasis segmen gerakan terdahulu. |
| Riset ini diterbitkan di ACM Transactions on Graphics dan dijadwalkan dipresentasikan di SIGGRAPH Asia 2026 di Kuala Lumpur pada 1–4 Desember. | Didukung | “The findings were published in ACM Transactions on Graphics . The research is also scheduled to be presented at SIGGRAPH Asia 2026, which will take place in Kuala Lumpur, Malaysia, from December 1 to 4” TechXplore mencantumkan publikasi di ACM Transactions on Graphics serta rencana presentasi pada SIGGRAPH Asia 2026. |
| DynaConTalk meraih nilai rata-rata tertinggi dalam empat kategori evaluasi: kealamian, keselarasan isi ucapan, sinkronisasi, dan keberagaman gerak pada pengujian yang melibatkan 30 partisipan. | Didukung | “DynaConTalk received the highest average ratings in all four evaluation categories: naturalness, correspondence with spoken content, synchronization and movement diversity.” TechXplore mengonfirmasi hasil studi 30 partisipan yang menempatkan DynaConTalk di peringkat teratas pada keempat kategori evaluasi. |
| Pengguna dapat memandu gerakan dengan menentukan pose atau memberi contoh rujukan, dan tim berencana memperluas sistem ke gerakan berjalan. | Didukung | “Users can also guide the generated motion by specifying poses or providing reference examples.” TechXplore menyebutkan fleksibilitas pengguna untuk menentukan pose atau contoh rujukan serta rencana tim memperluas ke gerakan berjalan. |
Video AI terbaru
Autonomous Vehicle Safety: 5 Things to Know
