Transfer ekspresi wajah secara real time melalui video

Ingat “Myidol” app yang sangat populer karena kemampuannya perangkat lunak pengenalan wajah untuk membuat avatar digital yang terlihat dan bergerak persis kebanyakan yang suka Anda lakukan?.

Para peneliti di Stanford telah menemukan cara untuk mentransfer ekspresi wajah satu orang ke orang lain secara real time melalui video.

Model yang ditunjukkan dalam Stanford video demonstrasi hanya menggunakan PC dan kedalaman kamera konsumen kelas untuk masing-masing aktor, yang berarti Anda tidak perlu peralatan mewah untuk mengeksekusi ini, Anda hanya perlu beberapa algoritma yang kompleks.

mentransfer-ekspresi-wajah

Para peneliti mengembangkan algoritma real-time baru yang mengambil visual berkualitas tinggi wajah setiap peserta dan menggunakan mereka untuk merefleksikan ekspresi dari “aktor sumber” (orang yang memberikan ekspresi wajah dan / atau pidato) ke “aktor target” (orang yang wajahnya akan dimanipulasi sesuai dengan aktor sumber). Informasi visual sumber aktor berjalan melalui program dan akan diberikan di atas video streaming target aktor, sehingga terlihat seperti aktor target tersenyum, berbicara, menempel / nya lidahnya, atau apapun yang datang ke pikiran.

Berkat serangkaian titik referensi memetakan sekitar wajah (mirip dengan aplikasi Myidol), jenis-jenis informasi visual diukur oleh sistem termasuk bentuk wajah dan fitur (seperti mata, hidung, mulut, dan bahkan keriput) serta tekstur wajah dan mendalam. Program ini kemudian mencocokan titik referensi sumber aktor dengan aktor target dan superimposes mereka ekspresi ke target untuk video feed hyper-realistis.

Karena sistem ini masih dalam karya-karya (dan peralatan cukup sederhana digunakan), hasil akhir masih sedikit aneh seperti, gigi palsu.

Berikut adalah ide-ide yang bisa kita gunakan untuk teknologi ini:

  • Anda punya sebuah wawancara pekerjaan penting di Skype, dan Anda belum berpakaian rapi dan baru bangun tidur.
  • Anda sedang menonton ceramah live-streaming dari seorang profesor top di Jerman, satu-satunya masalah adalah bahwa Anda tidak bisa berbicara dalam bahasa Jerman. Jangan khawatir, berkat penerjemah real-time dengan menggunakan software ini, Anda dapat menonton prof menyampaikan pidatonya dalam bahasa Anda tanpa penundaan dubbing mengerikan di visual.

Leave a Reply

Your email address will not be published. Required fields are marked *

This site uses Akismet to reduce spam. Learn how your comment data is processed.