Google Memungkinkan Bahasa Isyarat dalam Video Call

Kamibijak.com, Flash –  Mungkin banyak yang menganggap peralihan feed menyorot siapapun yang berbicara dalam aplikasi komunikasi video sebagai hal yang remeh. Akan bagus jika berbicara adalah cara Anda berkomunikasi. Sayangnya, ucapan senyap seperti bahasa isyarat tidak memicu algoritma tersebut, tetapi penelitian dari Google ini mungkin mengubahnya.

Ini adalah mesin pendeteksi bahasa isyarat waktu nyata yang dapat mengetahui kapan seseorang masuk (bukan hanya bergerak) dan kapan mereka selesai. Tentu saja sepele bagi manusia untuk mengatakan hal semacam ini, tetapi lebih sulit bagi sistem panggilan video yang biasanya hanya mendorong piksel.

Makalah baru dari peneliti Google, yang disajikan secara virtual di ECCV, menunjukkan bagaimana hal itu dapat dilakukan secara efisien dan dengan latensi yang sangat kecil. Ini akan mengalahkan poin jika pendeteksian bahasa isyarat berfungsi tetapi menghasilkan video yang tertunda atau terdegradasi, jadi tujuan mereka adalah memastikan modelnya ringan dan dapat diandalkan.

Sistem pertama menjalankan video melalui model yang disebut PoseNet, yang memperkirakan posisi tubuh dan anggota badan di setiap bingkai. Informasi visual yang disederhanakan ini pada dasarnya gambar tongkat dikirim ke model yang dilatih tentang data pose dari video orang-orang yang menggunakan Bahasa Isyarat Jerman, dan membandingkan gambar langsung dengan tampilan penandatanganan.

Proses sederhana ini sudah menghasilkan akurasi 80 persen dalam memprediksi apakah seseorang menandatangani atau tidak, dan dengan beberapa pengoptimalan tambahan mendapatkan akurasi hingga 91,5 persen. Mempertimbangkan bagaimana deteksi "pembicara aktif" pada sebagian besar panggilan hanya untuk mengetahui apakah seseorang berbicara atau batuk, angka-angka itu cukup terhormat.

Untuk bekerja tanpa menambahkan sinyal "seseorang menandatangani" baru ke panggilan yang ada, sistem menarik trik kecil yang cerdas. Ini menggunakan sumber audio virtual untuk menghasilkan nada 20 kHz, yang berada di luar jangkauan pendengaran manusia, tetapi diperhatikan oleh sistem audio komputer.

Sinyal ini dihasilkan setiap kali orang tersebut menandatangani, membuat algoritme deteksi ucapan berpikir bahwa mereka sedang berbicara dengan suara keras.

Sekarang ini hanya demo, yang dapat Anda coba di sini, tetapi tampaknya tidak ada alasan mengapa itu tidak dapat dibangun langsung ke dalam sistem panggilan video yang ada atau bahkan sebagai aplikasi yang mendukung mereka. (LEAS/MG)

Sumber: https://techcrunch.com/2020/10/02/google-research-lets-sign-language-switch-active-speaker-in-video-calls/ 
#BijakFlash
#KamiBijakChannel
#GenggamDuniaTanpaSuara

Jangan lupa subscribe, tinggal komentar, dan share. 
KamiBijakID Channel: http://bit.ly/KamiBijakIDChannel 

Follow kami juga di sini: 
Website: http://bit.ly/KamiBijakcom 
Instagram: http://bit.ly/KamiBijakIDInstagram 
Facebook: http://bit.ly/KamiBijakIDFacebook 

Terima kasih sudah menonton, Like, Follow, dan subscribe Anda sangat berarti bagi kami untuk menambah semangat membuat konten yang lebih bermanfaat.

==============
TAG(S): google,teknologi google,video call google,teknologi video call google,bahasa isyarat google,bahasa isyarat dalam google,bahasa isyarat video call google,teknologi,disabilitas,bahasa isyarat,kamibijak,kami bijak 

...