Aplikasi Android akan segera memungkinkan Anda menggunakan wajah Anda untuk mengontrol kursor

Pengembang kini dapat mengintegrasikan fitur aksesibilitas ke dalam aplikasi mereka, memungkinkan pengguna mengontrol kursor dengan gerakan wajah atau dengan menggerakkan kepala. Misalnya, mereka dapat membuka mulut untuk menggerakkan kursor atau mengangkat alis untuk mengeklik dan menyeret.

Project Gameface diumumkan pada konferensi desktop Google I/O tahun lalu, dan menggunakan kamera perangkat dan database ekspresi wajah dari… API deteksi landmark wajah MediaPipe Untuk memanipulasi indikator.

Google menjelaskan dalam pengumumannya: “Melalui kamera perangkat, ia dengan mulus melacak ekspresi wajah dan gerakan kepala, dan menerjemahkannya ke dalam kontrol yang intuitif dan dipersonalisasi.” “Pengembang kini dapat membuat aplikasi di mana penggunanya dapat mengonfigurasi pengalaman mereka dengan menyesuaikan ekspresi wajah, ukuran gerakan, kecepatan kursor, dan banyak lagi.”

Meskipun Gameface pada awalnya dirancang untuk para gamer, Google mengatakan pihaknya juga telah bermitra dengan luas – Sebuah perusahaan sosial di India yang berfokus pada aksesibilitas – untuk melihat bagaimana mereka dapat memperluasnya ke lingkungan lain seperti tempat kerja, sekolah, dan situasi sosial.

Project Gameface terinspirasi oleh streamer video game lumpuh Lance Carr, yang menderita atrofi otot. Carr berkolaborasi dengan Google dalam proyek ini, yang bertujuan untuk menciptakan alternatif yang lebih murah dan mudah diakses dibandingkan sistem pelacakan kepala yang mahal.