- Para ilmuwan telah mengembangkan sistem AI non-invasif yang berfokus pada menerjemahkan aktivitas otak seseorang ke dalam aliran teks.
- Sistem, yang disebut decoder semantik, dapat bermanfaat bagi pasien yang kehilangan kemampuan untuk berkomunikasi secara fisik.
- Setelah sistem AI dilatih, ia dapat menghasilkan aliran teks saat peserta mendengarkan atau membayangkan cerita baru.
Alex Huth (kiri), Shelly Jin (tengah), dan Jerry Tang (kanan) bersiap untuk mengumpulkan data aktivitas otak di Pusat Pencitraan Biomedis Universitas Texas di Austin. Para peneliti melatih decoder semantik mereka pada puluhan jam data aktivitas otak dari peserta, yang dikumpulkan dalam pemindai fMRI.
Foto: Nolan Zink/Universitas Texas di Austin.
Para ilmuwan telah mengembangkan sistem kecerdasan buatan non-invasif yang berfokus pada menerjemahkan aktivitas otak seseorang ke dalam serangkaian teks, menurut sebuah studi peer-review yang diterbitkan Senin di jurnal. Ilmu saraf alami.
Sistem, yang disebut dekoder semantik, dapat bermanfaat bagi pasien yang kehilangan kemampuan untuk berkomunikasi secara fisik setelah menderita stroke, kelumpuhan, atau penyakit degeneratif lainnya.
Para peneliti di University of Texas di Austin mengembangkan sistem sebagian menggunakan model transformator, mirip dengan yang menggerakkan chatbot Google Bard dan chatbot ChatGPT OpenAI.
Peserta studi melatih dekoder dengan mendengarkan podcast selama beberapa jam di dalam pemindai fMRI, yang merupakan mesin besar yang mengukur aktivitas otak. Sistem ini tidak memerlukan implan bedah.
Ph.D. Mahasiswa Jerry Tang bersiap untuk mengumpulkan data aktivitas otak di Pusat Pencitraan Biomedis Universitas Texas di Austin.
Foto: Nolan Zink/Universitas Texas di Austin.
Setelah sistem AI dilatih, ia dapat menghasilkan aliran teks saat peserta mendengarkan atau membayangkan cerita baru. Teks yang dihasilkan bukanlah teks eksak, melainkan dirancang oleh peneliti dengan maksud untuk menangkap pemikiran atau gagasan umum.
Menurut siaran pers, Sistem terlatih menghasilkan teks yang paling mendekati atau paling akurat sesuai dengan makna yang dimaksud dari kata asli peserta dalam waktu sekitar setengahnya.
Misalnya, ketika seorang peserta mendengar “Saya belum memiliki SIM” selama percobaan, pemikiran tersebut diterjemahkan menjadi “Dia bahkan belum mulai belajar mengemudi.”
“Untuk metode non-invasif, ini merupakan lompatan maju yang nyata dibandingkan dengan apa yang telah dilakukan sebelumnya, yang biasanya berupa kata tunggal atau kalimat pendek,” kata Alexander Huth, salah satu pemimpin studi, dalam rilisnya. “Kami mendapatkan model untuk memecahkan kode bahasa yang berlanjut dalam jangka waktu lama dengan ide-ide kompleks.”
Peserta juga diminta untuk menonton empat klip video tanpa suara saat berada di pemindai, dan sistem AI mampu mendeskripsikan “peristiwa tertentu” secara akurat dari mereka, menurut rilis tersebut.
Mulai hari Senin, dekoder tidak dapat digunakan di luar pengaturan lab karena bergantung pada pemindai fMRI. Tetapi para peneliti percaya itu pada akhirnya dapat digunakan di sistem pencitraan otak yang lebih portabel.
Para peneliti utama dalam studi tersebut telah mengajukan aplikasi paten untuk teknologi ini di bawah PCT.
More Stories
Kapan para astronot akan diluncurkan?
Perjalanan seorang miliarder ke luar angkasa “berisiko”
Administrasi Penerbangan Federal menangguhkan penerbangan SpaceX setelah roket yang terbakar jatuh saat mendarat