Para peneliti mengembangkan ‘mata’ bertenaga AI bagi penyandang tunanetra untuk ‘melihat’ objek

6 Min Read

Para peneliti mengembangkan 'mata' bertenaga AI bagi penyandang tunanetra untuk 'melihat' objek

AiSee: “Mata” bertenaga AI bagi penyandang tunanetra untuk “melihat” objek di sekitar mereka. Kredit: Universitas Nasional Singapura

Berbelanja bahan makanan adalah aktivitas umum bagi sebagian besar dari kita, namun bagi penyandang tunanetra, mengidentifikasi bahan makanan dapat menjadi hal yang menakutkan. Sebuah tim peneliti dari School of Computing Universitas Nasional Singapura (NUS Computing) telah memperkenalkan AiSee, alat bantu terjangkau yang dapat dipakai dan membantu orang-orang dengan gangguan penglihatan “melihat” objek di sekitar mereka dengan bantuan kecerdasan buatan (AI).

Individu dengan gangguan penglihatan menghadapi rintangan sehari-hari, terutama dalam identifikasi objek yang penting untuk pengambilan keputusan yang sederhana dan kompleks. Meskipun terobosan dalam AI telah meningkatkan kemampuan pengenalan visual secara signifikan, penerapan teknologi canggih ini di dunia nyata masih tetap menantang dan rawan kesalahan.

AiSee, yang pertama kali dikembangkan pada tahun 2018 dan ditingkatkan secara bertahap selama rentang waktu lima tahun, bertujuan untuk mengatasi keterbatasan ini dengan memanfaatkan teknologi AI yang canggih.

“Dengan AiSee, tujuan kami adalah memberdayakan pengguna dengan interaksi yang lebih alami. Dengan mengikuti proses desain yang berpusat pada manusia, kami menemukan alasan untuk mempertanyakan pendekatan umum dalam penggunaan kacamata yang dilengkapi dengan kamera. Orang dengan gangguan penglihatan mungkin enggan memakai kacamata untuk menghindari stigmatisasi. Oleh karena itu, kami mengusulkan perangkat keras alternatif yang dilengkapi headphone konduksi tulang yang tersembunyi,” kata peneliti utama Project AiSee Associate Professor Suranga Nanayakkara, yang berasal dari Departemen Sistem Informasi dan Analisis di NUS Computing.

Pengguna hanya perlu memegang suatu objek dan mengaktifkan kamera internal untuk mengambil gambar objek tersebut. Dengan bantuan AI, AiSee akan mengidentifikasi objek, dan juga akan memberikan lebih banyak informasi saat ditanya oleh pengguna.

AiSee terdiri dari tiga komponen utama:

Mata: Perangkat lunak komputer mesin visi

AiSee menggabungkan kamera mikro yang menangkap bidang pandang pengguna. Ini membentuk komponen perangkat lunak AiSee, juga disebut sebagai “komputer mesin vision”. Perangkat lunak ini mampu mengekstraksi fitur seperti teks, logo, dan label dari gambar yang diambil untuk diproses.

Otak: Unit pemrosesan gambar bertenaga AI dan sistem tanya jawab interaktif

Setelah pengguna mengambil foto objek yang diinginkan, AiSee menggunakan algoritme AI berbasis cloud yang canggih untuk memproses dan menganalisis gambar yang diambil guna mengidentifikasi objek. Pengguna juga dapat mengajukan berbagai pertanyaan untuk mengetahui lebih lanjut tentang objek tersebut.

AiSee menggunakan teknologi pengenalan dan pemrosesan teks-ke-ucapan dan ucapan-ke-teks yang canggih untuk mengidentifikasi objek dan memahami pertanyaan pengguna. Didukung oleh model bahasa yang besar, AiSee unggul dalam pertukaran tanya jawab interaktif, memungkinkan sistem untuk memahami dan merespons pertanyaan pengguna secara akurat dengan cara yang cepat dan informatif.

Dibandingkan dengan sebagian besar perangkat bantu yang dapat dikenakan yang memerlukan pemasangan ponsel cerdas, AiSee beroperasi sebagai sistem mandiri yang dapat berfungsi secara mandiri tanpa memerlukan perangkat tambahan apa pun.

Pembicara: Sistem suara konduksi tulang

Headphone AiSee menggunakan teknologi konduksi tulang, yang memungkinkan transmisi suara melalui tulang tengkorak. Hal ini memastikan bahwa individu dengan gangguan penglihatan dapat secara efektif menerima informasi pendengaran sambil tetap memiliki akses ke suara eksternal, seperti percakapan atau kebisingan lalu lintas. Hal ini sangat penting bagi penyandang tunanetra karena suara lingkungan memberikan informasi penting untuk pengambilan keputusan, terutama dalam situasi yang melibatkan pertimbangan keselamatan.

“Saat ini, penyandang tunanetra di Singapura tidak memiliki akses terhadap teknologi AI pendukung secanggih ini. Oleh karena itu, kami percaya bahwa AiSee berpotensi memberdayakan penyandang tunanetra untuk secara mandiri menyelesaikan tugas-tugas yang saat ini memerlukan bantuan. Langkah kami selanjutnya adalah untuk membuat AiSee terjangkau dan dapat diakses oleh banyak orang. Untuk mencapai hal ini, kami melakukan peningkatan lebih lanjut, termasuk desain yang lebih ergonomis dan unit pemrosesan yang lebih cepat,” jelas Assoc. Prof.Nanyayakkara.

Mahasiswa NUS, Mark Myres, yang membantu menguji AiSee sebagai pengguna tunanetra, berkomentar, “Sering kali, alat bantu tampaknya sangat ditargetkan untuk orang-orang yang buta total atau tunanetra. Saya pikir AiSee adalah keseimbangan yang baik. Baik tunanetra maupun tunanetra. orang buta bisa mendapatkan banyak manfaat dari ini.”

Pengujian pengguna dan peningkatan lebih lanjut

Asosiasi. Prof Nanayakkara dan timnya saat ini sedang berdiskusi dengan SG Enable di Singapura untuk melakukan pengujian pengguna dengan penyandang disabilitas penglihatan. Temuan ini akan membantu menyempurnakan dan meningkatkan fitur dan kinerja AiSee.

Ibu Ku Geok Boon, Chief Executive Officer, SG Enable, mengatakan, “Solusi inovatif yang dimungkinkan oleh teknologi pendukung dapat mengubah kehidupan para penyandang disabilitas, baik dalam mendukung mereka untuk hidup lebih mandiri atau menurunkan hambatan dalam mendapatkan pekerjaan. Sebagai lembaga fokus dan sektor yang memungkinkan disabilitas dan inklusi di Singapura, SG Enable dengan senang hati bekerja sama dengan mitra seperti NUS dan BP De Silva Holdings Pte Ltd untuk memanfaatkan teknologi guna memberdayakan penyandang disabilitas.”

Selain proyek ini, SG Enable juga berupaya berkolaborasi dengan NUS untuk mengeksplorasi bagaimana AI, antarmuka manusia-komputer, dan teknologi pendukung dapat memberikan lebih banyak pilihan teknologi bagi penyandang disabilitas.

Disediakan oleh Universitas Nasional Singapura

Kutipan: Para peneliti mengembangkan ‘mata’ bertenaga AI bagi penyandang tunanetra untuk ‘melihat’ objek (2024, 5 Februari) diambil 6 Februari 2024 dari https://techxplore.com/news/2024-02-ai-power-eye-visually -gangguan.html

Dokumen ini memiliki hak cipta. Terlepas dari transaksi wajar untuk tujuan studi atau penelitian pribadi, tidak ada bagian yang boleh direproduksi tanpa izin tertulis. Konten disediakan untuk tujuan informasi saja.

______
Diterjemahkan dari techxplore.com

Share This Article