DETEKSI OBJEK BERBASIS WEB SECARA REAL-TIME DENGAN UMPAN BALIK SUARA UNTUK PENYANDANG TUNANETRA

Authors

  • Calvin Ferry Alvino Universitas Kristen Satya Wacana
  • Richard G. Mayopu Universitas Kristen Satya Wacana

DOI:

https://doi.org/10.31539/fvxz2h77

Abstract

Kecerdasan buatan (Artificial Intelligence/AI) membuka peluang baru dalam pengembangan teknologi asistif bagi penyandang tunanetra. Penelitian ini mengusulkan sistem deteksi objek berbasis web secara real-time yang dilengkapi dengan umpan balik suara untuk meningkatkan kesadaran lingkungan pengguna. Aplikasi dikembangkan menggunakan React.js dan TensorFlow.js dengan model COCO-SSD yang berjalan sepenuhnya di sisi klien tanpa memerlukan perangkat keras tambahan. Estimasi jarak dilakukan menggunakan pendekatan berbasis bounding box, sedangkan keluaran suara dihasilkan melalui Web Speech API. Evaluasi sistem dilakukan melalui pengujian fungsional dan pengukuran performa, meliputi frame rate, latensi respons, serta tingkat kepercayaan deteksi sebagai indikator kepastian model. Hasil eksperimen menunjukkan bahwa sistem mampu mencapai 15–30 FPS, tingkat kepercayaan deteksi 70–95%, serta latensi suara 150–300 milidetik. Kontribusi utama penelitian ini adalah integrasi deteksi objek, estimasi jarak, dan umpan balik suara dalam aplikasi web ringan tanpa instalasi.

Kata Kunci: Deteksi Objek, TensorFlow.js, React.js, Aksesibilitas, Tunanetra

References

Ariyani, S., Nugroho, A. B., & Mubarok, A. S. T. (2022). Object Detection Tool for the Blind Based on Ai Mobilenet on Raspberry Pi 3B. Journal of Electrical Engineering and Computing (ELKOM), 4(1), 73–90.

Arnesia, P. D., Pratama, N. A., & Syafrina, F. (2022). Artificial Intelligence Application for Web-Based Object Detection Using Tensorflow Js, React Js and Coco Dataset Libraries. JSiI ( Journal System Information ) , 9(1), 62–69.

Ebrahimi, F., Masoudian, T., & Khiabani, M. M. (2025). Integrating ADDIE Needs Assessment with Kirkpatrick Evaluation: A Systematic Review. Asian Journal of Education and Social Studies, 51(3), 350–376. https://doi.org/10.9734/ajess/2025/v51i31832

Garno, G., Sarwosri, S., & Febriandiza, A. (2025). User Experience Accessibility of Web Content for People with Cognitive Disabilities Using the Double Diamond Method. National Journal of Technology and Information Systems , 3(1), 282–293.

Gde, P., Bhanuartha, A., Pinandito, A., & Akbar, M. A. (2025). Analisis Perbandingan Server Side dan Client Side Data Fetching pada Framework Next.Js (Studi Kasus Aplikasi Online Course) (Vol. 9, Nomor 3). http://j-ptiik.ub.ac.id

Hulu, F. A., Setyawan, G. C., & Lase, K. J. D. (2024). Implementation of Object Recognition and Tracking System on ESP32CAM-Based 4WD Mobile Robot for Navigation in 2D Space. Jutisi : Scientific Journal of Informatics Engineering and Information Systems , 13(2), 1622–1634.

Moh Yusup, R., Faris Anugrah, A., Desmonda Muslimah, D., Mentari Widya Ningrum Permana, S., Yuliani, S., & Majalengka, U. (2024). PENDETEKSIAN OBJEK MENGGUNAKAN OPENCV DAN METODE YOLOv4-TINY UNTUK MEMBANTU TUNANETRA. Hal. 59 Journal of Computer Science and Information Technology (JCSIT), 1.

Moore, K. A., Leighton, T., & Ostrowsky, J. T. (2023). A research and development (R&D) roadmap for broadly protective coronavirus vaccines: A pandemic preparedness strategy. Vaccine, 41, 2101–2112.

Muhammad Rusdi, Rina Alfah, & Haji Sirajuddin. (2022). IMPLEMENTATION OF THE ADDIE MODEL (ANALYSIS, DESIGN, DEVELOPMENT, IMPLEMENTATION, EVALUATION) IN PHP- BASED E-LEARNING IN THE ERA OF PANDEMIC.

Rafiq, M. A., Zen, M., & Kurniawan, F. (2025). Development of Voice-Based Applications to Help Accessibility of Information for Pertuni Members Using the Design Thinking Method. Journal of Computer Technology Information Systems (JUKTISI), 4(1), 167–173.

Rosa, A. A., Simon, B. A., & Lieanto, K. S. (2020). Portable Air Pollutant Detection System Using MQ-7 and MQ-135 Sensors. ULTIMA Computing, 12(1).

Spatioti, A. G., Kazanidis, I., & Pange, J. (2022). A comparative study of the ADDIE instructional design model in distance education. Information, 13(9).

Walle, H., De Runz, C., Serres, B., & Venturini, G. (2022). A Survey on Recent Advances in AI and Vision-Based Methods for Helping and Guiding Visually Impaired People. Applied Sciences (Switzerland), 12(5). https://doi.org/10.3390/app12052308

Waruwu, M. (2024). Metode Penelitian dan Pengembangan (R&D): Konsep, Jenis, Tahapan dan Kelebihan. Jurnal Ilmiah Profesi Pendidikan, 9(2), 1220–1230. https://doi.org/10.29303/jipp.v9i2.2141

Yusuf, R. M., Anugrah, A. F., Muslimah, D. D., Permana, S. M. W. N., Yuliani, S., & Majalengka, U. (2022). OBJECT DETECTION USING OPENCV AND YOLOv4-TINY METHOD TO HELP THE BLIND. Journal of Computer Science and Information Technology (JCSIT ), 1, 59.

Downloads

Published

2026-03-10