Lấy cảm hứng từ việc sử dụng khả năng định vị bằng tiếng vang của loài dơi, các nhà nghiên cứu đã phát triển kính thông minh có thể chuyển đổi thông tin hình ảnh thành cách thể hiện âm thanh độc đáo, cải thiện khả năng định vị xung quanh của người mù và người khiếm thị. Công nghệ này có thể thay đổi thế giới đối với người khiếm thị. Công nghệ hỗ trợ bao gồm việc thiết kế các công nghệ cho phép người khuyết tật về giác quan vượt qua những trở ngại trong cuộc sống hàng ngày. Mù hoặc thị lực kém (BLV) đặc biệt ảnh hưởng đến khả năng thực hiện các hoạt động sinh hoạt hàng ngày và tham gia các hoạt động và tương tác xã hội của một người.
Một lĩnh vực rộng lớn của nghiên cứu công nghệ hỗ trợ là sử dụng phản hồi thị giác, xúc giác/xúc giác và thính giác như một phương tiện để tăng cường các giác quan. Giờ đây, các nhà nghiên cứu tại Đại học Công nghệ Sydney (UTS) đã phát triển kính thông minh thế hệ tiếp theo có thể giúp những người không bị khiếm thị “nhìn” bằng cách chuyển đổi thông tin hình ảnh thành các biểu tượng âm thanh độc đáo, được gọi là “âm thanh xúc giác”.
Lin Qinteng, một trong những đồng tác giả của nghiên cứu, cho biết: "Kính thông minh thường sử dụng thị giác máy tính và các thông tin cảm giác khác để chuyển môi trường xung quanh người đeo sang lời nói do máy tính tổng hợp". "Tuy nhiên, công nghệ cảm ứng âm thanh xử lý âm thanh của các vật thể, tạo ra sự thể hiện âm thanh độc đáo khi vật thể đi vào tầm nhìn của thiết bị. Ví dụ: âm thanh của những chiếc lá xào xạc có thể tượng trưng cho một cái cây và âm thanh vo ve có thể tượng trưng cho một chiếc điện thoại di động."
Các nhà nghiên cứu lấy cảm hứng từ việc sử dụng khả năng định vị bằng tiếng vang của loài dơi, phát ra sóng âm thanh bật ra khỏi vật thể và tiếng vang phản hồi cung cấp thông tin như kích thước và khoảng cách của vật thể.
FAD bao gồm một bộ kính thực tế tăng cường và điện thoại Android OPPOFindX3Pro. UnityGameEngine2022 có thể quản lý đầu vào âm thanh và đầu ra theo dõi camera/đầu của kính. Bằng cách này, khi một vật thể lọt vào tầm nhìn của thiết bị, FAD có thể chuyển đổi nó thành biểu tượng âm thanh rõ ràng.
Các nhà nghiên cứu đã thử kính của họ trên 14 người lớn tham gia, 7 người trong số họ không bị suy giảm thị lực và 7 người trong số họ bị bịt mắt và được coi là nhóm đối chứng. Nghiên cứu bao gồm giai đoạn huấn luyện, nhiệm vụ ngồi (sử dụng FAD để quét các đồ vật trên bàn và tạo ra âm thanh) và nhiệm vụ đứng (khám phá hiệu suất của FAD khi người tham gia đi bộ và tìm thấy đồ vật trong một môi trường bừa bộn). Bốn đồ vật được sử dụng trong nghiên cứu: một cái bát, một cuốn sách, một cái cốc và một cái chai.
Họ phát hiện ra rằng các thiết bị đeo đã cải thiện đáng kể khả năng của những người không bị khuyết tật trí não trong việc xác định và tìm kiếm đồ vật mà không tiêu tốn quá nhiều năng lượng tinh thần.
Howe Yuan Zhu, tác giả đầu tiên và tác giả tương ứng của nghiên cứu, cho biết: "Phản hồi thính giác cho phép người dùng xác định và chạm vào đồ vật rất chính xác. Kết quả của chúng tôi cho thấy cảm ứng âm thanh có tiềm năng cung cấp công nghệ mới cho cộng đồng khiếm thị." "
Với một số điều chỉnh, công nghệ cảm ứng âm thanh có thể trở thành một phần không thể thiếu của công nghệ hỗ trợ, cho phép người khiếm thị tiếp cận môi trường sống của họ tốt hơn trước.
Nghiên cứu được công bố trên tạp chí PLOSOne.