”Third Eye for the Blind” är ett par smarta glasögon som använder AI för att ge bäraren en beskrivning av omgivningen. Läkaren och hårdvaruhackaren Khairul Alam, som har gjort glasögonen, ville visa att det går att bygga vettiga hjälpmedel för blinda som inte kostar skjortan.
I projektet, som han dokumenterar på hackster.io, utgår han från en Raspberry Pi som är kopplad till en Xiao ESP32S3, en sensormodul med videokamera och inbyggd bildprocessor. Den sitter fastspänd på ett par alldeles vanliga glasögon. Mjukvara på sensormodulen analyserar bilderna från videokameran och använder AI för att beskriva föremål i bärarens omgivning.
De här beskrivningarna skickas till en Raspberry Pi som kör en annan AI-baserad mjukvara för att konvertera textbeskrivningarna till tal som spelas upp i ett par billiga, kabelanslutna hörlurar.
Khairul Alam har delat med sig av koden han har tagit fram till projektet. Han använde Edge Impulse för att träna AI:n som ska känna igen olika föremål i omgivningen. Eftersom det är ett experiment började han med ett blygsamt antal: 6 olika slags föremål, med totalt 188 bilder för att träna AI:n på vad som är vad. Han har även skrivit kod för kommunikationen mellan Raspberry Pi och Xiao ESP32S3.
Komponenterna i projektet kostar mindre än en tusenlapp. Khairul Alam använde en äldre Raspberry Pi 1 Model B, och sensormodulen kostar under 150 kronor. Utöver dessa två behövs en powerbank, ett par glasögon som inte ens behöver ha glas i bågarna, samt ett par gamla hörlurar.
