Apple ir vērienīgs projekts, kas varētu revolucionizēt veidu, kā cilvēki ar redzes traucējumiem pārvietojas. Izmantojot tehnoloģiju, ko sauc par SceneScout Mākslīgais intelekts var analizēt Street View attēlus un aprakstīt apkārtni tādā veidā, kas ir saprotams pat lietotājiem ar redzes traucējumiem.
Virtuālā apsekošana un maršruta pārskats
SceneScout, izstrādāts uzņēmuma ietvaros Apple Machine Learning Pētījumi, izmanto multimodālu valodas modeli, lai atpazītu un aprakstītu attēlos esošās iezīmes no kartēšanas lietojumprogrammām, piemēram, Paskaties apkārtTas piedāvā divus režīmus: Maršruts Preview a Virtuālā izpēte.
Maršruta režīmā Preview Piemēram, mākslīgais intelekts norādīs uz kokiem līkumā, soliņiem, kāpnēm vai krustojumiem. Otrais režīms — virtuālā izpēte — ļauj lietotājam virtuāli “staigāt” pa apkārtni un saņemt balss aprakstu par visiem vizuālajiem elementiem ainā.
Vieda, neredzama navigācija
Testēšana parādīja, ka SceneScout atklāj informāciju, ko parastā navigācija neatklāj. Aprakstu precizitāte tika novērtēta kā uzticama 72% gadījumu, un 95% gadījumu tā pareizi uztvēra stabilas vizuālās iezīmes. Dalībnieki ieteica uzlabojumus, piemēram, pielāgot aprakstus, pamatojoties uz iepriekšējo lietošanu, un mainīt skata leņķi uz gājēju acu līmeni, nevis automašīnas kameru.
Fotogalerie
Interesanta bija arī ideja par sistēmas izmantošanu reāllaikā – piemēram, izmantojot austiņas ar skaņas vadīšanu caur vaigu kauliem vai caurspīdīgā klausīšanās režīmā, kas sniegtu lietotājam aktuālu informāciju par apkārtni pastaigas laikā.
Apple vēl nav paziņojis, kad (vai vispār) SceneScout tiks iekļauts reālos produktos. Tomēr tas varētu tikt izmantots kombinācijā ar nākotnes produktiem, piemēram, Apple Stikls vai AirPodi ar kamerukas sniegtu mākslīgajam intelektam reālu skatījumu uz pasauli.
Neatkarīgi no tā, vai tā ir nākotnes filma vai tikai pētījums, SceneScout parāda, kā mākslīgais intelekts var uzlabot vājredzīgo cilvēku dzīvi un tuvināt viņus pasaulei, ko viņi iepriekš nav spējuši redzēt.
