VIPTour: Inteligența artificială care permite explorarea activă a mediului pentru persoanele cu deficiențe de vedere

Un nou sistem bazat pe inteligență artificială, denumit VIPTour, a fost dezvoltat de o echipă de cercetători din China pentru a sprijini persoanele nevăzătoare sau cu vedere slabă în explorarea activă și independentă a mediilor necunoscute. Studiul care documentează acest progres a fost publicat în NPJ Artificial Intelligence în 2025 și demonstrează potențialul real al AI în transformarea experiențelor senzoriale și cognitive ale persoanelor cu dizabilități vizuale.

Context

Explorarea mediului natural are beneficii semnificative asupra sănătății fizice și mentale. Totuși, persoanele cu deficiențe de vedere sunt frecvent private de această experiență, deoarece soluțiile asistive actuale se concentrează predominant pe asistență funcțională pasivă – cum ar fi navigarea și evitarea obstacolelor – și nu oferă sprijin pentru explorare activă, învățare contextuală sau memorare.

Acest tip de explorare activă este esențial pentru a consolida memoria spațială, a crește autonomia personală și a încuraja interacțiunea socială între persoane cu deficiențe de vedere.

Despre sistemul VIPTour

VIPTour este un sistem AI care include:

• Dispozitive ușoare și portabile: o cameră video și un smartphone obișnuit;

• Rețea de învățare profundă numită FocusFormer, antrenată într-o manieră auto-supervizată;

• Interacțiune multisenzorială: prin comenzi tactile ierarhizate și feedback audio;

• Funcții de personalizare și învățare în buclă printr-un modul de adaptare la utilizator (BLV-in-the-Loop Adapter).

Algoritmul FocusFormer

FocusFormer este nucleul tehnic al sistemului și funcționează pe baza a patru subrețele:

• Subrețeaua de fundal: elimină detalii vizuale comune, nesemnificative;

• Subrețeaua de atracție: detectează elementele vizual atrăgătoare;

• Subrețeaua de noutate: identifică caracteristicile neobișnuite, noi;

• Subrețeaua de necesitate: selectează informațiile relevante pentru siguranță și orientare, pe baza datelor colectate din sondaje cu utilizatori nevăzători.

Aceste rețele colaborează pentru a genera o hartă semantică ierarhică și personalizată a mediului înconjurător, care este apoi transpusă într-o interfață accesibilă pe smartphone.

VIPTour este antrenat pe mii de videoclipuri turistice publice, eliminând părtinirile estetice obișnuite și crescând acuratețea contextuală a informațiilor livrate.

Sistemul permite de asemenea înregistrarea și partajarea experiențelor, facilitând comunicarea emoțională și schimbul de cunoștințe între persoanele cu deficiențe de vedere.

Rezultate

Sistemul VIPTour a fost testat pe 33 de persoane cu orbire completă sau parțială. Analiza experiențelor auto-raportate și a măsurătorilor fiziologice a arătat rezultate impresionante:

• +67,9% creștere a răspunsurilor emoționale pozitive

• +94,7% creștere a nivelului de activare (arousal)

• +772,7% îmbunătățire a preciziei hărții cognitive (reprezentarea mentală a spațiului)

• +200% creștere a acurateței memoriei pe termen lung

Scorurile de utilizare au depășit constant 80 din 100, fiind comparabile sau superioare celor ale altor instrumente asistive existente.

Măsurătorile obiective, precum activitatea electrodermică și variabilitatea ritmului cardiac, au indicat angajament emoțional crescut în timpul utilizării sistemului.

Semnificația studiului

Studiul demonstrează că VIPTour permite:

• Explorarea activă și semnificativă a mediilor necunoscute;

• Îmbunătățirea memoriei spațiale și a implicării emoționale;

• Dezvoltarea unei rețele sociale funcționale între persoane cu deficiențe de vedere, prin partajarea experiențelor;

• Reducerea dependenței de însoțitori, sporind autonomia personală.

Aceste efecte sunt explicate prin conceptul de fluență cognitivă: informațiile prezentate clar și organizat sunt mai ușor procesate, generând emoții pozitive și memorare eficientă. Algoritmul FocusFormer reușește să echilibreze noutatea cu familiaritatea, menținând interesul și facilitând învățarea.

Perspective

• Impactul sistemului VIPTour depinde de calitatea tehnologiilor de bază, precum detectarea obiectelor și generarea graficului semantic.

• Îmbunătățiri viitoare ale acestor tehnologii ar putea duce la o și mai mare precizie și personalizare.

• VIPTour reprezintă un pas important către accesibilitate reală și incluzivitate digitală, demonstrând că inteligența artificială poate fi valorificată în moduri semnificative pentru bunăstarea persoanelor cu dizabilități.