En smartphone holdes op foran en person, der stirrer mod højre. Denne kommunikations-app, GazeSpeak, kan ses på telefonens skærm " (Foto: GazeSpeak, Microsoft Research)

Denne artikel findes på engelsk: http://bionyt.s807.sureserver.com/als/

En app GazeSpeak kan hjælpe stumme ALS patienter med at kommunikere – Hvordan fungerer denne app?
GazeSpeak-appem virker på en smartphone og bruger kunstig intelligens til at konvertere øjenbevægelser til tale, således at en samtalepartner kan forstå, hvad der bliver sagt i realtid.

Denne app kører på lytterens smartphone. Smartphonen bliver holdt, som om man tager et billede. En mærkat på bagsiden af telefonen er synlig for patienten, og viser et nogle bogstaver i fire kasser, der svarer til retningerne venstre, højre, op og ned. Patienten giver disse retningssignaler med øjnene. GazeSpeak-appen registrerer disse øjenbevægelser.

Hvis patienten f.eks. vil sige ordet "taske", ser patienten først ned for at vælge den gruppe, der indeholder "T", og derefter op for at vælge den gruppe, der indeholder "A", og så videre, fortæller Xiaoyi Zhang , som udviklede GazeSpeak-appen, mens han var i praktik hos Microsoft.

GazeSpeak foreslår de mest sandsynlige bogstaver og ord ud fra de bogstaver fra hver gruppe, som patienten kommunikerer. Patienten godkender det foreslåede ord ved at blinke eller ved at se lige frem i to sekunder. Systemet tager også hensyn til tilføjede lister med ord, såsom navne eller steder, som patienten er tilbøjelig til at bruge. De øverste fire ord, som appen foreslår, vises på skærmen, og den øverste læses op.

"Vi bruger computer-vision til at genkende øjets bevægelser, og kunstig intelligens til at foreslå ordene", siger Meredith Morris fra Microsoft Research i Redmond, Washington.

Denne app er designet til folk med motoriske handicap som ALS-sygdommen, fordi øjenbevægelser kan være den eneste måde, som disse patienter til sidst kan kommunikere med. ALS-sygdommen skader nerveceller, hvilket påvirker patientens evne til at tale, synke og til sidst trække vejret. Øjenmusklerne er ofte nogle af de sidste, der påvirkes ved denne sygdom.

Hvordan kan mennesker med ALS kommunikere?
Der er i øjeblikket begrænsede kommunikationsmuligheder for mennesker med ALS, der har mistet evnen til at tale. Den mest almindelige er at bruge staveplader med bogstaver i forskellige grupper, og hvor en person tolker talerens øjenbevægelser, når denne vælger bogstaverne. Men det kan tage lang tid for en person til at lære at tolke disse øjenbevægelser effektivt. Den nye app, GazeSpeak, kan gøre ALS-patienter i stand til at kommunikere langt hurtigere.

Andre systemer, der kan bruges i øjeblikket, benytter software til at spore øjenbevægelser med infrarøde kameraer. Men disse er ofte dyre og pladskrævende, og infrarøde kameraer fungerer ikke godt i sollys.

Hvad er fordelene ved at bruge GazeSpeak for ALS-patienter?
GazeSpeak-appen viste sig meget hurtigere i anvendelse ved et eksperiment med 20 mennesker, der både forsøgte sig med denne app og med de lavteknologiske staveplader. Færdiggørelsen af en sætning med GazeSpeak tog 78 sekunder i gennemsnit, sammenlignet med 123 sekunder ved hjælp af staveplader. Forsøgspersonerne i testene havde ikke ALS, men forskerne fik også feedback på teknologien fra nogle mennesker med ALS og deres tolke. Én person kunne med appen lave en sætning på 62 sekunder og sagde, at han troede, det ville være endnu hurtigere i en virkelig situation, hvor hans tolk lettere ville kunne forudsige, hvad han ville sige.
"Jeg elsker app-teknologien og synes bare, at den er supersmart", sagde en af tolkene.

Hvilken slags smartphone skal bruges til GazeSpeak-appen for at kommunikere med ALS-patienter?
GazeSpeak-appen er transportabel og forholdsvis billigt, da det kun kræver en iOS-enhed, såsom en iPhone eller iPad med app installeret.

Hvornår kan man få GazeSpeak-appen til kommunikation med ALS-patienter?
Microsoft vil præsentere GazeSpeak-appen på konferencen om menneskelige faktorer i computersystemer i Colorado i May 2017.

Forskerne siger, at GazeSpeak-appen vil være tilgængelig på Apple App Store før konferencen, og at kildekoden vil blive gjort frit tilgængelig, så andre mennesker kan bidrage til at forbedre denne app.

Link: https://www.newscientist.com/article/2121579-microsoft-app-helps-people-with-als-speak-using-just-their-eyes/ (New Scientist 17 februar 2017 )
Forsker der nævnes: Xiaoyi Zhang , 3. år CS ph.d.-studerende ved University of Washington http://www.xiaoyizhang.me/ xiaoyiz@cs.washington.edu

Tegn abonnement på

BioNyt Videnskabens Verden (www.bionyt.dk) er Danmarks ældste populærvidenskabelige tidsskrift for naturvidenskab. Det er det eneste blad af sin art i Danmark, som er helliget international forskning inden for livsvidenskaberne.

Bladet bringer aktuelle, spændende forskningsnyheder inden for biologi, medicin og andre naturvidenskabelige områder som f.eks. klimaændringer, nanoteknologi, partikelfysik, astronomi, seksualitet, biologiske våben, ecstasy, evolutionsbiologi, kloning, fedme, søvnforskning, muligheden for liv på mars, influenzaepidemier, livets opståen osv.

Artiklerne roses for at gøre vanskeligt stof forståeligt, uden at den videnskabelige holdbarhed tabes.