Forskare har skapat ett system som avkodar hjärnsignaler och förvandlar dem till tal. På så sätt kan du ta reda på vad ämnet säger utan att höra hans ord. Med tiden kan sådana anordningar bli talsyntes för de dumma.
Prestationen beskrivs i en vetenskaplig artikel publicerad i tidskriften Nature Neuroscience.
I flera år har olika forskningsgrupper skapat system som förvandlar bilden av hjärnaktivitet till ord, som faktiskt ersätter den mänskliga talapparaten. Emellertid handlade tidigare verk oftast om kopplingen av hjärnsignaler med rörelserna i orgeln eller talade ljud.
Forskare vid University of California, San Francisco, bestämde sig för att ta en genväg. Deras design kartlägger neurala signaler direkt till fraser. För att göra detta anpassade de algoritmerna som användes i maskinöversättning från ett språk till ett annat. I detta fall löses ett liknande problem. Hjärnan som uppfattar tal översätter det till språket för dess elektriska aktivitet. Artificiell intelligens uppgift är att utföra omvänd översättning.
Forskarna anpassade tillvägagångssättet som används för maskinöversättning för att avkoda neurala signaler. Översättning av Vesti. Nauka.
Experimentet involverade fyra kvinnor med epilepsi. Tidigare introducerade läkare dem för medicinska ändamål i hjärnan på cirka 250 elektroder, som nu har tjänat till förmån för vetenskapen.
Alla ämnen läser en uppsättning fraser. Vid denna tidpunkt registrerade elektroder aktiviteten i deras hjärna förknippade med läpprörelser, uttal av vokaler och konsonanter och andra parametrar.
Sedan kom tre konstgjorda neurala nätverk in. De första markerade mönstren i hur signalen från elektroderna förändrades över tid. Den andra omvandlade resultatet av den första till speciella matematiska strukturer (mallar). Slutligen förvandlade den tredje dem till text på engelska.
Kampanjvideo:
Deltagarna i experimentet upprepade var och en av 30-50 meningarna två gånger. Svaret från nervcellerna på det första uttrycket i frasen tjänade till att träna systemet, och till det andra yttrandet för att testa dess färdigheter.
Som ett resultat hade systemet bara fel 3% av tiden. Detta är ett mycket bra resultat för denna typ av utveckling.
Det är riktigt att ordboken för de använda fraserna var begränsad till 250 ord. Men först och främst, och detta är mycket för människor som idag inte kan uttala eller skriva något på grund av förlamning. Och för det andra fortsätter specialisterna sitt arbete.
Författare: Anatoly Glyantsev
