Wetenschappers hebben een systeem gemaakt dat hersensignalen decodeert en omzet in spraak. Op deze manier kunt u ontdekken wat de persoon zegt zonder zijn woorden te horen. Na verloop van tijd kunnen dergelijke apparaten spraaksynthesizers worden voor domme mensen.
De prestatie wordt beschreven in een wetenschappelijk artikel gepubliceerd in het tijdschrift Nature Neuroscience.
Verschillende onderzoeksgroepen creëren al jaren systemen die het beeld van hersenactiviteit in woorden omzetten en in feite het menselijke spraakapparaat vervangen. Eerdere werken hadden echter meestal betrekking op de verbinding van hersensignalen met de bewegingen van de spraakorganen of gesproken geluiden.
Onderzoekers van de University of California, San Francisco besloten een kortere weg te nemen. Hun ontwerp brengt neurale signalen rechtstreeks in kaart in zinnen. Om dit te doen, pasten ze de algoritmen aan die worden gebruikt bij automatische vertaling van de ene taal naar de andere. In dit geval is een soortgelijk probleem opgelost. Het brein dat spraak waarneemt, vertaalt het in de taal van zijn elektrische activiteit. De taak van kunstmatige intelligentie is om omgekeerde vertaling uit te voeren.
De onderzoekers pasten de benadering van machinevertaling aan om neurale signalen te decoderen. Vertaling van Vesti. Nauka.
Bij het experiment waren vier vrouwen met epilepsie betrokken. Eerder introduceerden artsen ze voor medische doeleinden in de hersenen van ongeveer 250 elektroden, die nu hebben gediend ten behoeve van de wetenschap.
Alle proefpersonen lezen een reeks zinnen voor. Op dit moment registreerden elektroden de activiteit van hun hersenen die verband houdt met lipbewegingen, uitspraak van klinkers en medeklinkers en andere parameters.
Toen kwamen drie kunstmatige neurale netwerken in het spel. De eerste benadrukte patronen in hoe het signaal van de elektroden in de loop van de tijd veranderde. De tweede zette het resultaat van de eerste om in speciale wiskundige structuren (sjablonen). Ten slotte veranderde de derde ze in tekst in het Engels.
Promotie video:
De deelnemers aan het experiment herhaalden elk van de 30-50 zinnen tweemaal. De reactie van de zenuwcellen op de eerste uiting van de zin diende om het systeem te trainen, en op de tweede uiting om zijn vaardigheden te testen.
Als gevolg hiervan was het systeem slechts 3% van de tijd fout. Dit is een heel goed resultaat voor dit soort ontwikkeling.
Toegegeven, de woordenschat van de gebruikte zinnen was beperkt tot 250 woorden. Maar in de eerste plaats, en dit is veel voor mensen die tegenwoordig door verlamming helemaal niets kunnen uitspreken of schrijven. En ten tweede zetten de specialisten hun werk voort.
Auteur: Anatoly Glyantsev
