In de toekomst zullen stomme mensen vrijelijk en duidelijk woorden kunnen uitspreken dankzij apparaten die hun hersenactiviteit omzetten in een gesynthetiseerde stem. Onderzoekers van de University of California, San Francisco hebben onlangs een grote stap gezet in de richting van verbetering van deze technologie door kunstmatige intelligentie een stem te laten reproduceren zonder gedachten te lezen, maar door de bewegingen van iemands lippen te analyseren. Het resultaat was indrukwekkend - de gesynthetiseerde stem is nu te horen.
Er wordt verwacht dat het apparaat zal werken wanneer de persoon mentaal of fysiek de bewegingen van de mond reproduceert, zelfs als deze geen geluid maken. Om te begrijpen welke delen van het menselijk brein worden geactiveerd door bepaalde mondbewegingen, rekruteerden de onderzoekers vijf vrijwilligers voor de proef. Ze lezen korte fragmenten uit kinderverhalen - tijdens dit proces lezen elektroden ingebed in hun hersenen hun activiteit.
Uiteindelijk ontwikkelden de onderzoekers twee neurale netwerken: de eerste koppelde hersensignalen aan lipbewegingen en de tweede veranderde deze bewegingen in gesynthetiseerde spraak. De vrijwilligers waren inderdaad in staat om fragmenten van zinnen te herhalen - ongeveer 69% van de gesynthetiseerde woorden is gemakkelijk te herkennen op de opnames. Net als bij andere onderzoeken geldt: hoe korter de zinnen, hoe nauwkeuriger het resultaat.
Onderzoekers kunnen de technologie verbeteren door het gebruik van hersenimplantaten met dichtere elektroden en geavanceerde algoritmen voor machine learning. Er werden gemeenschappelijke kenmerken gevonden tussen de hersenreacties van verschillende deelnemers aan het onderzoek, wat suggereert dat toekomstige spraaksynthese-apparaten gemakkelijk voor elke persoon kunnen worden aangepast. De onderzoekers merkten ook dat kunstmatige intelligentie soms geluiden herkent die niet gebruikt worden bij trainingen, wat ook veel hoop geeft.
Ramis Ganiev