Sobota 20. srpna 2022, svátek má Bernard
  • schránka
  • Přihlásit Můj účet
  • Sobota 20. srpna 2022 Bernard

Počítač pozná, co se vám honí hlavou. Vědci umí přeložit myšlenky do slov

  9:09aktualizováno  11:00
Lidský mozek nevnímá slova jen jako zvuky. I proto je obtížné odhalit, co se v něm děje. Vědci z Columbia University dokázali pomocí implantátu a strojového učení zrekonstruovat řeč přímo ze signálů naměřených v mozku. Cesta ke „čtení myšlenek“ však bude ještě dlouhá.

Vědcům se podařilo „odposlechnout“ z mozku čísla, na která člověk myslel | foto: montáž: Pavel Kasík, Technet.cz

V posledních letech se vyrojila řada ukázek toho, jak uplatnit umělou inteligenci, což je nepřesná přezdívka pro počítačové neuronové sítě. Nástroje strojového učení se využívají k překladu cizích jazyků, generování obličejů i videomontáží nebo k hraní složitých deskových her.

Dnes se však podíváme na zajímavý příklad, kdy byla umělá inteligence využita k analýze jiné neuronové sítě. Té tradičnější, která strojové učení inspirovala. Vědci využili počítačovou neuronovou síť k analýze činnosti neuronů v lidském mozku.

Mozek nezaznamenává signály z uší tak, jako je zaznamenává třeba diktafon na magnetofonovou pásku. Ve sluchové kůře mozkové, kam signály ze sluchového ústrojí proudí, dochází zřejmě k jakési interpretaci, například k odlišení důležitých zvuků od šumu. Funkční magnetická analýza mozku ukazuje, že jinak například vnímáme slova v jazyce, kterému rozumíme, a jinak ostatní zvuky. Naše smyslové vnímání je navíc „rozsekané“ do intervalů, mozek tedy namísto nepřetržité aktivity rytmicky „osciluje“.

Bylo by však z naměřené aktivity mozku možné zpětně dekódovat, co mozek právě analyzuje? Právě o to se pokusili vědci z Zuckermanova institutu na Columbia University v New Yorku. Jejich práce s názvem „Směrem k rekonstrukci srozumitelné řeči z lidské sluchové kůry mozkové“ vyšla v recenzovaném odborném časopise Nature - Scientific Reports (PDF).

Než se dostaneme k aktuální studii, připomeňme si, že snaha vědců „podívat se lidem do mozku“ není nijak nová. Moderní metody zahrnují již zmíněnou funkční magnetickou rezonanci nebo povrchové měření elektrické aktivity EEG.

Operace mozku (ilustrační foto)

Přímým předchůdcem právě vydané studie je práce publikovaná v PLOS roku 2012 (PDF). K měření využila invazivní metody: elektrod vložených operativně přímo na povrch lidského mozku.

Vědcům se tehdy podařilo analýzou elektrických signálů rozpoznat některá konkrétní slova pomocí vizuální rekonstrukce na spektrogramu.

Studie publikovaná v roce 2012 ukazovala, jak pomocí elektrod v mozku (znázorněná červenou mřížkou) analyzovat a rekonstruovat zaslechnutá slova na úrovni sluchové kůry mozkové.

Na studii z roku 2012 se podílel i doktor Nima Mesgarani, který vedl tým newyorských vědců v aktuální studii. Také tentokrát využili vědci u pěti pacientů implantáty monitorující jemné elektrické signály na povrchu kůry mozkové. Kromě toho přidali další vrstvu – počítačově simulovanou neuronovou síť, tedy strojové učení.

Trénování simulovaného sluchu

„Abychom posunuli hranice dosud nejlepších neuroprotéz, zkombinovali jsme současné pokroky ve strojovém učení s pokroky v syntéze řeči,“ uvádějí vědci ve shrnutí práce. „To nám umožňuje rekonstruovat srozumitelnou řeč přímo z lidské sluchové kůry mozkové.“

Pěti pacientům (kteří měli před sebou tak jako tak operaci mozku kvůli epilepsii) vědci do mozku voperovali jemnou mřížku elektrod. Poté pacienti poslouchali 30 minut příběhů čtených čtyřmi různými čtenáři. Během čtení museli pacienti poslouchat, což vědci namátkou kontrolovali náhodnými pauzami a otázkami.

Těchto třicet minut sloužilo k naměření toho, jak mozek posluchačů reaguje na známá data, tedy na známá slova. Na těchto datech se natrénovala umělá neuronová síť kombinující různé zapojení neuronů do vrstev.

Vědci ukázali, jak z dat získaných elektrodami na povrchu mozku pacienta rekonstruovat, co pacienti slyší. Využili k tomu počítačovou neuronovou síť a syntetizátor řeči.

Poté pacienti poslouchali, jak jim někdo čte čísla od nuly do devítky (tato slova přitom nebyla součástí trénovacích dat). Data naměřená v mozku pacientů pak vědci prohnali natrénovanou neuronovou sítí. K prezentaci výsledků nakonec využili různé druhy syntezátorů řeči. Výsledkem je roboticky znějící hlas, který je sice místy značně zkreslený, ale celkově srozumitelný.

Poslechněte si, jak vědci zrekonstruovali zvuková data z měření v mozku:

„Ukázali jsme, že lidé těmto (syntetizovaným, pozn. red.) slovům rozumí v 75 % případů, což je více, než v jakémkoli předchozím pokusu,“ uvádí vedoucí pokusu Mina Mesgarani. „Citlivý dekodér hlasu a mocné neuronové sítě dokázaly reprodukovat slova, která pacienti slyšeli, s překvapivou přesností.“

Mesgaraniho tým plánuje do budoucna složitější pokusy, včetně rozpoznávání komplikovaných slovních spojení a celých vět. Cílem je přiblížit se porozumění toho, jak lidský mozek reprezentuje a vnímá řeč. To by časem mohlo vést k vývoji implantátu, který by umožňoval převést myšlenky na řeč a usnadnit tak život pacientům, kteří kvůli nemoci nebo úrazu přišli o hlas. 

Nyní komunikují prostřednictvím složitých zařízení a výběru slov z obrazovky. V budoucnu by podle Mesgaraniho bylo možné, aby byla řeč syntetizovaná přímo signály z mozku: „Byla by to revoluce. Dalo by to těmto lidem novou spojení se světem.“

Kromě toho by bylo takový implantát zřejmě možné použít i k dalším diagnostickým účelům. A samozřejmě také ke svatému grálu všech dystopických sci-fi thrillerů: čtení myšlenek.

Autor:

Gamescom 2022

Letošní veletrh her Gamescom 2022 opět pořádá na výstavišti v Kolíně nad Rýnem od 24. do 28. srpna. Slavnostní zahájení proběhne večer předem na Opening Night Live 2022 show 23. srpna.

  • Nejčtenější

Rusko začíná vyrábět vlastní notebook. Přirovnání k macbookům pokulhává

Po letech vývoje se má letos rozběhnout výroba zcela nového notebooku vyvinutého přímo v Rusku. Stroj s názvem Bitblaze...

ANALÝZA: Tchaj-wan v ohrožení. Neptejme se zda, ale kdy bude válka

Premium Uprostřed obav o budoucnost míru ve světě, na pozadí války probíhající mezi dvěma největšími armádami Evropy...

{NADPIS reklamního článku dlouhý přes dva řádky}

{POPISEK reklamního článku, také dlouhý přes dva a možná dokonce až tři řádky, končící na tři tečky...}

Armáda by mohla dostat německé obrněnce Marder a svá BVP-2 poslat Ukrajině

Válka na Ukrajině rozpoutala v Evropě velké pohyby zbraní a vojenské techniky. Některé země své starší kusy posílají na...

KVÍZ: Znáte druhoválečná letadla? Zvolte si obtížnost kvízu

Identifikace letadel podle fotografií je kratochvíle, která snad neomrzí. Po delší době jsme opět jeden kvíz na toto...

{NADPIS reklamního článku dlouhý přes dva řádky}

{POPISEK reklamního článku, také dlouhý přes dva a možná dokonce až tři řádky, končící na tři tečky...}

Typů vrtulníků s tandemovými rotory vznikla řada, ale v SSSR jen jeden

Vrtulníky s tandemovými rotory mají své výhody i nevýhody. Zatímco na Západě vznikla řada konstrukcí, z nichž některé...

Porucha imunity je první známka, že je v našem životě něco špatně, říká lékařka

Premium Lidí s poruchami imunity přibývá. Příčinou je často špatný životní styl, což vede k vážným nemocem, třeba k rakovině....

Bude hůř. Považuji za férové sdělit to divákům předem, přiznal šéf ČT

Premium Inflace, energie, válka na Ukrajině a k tomu nízké koncesionářské poplatky. Současná situace postihla i Českou...

První díl rozhovoru s Shopaholicadel: Práci neseženu, každý den můžu umřít!

Premium Rozhovorům se dlouho úspěšně vyhýbala, nyní ale udělala výjimku a Expresu poskytla exkluzivní sondu do své duše....

  • Další z rubriky

Skleníkový efekt zažívali i dinosauři, s horky a vyšší hladinou moří

V období pozdní křídy, asi před sto až šedesáti šesti miliony let, bylo celosvětové podnebí poměrně teplé až horké. Na...

Expert: Do Česka se plyn z LNG terminálu přepraví těžko. Dostaneme ten, co bude

Rozstřel Česká vláda zajistila v Nizozemsku terminál na zkapalněný zemní plyn (LNG). Ten by měl v případě výpadku dodávek z...

Rozšíření oparů souvisí s rozmachem líbání v době bronzové, tvrdí vědci

Příčinou šíření oparů je pravděpodobně rozmach líbání v době bronzové. Vyplývá to ze studie, o které informoval deník...

Geotermální energii lze využít na vytápění i chlazení budov, říká expert

Rozstřel Geotermální energie neznamená jen tepelná čerpadla. Ještě mnohem zajímavější je využití energie uskladněné ve větších...

Léto venku s eMiminem: Na co se těšit v 7. soutěžním týdnu?
Léto venku s eMiminem: Na co se těšit v 7. soutěžním týdnu?

Léto venku s eMiminem je tady! Každý týden budeme soutěžit o fantastické ceny v celkové hodnotě 298.000 Kč. Sdílejte své letní zážitky, hodnoťte...

Bude hůř. Považuji za férové sdělit to divákům předem, přiznal šéf ČT

Premium Inflace, energie, válka na Ukrajině a k tomu nízké koncesionářské poplatky. Současná situace postihla i Českou...

Eva Burešová porodila. S Přemkem Forejtem dali synovi netradiční jméno

Herečka Eva Burešová (29) a šéfkuchař Přemek Forejt (35) přivítali na svět prvního společného potomka. Narodil se jim...

Oldřich Navrátil přestavěl starý mlýn u Třebíče na pohádkovou chalupu

Herec Oldřich Navrátil (69) nejraději tráví čas na chalupě kousek od rodné Třebíče, kde si užívá čerstvého vzduchu a...

Eva shodila 45 kilo. Mám velikost S a muži se za mnou zase otáčejí, říká

Paní Eva nebyla se svou postavou dlouhodobě spokojená, navíc se neustále zadýchávala, což byl jeden z prvních impulzů k...

PRVNÍ DOJMY: Zlatej teletext! Případy 1. oddělení postihla nová doba

Z třinácti premiérových dílů třetí a poslední série krimiseriálu Případy 1. oddělení, která poběží od 5. září,...