Az AI eszközök segítették visszaállítani a beszédet egy bénulással rendelkező nő számára: “Úgy érezte, hogy megtestesül”
Az a technológia, amely lehetővé teszi a munkamenetek átírását, segíthet a bénulásban szenvedő embereknek.
Az UC Berkeley és az UC San Francisco kutatói a generatív AI -t használták a késés csökkentésére, amikor egy súlyos bénulással rendelkező személy megkísérel beszélni, és amikor a számítógépes eszköz lejátszja a hangot. Munkájuk segített egy Ann nevű nőnek, aki 2005 -ben 30 éves korában szenvedett agytörzs -stroke -ot, hogy közeli időben kommunikáljon. Ann egy olyan hangon beszélt, amely úgy hangzott, mint a sajátja, mert a modellt a stroke előtti felvételeire képzették.
A Gen AI néhány különféle módon történő telepítése lehetővé tette a kutatók számára, hogy javuljanak a neuroprotézisben, amely sokkal hosszabb ideig tarthatott – mondta Cheol Jun Cho, az UC Berkeley Ph.D. Villamosmérnöki és számítógépes tudományok hallgatója, valamint a márciusban megjelent a Nature Idegtudományban megjelent tanulmány szerzője.
Ez az egyik példa arra, hogy a generatív AI eszközök – ugyanazon mögöttes technológia felhasználásával, amely olyan chatbotokat hajt végre, mint az Openai Chatgpt és az Antropic’s Claude vagy a Google -találkozás átírása – segíti az orvosi és tudományos kutatók megoldását olyan problémák megoldásában, amelyek megoldása sokkal hosszabb ideig tarthatott, mondta Cho. Az AI szakértői és támogatói rámutattak arra, hogy a technológia az orvostudományban óriási fejjel, akár új gyógyszerek kidolgozásában, akár jobb tesztelés és diagnózis biztosításában.
“Az AI felgyorsítja az előrehaladást” – mondta Cho. “Időnként elképzeltük, hogy az idővonal egy vagy két évtizeddel lesz. Most ez a tempó olyan, mint három év.”
A technológia, amely segített az Annnek, a koncepció bizonyítéka – mondta Cho, de megmutatja az olyan eszközök felé vezető utat, amelyek a jövőben is dugó és lejátszás lehetnek.
A beszéd felgyorsítása
A meglévő neuroprotézisek problémája a késés. Van egy idő késés, amikor az ember megkezdi a beszédet, és amikor egy mondatot ténylegesen generálnak és meghallgatnak. Cho elmondta, hogy az előző technológia azt jelentette, hogy Annnek meg kellett várnia, amíg az egyik mondat befejeződött, mielőtt a következőt megkezdi.
Ann, akit az első 2023 -as kutatás során láttak, olyan számítógépeken keresztül tudott kommunikálni, amelyek elolvasták azokat a jeleket, amelyeket az agya megpróbált elküldeni az izmokhoz, amelyek ellenőrzik a beszédet.
Fotó: Noah Berger/UCSF
“A legfontosabb áttörés itt az, hogy nem kell várnia, amíg befejezi a mondatot” – mondta. “Most valóban továbbíthatjuk a dekódolási eljárást, amikor csak beszélni szándékozik.”
A protézis magában foglalja az agy felszínére beültetett elektródák tömbjét, és kábel útján csatlakoztatva egy számítógéphez. Dekódolja a kontroll jeleket, hogy Ann agya küldi az izmokat, amelyek a beszédet ellenőrzik. Miután Ann kiválasztotta a szavakat, amelyeket mondani szándékozik, az AI elolvassa ezeket a jeleket a motoros kéregből, és életet ad nekik.
A modell kiképzéséhez a csapatnak megpróbálta beszélni a képernyőn megjelenő mondatokat. Ezután az adott tevékenység adatait felhasználták a motoros kéreg jeleinek feltérképezésére, a Gen AI segítségével a hiányosságok kitöltéséhez.
Cho szerint a csapat reméli, hogy az áttörés olyan eszközökhöz vezet, amelyek méretezhetőek és hozzáférhetőbbek.
“Még mindig folyamatosan erőfeszítéseket teszünk annak érdekében, hogy pontosabb és alacsonyabb késéssé váljunk” – mondta. “Próbálunk valami olyat felépíteni, amely dugó és lejátszás lehet.”
Ai segítségével a gondolatról a beszédre menjen
Cho szerint a csapat néhány különféle módon használt AI generát. Az egyik az volt, hogy megismételje Ann sérülés előtti hangját. A sérülése előtti felvételeket egy olyan modell kiképzésére használták, amely képes előállítani a hangját.
“Nagyon izgatott volt, amikor először ismét meghallotta a saját hangját” – mondta Cho.
A nagy változás a valós idejű transzkripcióban volt. Cho összehasonlította azokkal az eszközökkel, amelyek átírják az előadásokat vagy találkozókat, amikor azok megtörténnek.
A 2023 -as tanulmányra épített munka, amely AI eszközöket használt Ann kommunikációjának elősegítésére. Ez a munka továbbra is jelentős késéssel bírt, amikor Ann megpróbált beszélni és a szavak előállításának mikor. Ez a kutatás jelentősen csökkentette ezt a késleltetést, és Ann azt mondta a csapatnak, hogy természetesebbnek érezte magát.
“Azt jelentette, hogy megtestesül, hogy ez a saját beszéde” – mondta Cho.
