- Nové bionické ruky s umelou inteligenciou kombinujú senzory priblíženia a tlaku s neurónovými sieťami na autonómne nastavenie držania tela a sily úchopu.
- Zdieľané ovládanie človek-stroj znižuje kognitívnu záťaž používateľa a zlepšuje presnosť pri chúlostivých každodenných úlohách.
- Vyvíjajú sa hybridné, modulárne a gamifikované dizajny, ako aj neurónové rozhrania, aby sa ovládanie a pocit z protézy priblížili skutočnej ruke.
Bionické ruky s umelou inteligenciou robia v porovnaní s tradičnými protézami obrovský skok vpred: už nejde len o mechanické pohybovanie prstami, ale o obnovenie niečoho veľmi podobného prirodzenej obratnosti ľudskej ruky s menšou mentálnou námahou a väčšou sebadôverou v každodennom živote.
Skutočne revolučné na tejto novej generácii protéz je to, že kombinujú pokročilé senzory, modely umelej inteligencie , pevné a mäkké robotické štruktúry a zdieľané systémy riadenia človek-stroj, takže ruka „premýšľa“ o časti pohybu, zatiaľ čo používateľ sa naďalej rozhoduje, čo chce v danom okamihu robiť.
Od prvých protéz až po inteligentné bionické ruky
Myšlienka nahradiť stratenú končatinu má dlhú históriu : protézy rúk a paží existovali už v staroveku, ako napríklad slávna „Ruka z Capuy“ z obdobia okolo roku 300 pred Kristom, vyrobená zo železa, bronzu a dreva. Predpokladá sa, že patrila rímskemu vojakovi, ktorý ju používal na držanie štítu po tom, čo stratil časť ruky.
Po stáročia boli protézy len estetickými pomôckami , jednoduchými odliatkami, ktoré napodobňovali tvar končatiny, ale neponúkali žiadnu skutočnú funkčnosť. Ich účel bol v podstate kozmetický, „zakryť“ absenciu končatiny bez toho, aby poskytovali akýkoľvek užitočný pohyb.
S medicínskym a mechanickým pokrokom v 19. a 20. storočí prišli prvé kĺbové protézy, schopné reprodukovať niektoré základné pohyby vďaka jednoduchým mechanizmom. Neskôr sa objavili „robotické“ alebo „bionické“ protézy s motormi, rôznymi typmi chápadiel a určitým stupňom svalového alebo elektrického ovládania.
Napriek tomu najpokročilejšie komerčne dostupné bionické ruky stále trpia jedným zásadným obmedzením: ich ovládanie zostáva zložité, neintuitívne a psychicky vyčerpávajúce. Úlohy, ktoré človek s neporušenými rukami vykonáva takmer bez premýšľania – zdvihnutie hrnčeka, držanie plastového pohára, uchopenie tenkého kusu papiera – predstavujú pre mnohých používateľov protéz obrovskú výzvu.
Kognitívne úsilie je také vysoké, že takmer polovica používateľov nakoniec opustí svoju bionickú ruku s odvolaním sa na ťažkosti s používaním, neprirodzené ovládanie a neustále psychické vypätie. Hlavným problémom je, že väčšina týchto zariadení presne nenapodobňuje hmat ani automatickú koordináciu, ktorú mozog vykonáva nevedome.
Prístup Univerzity v Utahu: zdieľané riadenie človeka a stroja
Tím z NeuroRobotics Laboratory na University of Utah , vedený výskumníkmi ako Marshall Trout a Jacob A. George, vyvinul zdieľaný riadiaci systém, ktorý úplne mení situáciu. Ich návrh, publikovaný v časopise Nature Communications, je založený na komerčne dostupnej protéze ruky (ako napríklad TASKA Hand) vybavenej senzormi a špeciálne vyškolenou umelou inteligenciou.
Kľúčovým bodom tejto práce je nepretržitá spolupráca medzi človekom a protézou : používateľ indikuje všeobecný zámer akcie (uchopiť, uvoľniť, priblížiť, držať...), zatiaľ čo model umelej inteligencie má na starosti autonómne nastavovanie polohy prstov a sily úchopu s jemnosťou, ktorú je veľmi ťažké dosiahnuť len priamou ľudskou kontrolou.
Aby to vedci dosiahli, pridali na končeky prstov bionickej ruky senzory priblíženia a tlaku. Tieto optické senzory dokážu dokonca „vidieť“ objekt ešte predtým, ako sa ho dotknete, odhadnúť jeho vzdialenosť a detekovať nepatrné zmeny v kontakte a tlaku po začatí úchopu.
Všetky tieto informácie sa vkladajú do systému, ktorý je natrénovaný s tisíckami polôh úchopu. Model umelej inteligencie sa „naučí“, ktorá kombinácia roztiahnutia prstov a sily je najvhodnejšia pre každý typ objektu, takže keď sa ruka priblíži k šálke, vajíčku alebo listu papiera, automaticky nastaví prsty do optimálnej polohy.
Zároveň protéza prijíma signály z ľudského tela , ako napríklad elektrickú aktivitu svalov predlaktia alebo kože, ktoré indikujú zamýšľaný pohyb. Systém spája signály používateľa a rozhodnutia umelej inteligencie v reálnom čase, aby vytvoril hybridné riadenie: stroj nekontroluje všetko a osoba nemusí mikromanažovať každý prst.
Jemné dotykové a priblížovacie senzory: smerom k protetickému „šiestemu zmyslu“
Jedným z hlavných pokrokov tejto bionickej ruky s umelou inteligenciou sú jej umelé končeky prstov , ktoré sú navrhnuté tak, aby napodobňovali jemný ľudský hmat. Nielenže merajú tlak vyvíjaný na povrch objektu, ale integrujú aj optické senzory priblíženia schopné detekovať objekty pred fyzickým kontaktom.
Vďaka týmto senzorom dokážu prsty detekovať aj prakticky beztiažový vatový tampón, keď na ne dopadne, čo je u mnohých súčasných komerčných protéz nemysliteľné. To umožňuje odhadnúť hmotnosť, objem a jemnosť predmetu a tým upraviť silu úchopu s ultra presnosťou.
Každý prst má vlastný senzor priblíženia, ktorý mu umožňuje „vidieť“ pred seba , čo znamená, že všetky prsty pracujú paralelne, aby dosiahli stabilný úchop. Namiesto toho, aby si používateľ musel myslieť: „Teraz trochu viac zatvorím ukazovák, teraz uvoľním palec,“ umelá inteligencia vypočíta presnú polohu potrebnú pre celú ruku, aby držala predmet bez toho, aby ho stlačila alebo spadla.
Údaje o blízkosti a tlaku sa priebežne privádzajú do neurónovej siete , ktorá v reálnom čase upravuje pohyby prstov. Ak sa predmet začne šmýkať, senzory to zaznamenajú a systém mierne zvýši tlak; ak si všimne, že sa predmet deformuje (napríklad plastový pohár), zníži silu, aby sa predišlo jeho zlomeniu.
Táto senzorická integrácia robí z bionickej ruky oveľa autonómnejší systém, pokiaľ ide o reguláciu úchopu, čím zbavuje mozog používateľa významnej časti úlohy neustáleho monitorovania, ktorú predtým musel robiť vedome.
Kognitívna záťaž: prečo bionické ruky tak unavujú mozog
V našom každodennom živote je pohyb ruky takmer automatický : vedome si nevypočítavame polohu každého prsta ani silu, ktorú vyvíjame. Mozog sa pri prispôsobovaní úchopu spolieha na vnútorné modely a hmat a robí to obrovskou rýchlosťou a nevedome.
V konvenčných robotických protézach táto automatizácia prakticky mizne . Používateľ musí starostlivo premýšľať o tom, aké gesto má urobiť, akú silu má vyvinúť, kedy má otvoriť a kedy zatvoriť, a často to robí takmer bez akýchkoľvek hmatových informácií, ktoré by ho viedli.
Výsledkom je obrovská psychická záťaž : neintuitívne ovládanie, potreba opakovane precvičovať jednoduché gestá a pocit, že akýkoľvek pokles koncentrácie by mohol viesť k rozbitiu pohára alebo predmetu na podlahe. Tento scenár vysvetľuje, prečo toľko používateľov nakoniec od protézy odstúpi napriek jej pokročilej technológii.
Systém navrhnutý tímom z Utahu sa snaží zmierniť práve túto kognitívnu záťaž . Delegovaním jemného doladenia úchopu na umelú inteligenciu a využitím senzorov, ktoré simulujú dotyk, sa používateľ môže sústrediť na celkový zámer pohybu (uchopenie, držanie, uvoľnenie) namiesto ovládania každého mikrodetailu.
Autori štúdie zdôrazňujú, že nechcú, aby daná osoba „bojovala“ so strojom o kontrolu nad svojou rukou. Cieľom je, aby umelá inteligencia fungovala ako posilnenie prirodzenej kontroly používateľa, nie ako autopilot, ktorý preberá kontrolu bez jeho povolenia. Týmto spôsobom sa rešpektujú želania pacienta a zároveň sa mu odbúrava časť psychickej záťaže.
Výsledky testov v reálnom svete: vyššia presnosť, menej úsilia
Inteligentný bionický systém ruky bol testovaný s rôznymi typmi používateľov : deviatimi ľuďmi bez amputácie (na overenie ovládania a rozhrania) a štyrmi ľuďmi s amputovanou končatinou medzi lakťom a zápästím, t. j. s protézami predlaktia.
Tieto testy zahŕňali veľmi bežné, ale chúlostivé úlohy , ako napríklad držanie vajíčka bez jeho rozbitia, zdvihnutie listu papiera bez jeho roztrhnutia, pitie z pohára, manipulácia s malými predmetmi alebo zdvíhanie pohára za rúčku. Toto sú príklady, kde sila úchopu a držanie tela musia byť veľmi presné.
Účastníci preukázali jasné zlepšenie bezpečnosti a presnosti úchopu pri používaní systému s umelou inteligenciou v porovnaní s konvenčnými, čisto ľudskými alebo čisto automatizovanými metódami ovládania. Okrem toho výskumníci namerali významné zníženie vnímanej kognitívnej záťaže počas úloh.
Najvýraznejším aspektom je, že mnohé z týchto pohybov boli vykonané bez predchádzajúceho intenzívneho tréningu . Inými slovami, kombinácia senzorov a neurónovej siete umožnila používateľovi používať rôzne štýly úchopu prirodzenejšie už od veľmi raného štádia, bez toho, aby si musel zapamätať zložité vzorce aktivácie svalov.
U pacientov po amputácii sa pozorovalo aj zlepšenie v takzvanej „jemnej motorike “, čo je schopnosť vykonávať presné a koordinované pohyby malými svalmi ruky a prstov, ktoré sú nevyhnutné pre činnosti, ako je písanie, manipulácia s riadom, zapínanie oblečenia alebo manipulácia s krehkými predmetmi.
Má bionická ruka s umelou inteligenciou „vlastnú myseľ“?
Tlačová správa Univerzity v Utahu hovorila o tom, že ruke sa dá „vlastná myseľ “, čo je pozoruhodný výraz, ktorý vyvolal filozofickú a mediálnu diskusiu. Myšlienka nespočíva v tom, že protéza je vedomá, ale skôr v tom, že má dostatočnú autonómiu na to, aby časť svojho pohybu zvládla sama.
V praxi bionická ruka prijíma informácie z prostredia, spracováva ich a koná bez toho, aby používateľ musel sledovať každú mikroúpravu. Zvonku sa môže zdať, že sa „rozhoduje“ sama, ale v skutočnosti vykonáva všeobecné príkazy používateľa veľmi sofistikovaným spôsobom, pričom sa spolieha na to, čo sa naučila počas tréningu neurónovej siete.
Niektorí odborníci na kognitívnu neurovedu, ako napríklad Tamar Makin , ukázali, že vzťah medzi mozgom a protézami je zložitejší, ako sa doteraz predpokladalo. Ich neurozobrazovacie štúdie naznačujú, že protézy nie sú v mozgu reprezentované presne ako ruky alebo nástroje, ale skôr generujú svoj vlastný neurálny podpis, akúsi „novú kategóriu“.
Ďalší výskumníci, ako napríklad Dani Clode z Univerzity v Cambridge , skúmajú protézy, ktoré nielen nahrádzajú, ale aj rozširujú možnosti – napríklad pridaním druhého palca – pričom využívajú plasticitu mozgu na integráciu ďalších prvkov do telesnej schémy bez toho, aby museli 100 % napodobňovať pôvodnú anatómiu.
Toto všetko vyvoláva zaujímavé otázky o tom, ako pripisujeme vedomie a konanie strojom a zariadeniam. V súčasnosti nemáme spôsob, ako dokázať, že umelá inteligencia je vedomá, a v prípade protetík hovoríme skôr o vysoko sofistikovaných senzoricko-motorických riadiacich systémoch než o „mysli“ v užšom zmysle slova.
Ďalšie inovačné smery: hybridné ruky, modularita a gamifikácia
Utahova inteligentná ruka nie je jediným silným pokrokom v tejto oblasti . Ďalšie výskumné tímy, ako napríklad ten na Univerzite Johnsa Hopkinsa, pracujú na hybridných robotických rukách, ktoré kombinujú pevné a mäkké štruktúry, aby lepšie napodobňovali ľudskú anatómiu a manipulovali s jemnými aj ťažkými predmetmi.
Tieto hybridné ruky zvyčajne obsahujú vnútornú 3D tlačenú štruktúru vyrobenú z polymérov podobných gume a flexibilných kĺbov. To umožňuje protéze lepšie sa prispôsobiť nepravidelným tvarom, rôznym textúram a meniacemu sa tlaku, čím poskytuje oveľa všestrannejší úchop.
Taktiež obsahujú niekoľko vrstiev dotykových senzorov inšpirovaných ľudskou pokožkou , ktoré dokážu detekovať kontakt, zmeny tlaku a šmýkanie. Táto „elektronická pokožka“ umožňuje ruke vycítiť, či sa predmet začne šmýkať, a automaticky zvýšiť aplikovanú silu, aby sa zabránilo jeho pádu.
Toto všetko dopĺňajú riadiace systémy založené na svalových signáloch , kde svaly predlaktia posielajú povely umelým prstom a umelá inteligencia a algoritmy strojového učenia premieňajú tieto signály na prirodzené pohyby. „Mozog“ protézy interpretuje, či je niečo tvrdé alebo mäkké, horúce alebo studené, stabilné alebo sa chystá skĺznuť.
V testoch s predmetmi každodennej potreby – plyšovými zvieratkami, špongiami, fľašami, šiškami alebo plastovými pohármi – niektoré z týchto rúk dosiahli takmer 100 % úspešnosť pri manipulácii s nimi bez ich deformácie alebo zlomenia. Jeden obzvlášť ilustratívny experiment zahŕňal zdvihnutie tenkého plastového pohára plného vody iba tromi prstami, pričom tlak sa nastavoval s pozoruhodnou presnosťou.
Medzitým sa spoločnosti ako Open Bionics zamerali na riešenia orientované na používateľa , ako napríklad rad Hero Arm, ktorý ponúka plne bezdrôtové, vodeodolné a prispôsobiteľné bionické ruky, navrhnuté tak, aby sa oveľa pohodlnejšie integrovali do každodenného života detí, tínedžerov a dospelých.
Tieto protézy sú ovládané bezdrôtovými EMG elektródami (MyoPods) umiestnenými na kýpe alebo predlaktí, ktoré detekujú svalovú aktivitu a premieňajú ju na pohyby bionických prstov. Keďže sú bezdrôtové, umožňujú fyzické oddelenie a opätovné pripojenie ruky od tela, a dokonca aj pripevnenie športového príslušenstva pomocou rovnakého štandardného kotviaceho systému.
Kľúčová je aj emocionálna a motivačná zložka . Niektoré startupy vyvinuli modulárne a relatívne cenovo dostupné ruky určené predovšetkým pre deti, ktoré rastú s nimi: jednotlivé časti je možné nahradiť väčšími, keď sa telo dieťaťa mení, čím sa znižujú náklady na výmenu kompletných protéz každých pár rokov.
Aby bolo učenie sa používať protézu jednoduchšie , boli vytvorené prostredia virtuálnej reality ako VREHAB, kde deti precvičujú pohyby bionickou rukou prostredníctvom hier ako „lezenie po budovách ako superhrdina“. Ako sa zlepšujú, získavajú body a terapeuti môžu na diaľku sledovať ich pokrok.
Prispôsobiteľná estetika tiež pomáha používateľovi cítiť sa vlastnícky : vďaka 3D tlači sú k dispozícii dizajny inšpirované superhrdinami, futuristické štýly alebo povrchové úpravy, ktoré zodpovedajú mládežníckej móde. Bionická ruka sa tak premieňa na viac než len zdravotnícku pomôcku a stáva sa aj prvkom identity.
Smerom k ovládaniu myšlienok a kontaktu „späť“ s mozgom
V blízkej budúcnosti plánujú popredné výskumné tímy skombinovať tieto inteligentné ruky s implantovanými neurónovými rozhraniami, aby sa protéza dala ovládať priamo mozgovou aktivitou, a nie len na signály povrchových svalov.
Cieľom je, aby bionická ruka reagovala takmer rovnako rýchlo a prirodzene ako biologická ruka, čím sa ďalej znižuje kognitívna záťaž. Ak používateľ uvažuje o zatvorení ruky, protéza by mala iniciovať pohyb bez toho, aby musel úmyselne sťahovať sval alebo vykonávať naučené vzory.
Zároveň prebieha práca na opätovnom prebudení hmatu do nervového systému používateľa: tlakové a priblížovacie senzory protézy by mohli vysielať kódované signály, ktoré sa premietajú do pocitov kontaktu, textúry alebo sily vnímaných v mozgu, čím sa približujú skutočnej senzorickej spätnej väzbe.
Výskumníci ako Jacob A. George zdôrazňujú, že táto oblasť výskumu je súčasťou širšej vízie zlepšenia kvality života ľudí s amputáciami integráciou inteligentných protéz, neurónových rozhraní a pokročilých senzorických systémov do súvislého ekosystému.
Hoci nás ešte čakajú roky vývoja a klinických skúšok , súčasné výsledky ukazujú, že je už možné, aby úlohy také jednoduché, ako je pitie z plastového pohára, prestali byť vyčerpávajúcou výzvou a postupne sa cítili rovnako prirodzene ako pred amputáciou.
Všetko nasvedčuje tomu, že bionické ruky s umelou inteligenciou prestanú byť sci-fi a stanú sa praktickými nástrojmi, ktoré znižujú duševnú námahu, obnovujú jemnú motoriku a rozširujú možnosti interakcie s prostredím, od bezpečného držania šálky alebo vajíčka až po objatie niekoho bez strachu, že mu ublížite.
