Video: Trvalo to pár sekúnd. Umelá inteligencia naučila robota niečo, čo človek trénuje mesiace
Experiment so štvornohým robotom balansujúcim na fit lopte demonštruje omnoho viac, ako sa na prvý pohľad zdá. V skutočnosti totiž ukazuje silu umelej inteligencie, ako je napr. GPT-4, trénovať roboty na vykonávanie náročných úloh v reálnom svete omnoho efektívnejšie, ako ľudia. Na tému upozornil portál NewAtlas.
AI učí robotov
Inovatívny softvér s názvom DrEureka poháňaný silou veľkých jazykových modelov akým je aj GPT-4, prináša revolúcia v oblasti učenia robotov vykonávať zložité úlohy v reálnom svete. Základom projektu DrEureka je tzv. „sim-to-reality“ metóda, ktorá je akýmsi mostom medzi virtuálnou simuláciou a fyzickou demonštráciou.
Dokonalým príkladom je štvornohý roboticky „pes“, ktorý balansuje na fit lopte a postupne sa na jej vrchu posúva vpred. Hoci na prvý pohľad ide iba o akúsi zábavku inžinierov, v skutočnosti demonštruje pôsobivé možnosti tréningu riadeného umelou inteligenciou.
Jim Fan spolu s jeho tímom vyvinuli open-source softvér s názvom DrEureka, kde „Dr“ odkazuje na „domain randomization“ (randomizáciu domén), pri ktorej sa v simulovanom prostredí náhodne menia premenné, ako je trenie, hmotnosť, ťažisko a podobne.
Pod vedením „učiteľa“ v podobe LLM ako je ChatGPT, sa podarilo vytvoriť aj systém odmeňovania, kde 0 znamená neúspech a akékoľvek vyššie číslo reprezentuje úspech. Samozrejme, čím vyššie skóre, tým lepšie.
Ako prebiehal experiment?
Pri tomto experimente odborníci využili štvornohého robota Unitree Go1, ktorého cena sa pohybuje na úrovni zhruba 6000 dolárov. Počas simulácie v prostredí DrEureka sa robot odmeňoval za každý úspešný pokus a trestal za každý neúspešný pokus. Tento proces odmien umožnil robotovi experimentovať s rôznymi technikami a stratégiami a to bez rizika poškodenia.
Po tréningu vo virtuálnom svete nasledoval test v tom reálnom, kde zariadenie muselo preukázať svoje schopnosti nadobudnuté počas simulácie.
We trained a robot dog to balance and walk on top of a yoga ball purely in simulation, and then transfer zero-shot to the real world. No fine-tuning. Just works.
I’m excited to announce DrEureka, an LLM agent that writes code to train robot skills in simulation, and writes more… pic.twitter.com/kuG14LmSOh
— Jim Fan (@DrJimFan) May 3, 2024
Ako to dopadlo?
Ukázalo sa, že softvér DrEureka dokáže trénovať robotov lepšie ako ľudia, pričom takto trénovaný robot vykazoval až o 34 % rýchlejší posun v pred a 20 % nárast v prejdení vzdialenosti v rôznorodom teréne. Podľa odborníkov je tajomstvom úspechu DrEureka štýl učenia. Zatiaľ čo ľudia preferujú učenie sa po malých krokoch a snažia sa celý proces vysvetliť izolovane, GPT robotov dokázal naučiť všetko naraz. To je niečo, čo ľudia jednoducho nie sú schopní urobiť.
Podľa vedcov je DrEureka vôbec prvý softvér svojho druhu, pričom bez predchádzajúcich pokusov dokáže bez problémov prejsť vďaka metóde „sim-to-reality“ zo simulácie do reálneho sveta. Podľa vedcov by celý systém bolo možné výrazne zdokonaliť, ak by sa dalo prostredníctvom GPT poskytovať spätnú väzbu z reálneho sveta.
Inak povedané, ak by GPT mohol skutočne vidieť, čo sa stalo v reálnom svete (napr. pomocou videa) a nie len čítať záznamy o chybách, mohol by byť celý tréning ešte omnoho efektívnejší.
Čítajte viac z kategórie: Novinky
Ďakujeme, že čítaš Fontech. V prípade, že máš postreh alebo si našiel v článku chybu, napíš nám na redakcia@fontech.sk.
Teraz čítajú
Má 100 % hodnotenie. Nový horor ťa svojou desivou zápletkou doslova prilepí k obrazovke
Koniec batérií sa blíži. Vedci vyvíjajú technológie, ktoré efektívne uložia vyrobenú energiu
Záhadný kameň v Egypte nechal vedcov v nemom úžase. Odhalil tajomstvo ukryté 5000 rokov
Rusko a USA v pozore. Európska mocnosť nasadí stíhačky s desivými jadrovými zbraňami
Tisíce slovenských domácností si priplatia stovky eur za kúrenie. Nový zákon EÚ ťa nepoteší (PREHĽAD)
NAJČÍTANEJŠIE ZO STARTITUP
„Telo má vlastný systém na likvidáciu rakoviny,“ hovorí popredný lekár. Takto ho aktivuješ
Ako ísť do dôchodku v 35 rokoch: Investičný byt ti zabezpečí pasívny príjem
Obyčajné sople odhaľujú Alzheimera, Parkinsona či rakovinu. Ich farba prezrádza, čo sa deje v tvojom tele
Odstávka obľúbenej banky Slovákov: V jeden deň nepôjde internet banking, web ani aplikácia
Trump chystá zásadný odkaz Rusku. Veľké vyhlásenie má prísť v tento dátum
- 24 hod
- 48 hod
- 7 dní
-
- Televízory Slovákov úmyselne zhoršujú kvalitu obrazu. Je to špinavý marketing, takto ho opravíš
- V spoľahlivosti nemajú konkurenciu. Týchto 5+1 automobiliek má najlepšie motory (PREHĽAD)
- Benzín a nafta definitívne skončili. Čerpacie stanice ich nahradia „novými“ palivami, vieme kedy
- Najlepší akčný film roka po prechode na online trhá rekordy. Aj s dabingom sa dá pozrieť úplne zadarmo
- Brusel chce zarezať telekomunikačných operátorov. Proti novému zákonu sú všetky štáty EÚ
-
- V spoľahlivosti nemajú konkurenciu. Týchto 5+1 automobiliek má najlepšie motory (PREHĽAD)
- Televízory Slovákov úmyselne zhoršujú kvalitu obrazu. Je to špinavý marketing, takto ho opravíš
- Najlepší akčný film roka po prechode na online trhá rekordy. Aj s dabingom sa dá pozrieť úplne zadarmo
- Totálna nehoráznosť: Čínska vojnová loď použila laser proti lietadlu EÚ, Nemci reagujú tvrdo
- Brusel chce zarezať telekomunikačných operátorov. Proti novému zákonu sú všetky štáty EÚ
-
- Rusi ani netušili, čo im zlikvidovalo najdrahší systém. Ukrajina použila zbraň, akú svet ešte nevidel
- V Európe sa vylodili tisícky čínskych elektromobilov. Doviezla ich obrovská loď so šokujúcim pohonom a výkonom
- V spoľahlivosti nemajú konkurenciu. Týchto 5+1 automobiliek má najlepšie motory (PREHĽAD)
- Slovensko čaká najväčšia dopravná novela za roky. Nový zákon udrie na cestných pirátov aj e-kolobežky (PREHĽAD)
- Západ nič také nemá. „Spojenec“ Ruska nasadí laser na stíhačky budúcnosti, rakety po ňom „slepnú“
Trump mení stratégiu: Zbrane pre Ukrajinu pôjdu cez NATO, voči Rusku chystá zásadné vyhlásenie
Takto sa zneužíva home office. Odborári odhalili praktiky, ktoré sa ťa môžu týkať
Očkovanie neodmietali nevzdelaní. Nová štúdia odhalila iný faktor
Tržby TSMC prekonali očakávania. Čipy pre AI lámu rekordy
Slovensko má najdrahšie palivá v regióne. Analytici majú vysvetlenie
NAJČÍTANEJŠIE ZO STARTITUP