Video: Trvalo to pár sekúnd. Umelá inteligencia naučila robota niečo, čo človek trénuje mesiace
Experiment so štvornohým robotom balansujúcim na fit lopte demonštruje omnoho viac, ako sa na prvý pohľad zdá. V skutočnosti totiž ukazuje silu umelej inteligencie, ako je napr. GPT-4, trénovať roboty na vykonávanie náročných úloh v reálnom svete omnoho efektívnejšie, ako ľudia. Na tému upozornil portál NewAtlas.
AI učí robotov
Inovatívny softvér s názvom DrEureka poháňaný silou veľkých jazykových modelov akým je aj GPT-4, prináša revolúcia v oblasti učenia robotov vykonávať zložité úlohy v reálnom svete. Základom projektu DrEureka je tzv. „sim-to-reality“ metóda, ktorá je akýmsi mostom medzi virtuálnou simuláciou a fyzickou demonštráciou.
Dokonalým príkladom je štvornohý roboticky „pes“, ktorý balansuje na fit lopte a postupne sa na jej vrchu posúva vpred. Hoci na prvý pohľad ide iba o akúsi zábavku inžinierov, v skutočnosti demonštruje pôsobivé možnosti tréningu riadeného umelou inteligenciou.
Jim Fan spolu s jeho tímom vyvinuli open-source softvér s názvom DrEureka, kde „Dr“ odkazuje na „domain randomization“ (randomizáciu domén), pri ktorej sa v simulovanom prostredí náhodne menia premenné, ako je trenie, hmotnosť, ťažisko a podobne.
Pod vedením „učiteľa“ v podobe LLM ako je ChatGPT, sa podarilo vytvoriť aj systém odmeňovania, kde 0 znamená neúspech a akékoľvek vyššie číslo reprezentuje úspech. Samozrejme, čím vyššie skóre, tým lepšie.
Ako prebiehal experiment?
Pri tomto experimente odborníci využili štvornohého robota Unitree Go1, ktorého cena sa pohybuje na úrovni zhruba 6000 dolárov. Počas simulácie v prostredí DrEureka sa robot odmeňoval za každý úspešný pokus a trestal za každý neúspešný pokus. Tento proces odmien umožnil robotovi experimentovať s rôznymi technikami a stratégiami a to bez rizika poškodenia.
Po tréningu vo virtuálnom svete nasledoval test v tom reálnom, kde zariadenie muselo preukázať svoje schopnosti nadobudnuté počas simulácie.
We trained a robot dog to balance and walk on top of a yoga ball purely in simulation, and then transfer zero-shot to the real world. No fine-tuning. Just works.
I’m excited to announce DrEureka, an LLM agent that writes code to train robot skills in simulation, and writes more… pic.twitter.com/kuG14LmSOh
— Jim Fan (@DrJimFan) May 3, 2024
Ako to dopadlo?
Ukázalo sa, že softvér DrEureka dokáže trénovať robotov lepšie ako ľudia, pričom takto trénovaný robot vykazoval až o 34 % rýchlejší posun v pred a 20 % nárast v prejdení vzdialenosti v rôznorodom teréne. Podľa odborníkov je tajomstvom úspechu DrEureka štýl učenia. Zatiaľ čo ľudia preferujú učenie sa po malých krokoch a snažia sa celý proces vysvetliť izolovane, GPT robotov dokázal naučiť všetko naraz. To je niečo, čo ľudia jednoducho nie sú schopní urobiť.
Podľa vedcov je DrEureka vôbec prvý softvér svojho druhu, pričom bez predchádzajúcich pokusov dokáže bez problémov prejsť vďaka metóde „sim-to-reality“ zo simulácie do reálneho sveta. Podľa vedcov by celý systém bolo možné výrazne zdokonaliť, ak by sa dalo prostredníctvom GPT poskytovať spätnú väzbu z reálneho sveta.
Inak povedané, ak by GPT mohol skutočne vidieť, čo sa stalo v reálnom svete (napr. pomocou videa) a nie len čítať záznamy o chybách, mohol by byť celý tréning ešte omnoho efektívnejší.
Čítajte viac z kategórie: Novinky
Ďakujeme, že čítaš Fontech. V prípade, že máš postreh alebo si našiel v článku chybu, napíš nám na redakcia@fontech.sk.
Teraz čítajú
Záhadný kameň v Egypte nechal vedcov v nemom úžase. Odhalil tajomstvo ukryté 5000 rokov
Rusko a USA v pozore. Európska mocnosť nasadí stíhačky s desivými jadrovými zbraňami
Tisíce slovenských domácností si priplatia stovky eur za kúrenie. Nový zákon EÚ ťa nepoteší (PREHĽAD)
PlayStation prekvapuje. Takto má vyzerať brutálna samurajská akcia (VIDEO)
Zabijak pre neviditeľné hrozby. Elitné jednotky NATO nasadili hybridný „superdron“, aký si ešte nevidel
NAJČÍTANEJŠIE ZO STARTITUP
Dekan Lekárskej fakulty SZU skončil. Jeho meno sa spája s kauzou kolonoskopií
Ako ísť do dôchodku v 35 rokoch: Investičný byt ti zabezpečí pasívny príjem
Obľúbený grécky ostrov v plameňoch: Ministerstvo vydalo odporúčania pre Slovákov
Obyčajné sople odhaľujú Alzheimera, Parkinsona či rakovinu. Ich farba prezrádza, čo sa deje v tvojom tele
Pivo na Pohode: Zlatý Bažant predstavil vlastnú zónu aj menu na mieru, takto to vyzerá
- 24 hod
- 48 hod
- 7 dní
-
- Televízory Slovákov úmyselne zhoršujú kvalitu obrazu. Je to špinavý marketing, takto ho opravíš
- V spoľahlivosti nemajú konkurenciu. Týchto 5+1 automobiliek má najlepšie motory (PREHĽAD)
- Najlepší akčný film roka po prechode na online trhá rekordy. Aj s dabingom sa dá pozrieť úplne zadarmo
- Brusel chce zarezať telekomunikačných operátorov. Proti novému zákonu sú všetky štáty EÚ
- Benzín a nafta definitívne skončili. Čerpacie stanice ich nahradia „novými“ palivami, vieme kedy
-
- V spoľahlivosti nemajú konkurenciu. Týchto 5+1 automobiliek má najlepšie motory (PREHĽAD)
- Televízory Slovákov úmyselne zhoršujú kvalitu obrazu. Je to špinavý marketing, takto ho opravíš
- Najlepší akčný film roka po prechode na online trhá rekordy. Aj s dabingom sa dá pozrieť úplne zadarmo
- Totálna nehoráznosť: Čínska vojnová loď použila laser proti lietadlu EÚ, Nemci reagujú tvrdo
- Brusel chce zarezať telekomunikačných operátorov. Proti novému zákonu sú všetky štáty EÚ
-
- Rusi ani netušili, čo im zlikvidovalo najdrahší systém. Ukrajina použila zbraň, akú svet ešte nevidel
- V Európe sa vylodili tisícky čínskych elektromobilov. Doviezla ich obrovská loď so šokujúcim pohonom a výkonom
- V spoľahlivosti nemajú konkurenciu. Týchto 5+1 automobiliek má najlepšie motory (PREHĽAD)
- Slovensko čaká najväčšia dopravná novela za roky. Nový zákon udrie na cestných pirátov aj e-kolobežky (PREHĽAD)
- Západ nič také nemá. „Spojenec“ Ruska nasadí laser na stíhačky budúcnosti, rakety po ňom „slepnú“
Trump mení stratégiu: Zbrane pre Ukrajinu pôjdu cez NATO, voči Rusku chystá zásadné vyhlásenie
Takto sa zneužíva home office. Odborári odhalili praktiky, ktoré sa ťa môžu týkať
Očkovanie neodmietali nevzdelaní. Nová štúdia odhalila iný faktor
Tržby TSMC prekonali očakávania. Čipy pre AI lámu rekordy
Slovensko má najdrahšie palivá v regióne. Analytici majú vysvetlenie
NAJČÍTANEJŠIE ZO STARTITUP