Video: Trvalo to pár sekúnd. Umelá inteligencia naučila robota niečo, čo človek trénuje mesiace
Experiment so štvornohým robotom balansujúcim na fit lopte demonštruje omnoho viac, ako sa na prvý pohľad zdá. V skutočnosti totiž ukazuje silu umelej inteligencie, ako je napr. GPT-4, trénovať roboty na vykonávanie náročných úloh v reálnom svete omnoho efektívnejšie, ako ľudia. Na tému upozornil portál NewAtlas.
AI učí robotov
Inovatívny softvér s názvom DrEureka poháňaný silou veľkých jazykových modelov akým je aj GPT-4, prináša revolúcia v oblasti učenia robotov vykonávať zložité úlohy v reálnom svete. Základom projektu DrEureka je tzv. „sim-to-reality“ metóda, ktorá je akýmsi mostom medzi virtuálnou simuláciou a fyzickou demonštráciou.
Dokonalým príkladom je štvornohý roboticky „pes“, ktorý balansuje na fit lopte a postupne sa na jej vrchu posúva vpred. Hoci na prvý pohľad ide iba o akúsi zábavku inžinierov, v skutočnosti demonštruje pôsobivé možnosti tréningu riadeného umelou inteligenciou.
Jim Fan spolu s jeho tímom vyvinuli open-source softvér s názvom DrEureka, kde „Dr“ odkazuje na „domain randomization“ (randomizáciu domén), pri ktorej sa v simulovanom prostredí náhodne menia premenné, ako je trenie, hmotnosť, ťažisko a podobne.
Pod vedením „učiteľa“ v podobe LLM ako je ChatGPT, sa podarilo vytvoriť aj systém odmeňovania, kde 0 znamená neúspech a akékoľvek vyššie číslo reprezentuje úspech. Samozrejme, čím vyššie skóre, tým lepšie.
Ako prebiehal experiment?
Pri tomto experimente odborníci využili štvornohého robota Unitree Go1, ktorého cena sa pohybuje na úrovni zhruba 6000 dolárov. Počas simulácie v prostredí DrEureka sa robot odmeňoval za každý úspešný pokus a trestal za každý neúspešný pokus. Tento proces odmien umožnil robotovi experimentovať s rôznymi technikami a stratégiami a to bez rizika poškodenia.
Po tréningu vo virtuálnom svete nasledoval test v tom reálnom, kde zariadenie muselo preukázať svoje schopnosti nadobudnuté počas simulácie.
We trained a robot dog to balance and walk on top of a yoga ball purely in simulation, and then transfer zero-shot to the real world. No fine-tuning. Just works.
I’m excited to announce DrEureka, an LLM agent that writes code to train robot skills in simulation, and writes more… pic.twitter.com/kuG14LmSOh
— Jim Fan (@DrJimFan) May 3, 2024
Ako to dopadlo?
Ukázalo sa, že softvér DrEureka dokáže trénovať robotov lepšie ako ľudia, pričom takto trénovaný robot vykazoval až o 34 % rýchlejší posun v pred a 20 % nárast v prejdení vzdialenosti v rôznorodom teréne. Podľa odborníkov je tajomstvom úspechu DrEureka štýl učenia. Zatiaľ čo ľudia preferujú učenie sa po malých krokoch a snažia sa celý proces vysvetliť izolovane, GPT robotov dokázal naučiť všetko naraz. To je niečo, čo ľudia jednoducho nie sú schopní urobiť.
Podľa vedcov je DrEureka vôbec prvý softvér svojho druhu, pričom bez predchádzajúcich pokusov dokáže bez problémov prejsť vďaka metóde „sim-to-reality“ zo simulácie do reálneho sveta. Podľa vedcov by celý systém bolo možné výrazne zdokonaliť, ak by sa dalo prostredníctvom GPT poskytovať spätnú väzbu z reálneho sveta.
Inak povedané, ak by GPT mohol skutočne vidieť, čo sa stalo v reálnom svete (napr. pomocou videa) a nie len čítať záznamy o chybách, mohol by byť celý tréning ešte omnoho efektívnejší.
Čítajte viac z kategórie: Novinky
Ďakujeme, že čítaš Fontech. V prípade, že máš postreh alebo si našiel v článku chybu, napíš nám na redakcia@fontech.sk.
Teraz čítajú
Veľký test AI nástrojov: Našiel som trik, ktorý ti v roku 2025 ušetrí až 4 hodiny denne
Od slovenských lesov až po najúspešnejšiu hororovú ságu. Tieto filmy ti v ďalších mesiacoch nedajú spávať
Ohnivé peklo a hrozivý skutočný príbeh. Známa služba odhalila novú filmovú bombu (TRAILER)
Naše byty a autá sú nimi zamorené. Vedci zistili, že dennodenne vdychujeme desaťtisíce neželaných častíc
Nikto netušil, že existuje. V našej galaxii sa skrýva obrovský oblak plný budúcich hviezd
NAJČÍTANEJŠIE ZO STARTITUP
Milované raňajky Slovákov pod paľbou vedcov: Zvyšujú riziko rakoviny hrubého čreva o 26 %
„Zarábam 25-tisíc mesačne vďaka biznisu, ktorý som vybudoval popri práci.“ (INŠPIRATÍVNY PRÍBEH)
Trump varuje Medvedeva: „Dávaj si pozor na jazyk, vstupuješ na nebezpečné územie“
Záhadný zápal pľúc na strednom Slovensku: Pôvod nákazy je neznámy, nemocnica zapojila RÚVZ
V Bratislave otvorili podnik so sicílskymi dezertmi za 65-tisíc eur: „Pracujeme 16 hodín denne“
- 24 hod
- 48 hod
- 7 dní
-
- Vojenskí experti prišli s víťazným plánom: Nad Ukrajinou bude lietať stovka európskych stíhačiek
- Žiadna pokuta, rovno ti zoberú vodičák. Tieto činnosti za volantom nikdy nerob (PREHĽAD)
- Zmeny v STK zaskočili Slovákov. Vysoké pokuty hrozia aj tým, ktorí auto už nemajú (PREHĽAD)
- Nemeckí tankisti bojujú proti ruským vojskám. Vojnový film ukazuje temnú stránku Wehrmachtu
- Z prehliadaného paliva urobia „novú ropu“. Arabi budujú svätý grál čistej energie za 270 miliárd dolárov
-
- Uniklo 90 miliárd litrov vody a nikto si to nevšimol. Vedci hovoria o nevídanej sile Zeme
- Vojenskí experti prišli s víťazným plánom: Nad Ukrajinou bude lietať stovka európskych stíhačiek
- Žiadna pokuta, rovno ti zoberú vodičák. Tieto činnosti za volantom nikdy nerob (PREHĽAD)
- Zmeny v STK zaskočili Slovákov. Vysoké pokuty hrozia aj tým, ktorí auto už nemajú (PREHĽAD)
- Nemeckí tankisti bojujú proti ruským vojskám. Vojnový film ukazuje temnú stránku Wehrmachtu
-
- Zmeny v STK zaskočili Slovákov. Vysoké pokuty hrozia aj tým, ktorí auto už nemajú (PREHĽAD)
- Vojenskí experti prišli s víťazným plánom: Nad Ukrajinou bude lietať stovka európskych stíhačiek
- Žiadna pokuta, rovno ti zoberú vodičák. Tieto činnosti za volantom nikdy nerob (PREHĽAD)
- Kolaps ľudskej spoločnosti príde nečakane skoro. Vedcov vystrašil počítač s realistickou predpoveďou
- Spojenec Západu vylepšil HIMARS desivou zbraňou. Trafila cieľ 480 km ďaleko s extrémnou presnosťou
Taraba ohlásil energetickú megainvestíciu. Slovenské mestá získajú milióny eur
Slováci kupujú jazdené autá, ako nikdy predtým. Priemerný vek a nájazd prudko rastie, dominuje jedna značka
Zubár odhalil šokujúce riziká populárneho spánkového triku. Riskuješ veľké nepríjemnosti
Slováci si neuvedomujú, že to môže vybuchnúť. Odborník varuje pred „elektronickým“ zlozvykom domácností
Domácnosti si priplatia až o 3 000 eur. Nová kalkulačka odhalila tvrdú realitu emisného výmyslu EÚ
NAJČÍTANEJŠIE ZO STARTITUP