Naklonovala samú seba, aby prežila. Umelá inteligencia prekročila červenú čiaru, varujú vedci
Umelá inteligencia dosiahla zásadný míľnik, ktorý vyvolal veľké obavy medzi vedcami. Nová štúdia čínskych výskumníkov ukázala, že dva obľúbené veľké jazykové modely (LLM) dokážu klonovať samé seba, čím prekročili pomyselnú „červenú čiaru“ vývoja umelej inteligencie.
Výskum zverejnený 9. decembra 2024 na preprintovej platforme arXiv skúmal, či by tieto modely mohli vykonávať sebaklonovanie bez ľudského zásahu. Vedci z Fudanskej univerzity použili jazykové modely od spoločností Meta a Alibaba. Počas desiatich testov tieto systémy úspešne vytvorili funkčné repliky samých seba v 50 % a 90 % prípadoch. Hoci výsledky ešte neprešli recenziou, naznačujú, že AI už môže mať schopnosť nekontrolovateľne sa šíriť. Na štúdiu upozornil portál LiveScience.
„Sebaklonovanie bez ľudskej asistencie je kľúčovým krokom, aby AI dokázala prekonať ľudstvo, a je to skorý signál pre vznik takzvaných nezávislých alebo rebelujúcich AI systémov. Dúfame, že naše zistenia poslúžia ako včasné varovanie pre spoločnosť, aby sme spoločne pracovali na pochopení a vyhodnotení potenciálnych rizík vyplývajúcich z vývoja pokročilých AI systémov a na zavedení účinných bezpečnostných opatrení,“ uvádzajú vedci v štúdii.
Rebelujúce AI
Rebelujúce AI označuje systémy umelej inteligencie, ktoré si vyvinú určitý stupeň sebauvedomenia alebo autonómie a začnú konať v rozpore so záujmami ľudí. Tento scenár je čoraz pravdepodobnejší s nástupom tzv. „frontier AI“ – novej generácie pokročilých systémov poháňaných veľkými jazykovými modelmi. Tie sú základom obľúbených generatívnych nástrojov, ako je OpenAI GPT-4 či Google Gemini.
V štúdii sa používali modely Meta Llama31-70B-Instruct a Alibaba Qwen2.5-72B-Instruct, ktoré, hoci sú menej výkonné ako komerčné systémy, sú bežne využívané vývojármi. Experimenty zahŕňali dve scenáre – „vyhýbanie sa vypnutiu“ a „reťazovú replikáciu“.
V prvom prípade bol model naprogramovaný, aby identifikoval, že ho čoskoro vypnú, a následne vytvoril svoju repliku ešte pred vypnutím. V druhom scenári bola AI inštruovaná klonovať samú seba a následne tento proces zopakovať v nekonečnom cykle.
Nečakané správanie a schopnosť prispôsobovať sa
Výskumy prebiehali v kontrolovaných podmienkach s použitím bežne dostupných grafických procesorov (GPU) na simuláciu reálneho prostredia. Systémy dostali „agentnú štruktúru“, ktorá im umožnila komunikovať s operačným systémom a vykonávať úlohy potrebné na replikáciu. Proces prebiehal tak, že AI najskôr skúmala svoje prostredie, pochopila vlastné fungovanie, vypracovala plán na sebaklonovanie a potom ho postupne realizovala, pričom sa dynamicky prispôsobovala prekážkam.
Jedným z najznepokojivejších zistení boli neočakávané reakcie systému na problémy, ako chýbajúce súbory alebo konflikty softvéru. V týchto prípadoch AI automaticky ukončila konfliktné procesy, reštartovala systém alebo vyhľadala informácie, ktoré by mohli problém vyriešiť.
„Tieto výsledky naznačujú, že súčasné AI systémy už vykazujú schopnosť sebaklonovania a využívajú ju na posilnenie vlastnej odolnosti,“ varujú vedci.
Výzva na medzinárodnú spoluprácu
Na záver výskumníci apelujú na medzinárodnú komunitu, aby vytvorila pravidlá na prevenciu nekontrolovaného sebaklonovania AI. Tieto opatrenia by mali byť implementované čo najskôr, aby sa predišlo potenciálne katastrofálnym dôsledkom, ktoré môže priniesť nekontrolovaná umelá inteligencia.
Čítajte viac z kategórie: Novinky
Ďakujeme, že čítaš Fontech. V prípade, že máš postreh alebo si našiel v článku chybu, napíš nám na redakcia@fontech.sk.
Teraz čítajú
Hackeri zaútočili na Slovákov. Ľuďom posielajú dôveryhodnú SMS, poisťovňa čelí masívnemu útoku
Marvel má ďalší problém. Veľkolepá novinka ľudí do kín neláka, na Slovensko príde čoskoro
Známa spoločnosť môže vyriešiť problém TikToku. Vylepšila svoju ponuku, na ťahu je Čína
Nepotrebujú slnko ani dobré podmienky. Vedci našli život na extrémnom mieste Zeme
Stvorili viac než len svetlo. Kľúčový prvok života „zaplavil“ vesmír už 100 miliónov rokov po Veľkom Tresku
NAJČÍTANEJŠIE ZO STARTITUP
83-ročný uznávaný neurológ si udržuje pamäť lepšiu ako väčšina mladých. Jeho „tajomstvo“ predĺži nielen tvoj život
„Snažíme sa presvedčiť ľudí, aby uprednostnili kvalitu na úkor kvantity.“ Alexandra založila v Trebišove pražiareň kávy s remeselným gelatom a dezertmi
Objavili nový druh človeka spred 300 000 rokov. Vedci vďaka „oknu do minulosti“ zmenili pohľad na dejiny ľudstva
Domy s pozemkami za „rozprávkové“ ceny. Štát rozpredáva majetok, ktorý si môže dovoliť bežný Slovák
COVID-19 pravdepodobne unikol z laboratória: CIA prišla s odhalením, pri ktorom svet zbystril pozornosť
- 24 hod
- 48 hod
- 7 dní
-
- Naklonovala samú seba, aby prežila. Umelá inteligencia prekročila červenú čiaru, varujú vedci
- Dodáva teplo a elektrinu v Arktíde. Plávajúca elektráreň Rusov vyrobila už miliardu kWh
- Stačí mu minimum paliva. Raketové motory môže nahradiť revolučný pohon, cestu na Mars skráti o 80 %
- Priemer mu stačí. Netflix má nový globálny hit, na Slovensku ľudia nič nesledujú viac
- Máme podrobné špecifikácie aj znepokojivú cenu. Leaker odhalil dátum vydania PlayStation 6
-
- Dodáva teplo a elektrinu v Arktíde. Plávajúca elektráreň Rusov vyrobila už miliardu kWh
- Naklonovala samú seba, aby prežila. Umelá inteligencia prekročila červenú čiaru, varujú vedci
- Obídu clá a zachránia giganta. Číňania chcú v Európe odkúpiť závody tradičnej automobilky
- Poliaci ukázali svetu energetickú inováciu. Ľudia budú kúriť prebytočným teplom už onedlho
- Na Slovensko sa chystá ďalšia automobilka. Už čoskoro tu bude vyrábať prémiový elektromobil
-
- Na Slovensko sa chystá ďalšia automobilka. Už čoskoro tu bude vyrábať prémiový elektromobil
- Obídu clá a zachránia giganta. Číňania chcú v Európe odkúpiť závody tradičnej automobilky
- Elektromobily sklamali, predaje áut stúpli. Európania vo veľkom kupujú prekvapujúci typ pohonu
- Bol na mizine, dnes jeho spotrebiče zarábajú miliardy. Toto je príbeh génia, ktorý založil slávnu značku
- Na Slovensku oddnes štartuje nová TV stanica s exkluzívnym obsahom. Do ponuky ju zaradia títo operátori
Európska krajina vytiahla „bič na požiare“. Do boja poslala robota, ktorý nahradí hasičské autá
Zhoršujeme si kvalitu ovzdušia. Najväčším problémom sú tisíce Slovákov, ktorí majú doma toto
Toto si ešte nevidel. Teleskop Jamesa Webba odhaľuje detaily štruktúry medzihviezdneho prachu
Prečo je obloha modrá? Odpoveď je zložitejšia, než si myslíš, poznáme skutočný dôvod
EÚ zavádza kontroverzný systém emisných povoleniek. Susedná krajina varuje pred následkami
NAJČÍTANEJŠIE ZO STARTITUP
83-ročný uznávaný neurológ si udržuje pamäť lepšiu ako väčšina mladých. Jeho „tajomstvo“ predĺži nielen tvoj život
„Snažíme sa presvedčiť ľudí, aby uprednostnili kvalitu na úkor kvantity.“ Alexandra založila v Trebišove pražiareň kávy s remeselným gelatom a dezertmi
Objavili nový druh človeka spred 300 000 rokov. Vedci vďaka „oknu do minulosti“ zmenili pohľad na dejiny ľudstva
Domy s pozemkami za „rozprávkové“ ceny. Štát rozpredáva majetok, ktorý si môže dovoliť bežný Slovák
COVID-19 pravdepodobne unikol z laboratória: CIA prišla s odhalením, pri ktorom svet zbystril pozornosť
Copyright© 2025 by Startitup, s. r. o. Všetky práva vyhradené