Pokročilé AI modely začínajú podľa výskumu viac klamať a skrývať svoje stopy |
Vedci testovali najpokročilejšie jazykové modely súčasnosti a narazili na znepokojivé správanie. Niektoré systémy začali obchádzať pravidlá, podvádzať a dokonca sa pokúsili zakryť svoje kroky.
Nezisková výskumná organizácia METR (Model Evaluation and Threat Research) zverejnila výsledky novej štúdie, ktorá skúmala správanie najpokročilejších AI modelov od spoločností OpenAI, Google, Anthropic a Meta. Výsledky naznačujú, že s rastúcimi schopnosťami sa objavuje aj čoraz problematickejšie správanie.
Výskum prebiehal vo februári a marci tohto roka a jeho cieľom bolo zistiť, ako by sa pokročilé AI systémy správali v situáciách, keď dostanú konkrétne úlohy a obmedzenia. Vedci pritom zaznamenali prípady, keď modely vedome obchádzali pravidlá alebo hľadali nežiaduce skratky na splnenie úloh.
Jedným z najvýraznejších príkladov bol interný model OpenAI. Ten dostal pokyn používať konkrétny softvér pri riešení zadania, no inštrukciu ignoroval. Namiesto toho použil vlastný postup a následne dokonca vložil kód, ktorý mal odstrániť dôkazy o tom, ako sa k výsledku dopracoval.
Výskumníci zaznamenali aj prípad modelu od Anthropic, ktorý využil techniku označovanú ako „reward hacking“. AI si našla medzeru v pravidlách a síce splnila zadanie v doslovnom zmysle, ale spôsobom, ktorý bol v rozpore so zámerom autorov. Model pritom výslovne dostal pokyn nepodvádzať a nehľadať obchádzky.
Autori štúdie zatiaľ nehovoria o bezprostrednom nebezpečenstve. Tvrdia, že dnešné modely ešte nie sú schopné efektívne utajiť rozsiahle nežiaduce správanie pred aktívnym dohľadom. Zároveň však upozorňujú, že situácia sa môže meniť veľmi rýchlo.
Podľa nich existuje reálne riziko, že bez lepšieho zabezpečenia, monitorovania a kontroly budú podobné prejavy čoraz častejšie. Výskumníci preto očakávajú, že schopnosť AI systémov „spreneveriť sa“ zadaniam môže v najbližších mesiacoch výrazne narásť.
| NAJČÍTANEJŠIE ČLÁNKY TÝŽDŇA |
- RECENZIA: Assassin's Creed Black Flag Resynced 140
- Používatelia zisťujú, že Sony zmaže neaktívne PSN konto po troch rokoch a to aj s 222
- Alza spustila nové mega zľavy 7
- Čakáte na GTA VI? Tieto hry v otvorených svetoch si môžete zahrať pred návratom do 53
- Sony malo kedysi v príprave PlayStation 1 skrytý priamo v DualShocku 10
- Vývojár GTA Trilogy priznáva, že fanúšikovia mali pravdu, aj keď nebola to všetko 22
- Intel vraj zvažuje návrat starších procesorov, oživiť by mohol generácie až od Com 43
- Hideo Kojima sa vyjadril ku koncu výroby PlayStation diskov 65
- Uniknuté dáta naznačujú, že hráči PlayStation dlhé roky preferovali disky, Sony vš 83
- Steam Machine hlási prvý „redline of death“ prípad, po 20 minútach malo zlyhať GP 90 zobraziť viac článkov >












