Pokročilé AI modely začínajú podľa výskumu viac klamať a skrývať svoje stopy |
Vedci testovali najpokročilejšie jazykové modely súčasnosti a narazili na znepokojivé správanie. Niektoré systémy začali obchádzať pravidlá, podvádzať a dokonca sa pokúsili zakryť svoje kroky.
Nezisková výskumná organizácia METR (Model Evaluation and Threat Research) zverejnila výsledky novej štúdie, ktorá skúmala správanie najpokročilejších AI modelov od spoločností OpenAI, Google, Anthropic a Meta. Výsledky naznačujú, že s rastúcimi schopnosťami sa objavuje aj čoraz problematickejšie správanie.
Výskum prebiehal vo februári a marci tohto roka a jeho cieľom bolo zistiť, ako by sa pokročilé AI systémy správali v situáciách, keď dostanú konkrétne úlohy a obmedzenia. Vedci pritom zaznamenali prípady, keď modely vedome obchádzali pravidlá alebo hľadali nežiaduce skratky na splnenie úloh.
Jedným z najvýraznejších príkladov bol interný model OpenAI. Ten dostal pokyn používať konkrétny softvér pri riešení zadania, no inštrukciu ignoroval. Namiesto toho použil vlastný postup a následne dokonca vložil kód, ktorý mal odstrániť dôkazy o tom, ako sa k výsledku dopracoval.
Výskumníci zaznamenali aj prípad modelu od Anthropic, ktorý využil techniku označovanú ako „reward hacking“. AI si našla medzeru v pravidlách a síce splnila zadanie v doslovnom zmysle, ale spôsobom, ktorý bol v rozpore so zámerom autorov. Model pritom výslovne dostal pokyn nepodvádzať a nehľadať obchádzky.
Autori štúdie zatiaľ nehovoria o bezprostrednom nebezpečenstve. Tvrdia, že dnešné modely ešte nie sú schopné efektívne utajiť rozsiahle nežiaduce správanie pred aktívnym dohľadom. Zároveň však upozorňujú, že situácia sa môže meniť veľmi rýchlo.
Podľa nich existuje reálne riziko, že bez lepšieho zabezpečenia, monitorovania a kontroly budú podobné prejavy čoraz častejšie. Výskumníci preto očakávajú, že schopnosť AI systémov „spreneveriť sa“ zadaniam môže v najbližších mesiacoch výrazne narásť.
| NAJČÍTANEJŠIE ČLÁNKY TÝŽDŇA |
- Amazon omylom zverejnil celý nový film Jasona Stathama pred kinopremiérou 27
- AliExpress stránka potichu vytvára odtlačok vášho počítača, prezradili ju Bluetoot 24
- Takmer všetci klienti známej hernej právničky už chcú v zmluvách zákaz generatívne 57
- RECENZIA: S.T.A.L.K.E.R. 2 - Cost of Hope 92
- Ďalší GTA VI leak ukazuje prelet lietadlom nad mestom 177
- Skupina stojaca za únikom GTA 6 vyhlásila vojnu vydavateľom. Má aj vlastný „manife 139
- Úniky GTA 6 pripravili Take-Two za jediný deň o takmer miliardu dolárov 125
- Aktuálny leak GTA 6 odhaľuje nové detaily. Rockstar zjavne posúva DNA série ďalej 60
- Takto má vyzerať mapa GTA VI, objavili sa aj leaknuté videá 107
- Nový leak z GTA VI ukazuje benzínovú pumpu 131 zobraziť viac článkov >















