GameNGen AI engine vygeneroval Doom hru

GameNGen je prvý herný engine poháňaný výlučne neurónovým modelom ktorý umožňuje interakciu s komplexným prostredím v reálnom čase počas dlhých trajektórií vo vysokej kvalite. GameNGen dokáže interaktívne simulovať klasickú hru DOOM rýchlosťou viac ako 20 snímok za sekundu na jednom TPU. Predpoveď ďalšej snímky dosiahne PSNR 29,4, čo je porovnateľné so stratovou kompresiou JPEG. Ľudskí hodnotitelia sú len o niečo lepší ako náhodná šanca na rozlíšenie krátkych klipov hry od klipov zo simulácie. GameNGen je trénovaný v dvoch fázach: (1) agent RL sa naučí hrať hru a tréningy sa zaznamenávajú a (2) Difúzny model je trénovaný tak, aby vytvoril ďalší rám, podmienený postupnosťou minulých snímok a akcií. Augmentácie kondicionovania umožňujú stabilné autoregresívne generovanie počas dlhých trajektórií.

Dodávajú, že učenie pre niečo takéto je veľmi náročné a AI sa musí naučiť ako art a následne potrebuje analyzovať množstvo gameplayov od hráčov.