На чому тільки не запускали Doom - калькуляторі, газонокосарці, всередині стандартних застосунків Windows і не тільки. Але за допомогою декількох генеративних нейромереж? Таке з легендарним шутером від id Software відбувається вперше.

Група з чотирьох колишніх і нинішніх співробітників Google Research і Google DeepMind представила GameNGen - ігровий рушій на основі нейронної моделі, здатний створювати комплексні інтерактивні сцени у високій якості.

GameNGen може інтерактивно симулювати геймплей Doom при 20 кадрах/с. Під час прогнозування наступного кадру показник пікового відношення сигналу до шуму досягає 29,4 (можна порівняти зі стисненням JPEG із втратами).

Навчання GameNGen відбувалося у два етапи: на першому ШІ-агент грав у Doom (сесії записувалися), а на другому дифузійна модель навчалася для створення наступного кадру, зумовленого послідовністю попередніх і вступними командами.

Іншими словами, GameNGen не генерує гру на ходу, а лише відтворює те, що вже бачив. Замість рендерингу нейронна модель створює послідовність кадрів, яка змінюється відповідно до дій гравця.

Поки що GameNGen страждає від низки обмежень на кшталт дуже короткої пам'яті (трохи більше ніж три секунди) і відмінностей у поведінці агента (під час навчання) і реального гравця.

Хоча наразі GameNGen далекий від ідеалу, його творці сподіваються, що в майбутньому ці напрацювання допоможуть зробити процес виробництва відеоігор менш дорогим і більш доступним.