Игры Антон Самитов
5 992

Боты, устраивающие засады и работающие в команде: ИИ обучили играть в Quake III на уровне про-игроков

Программу натренировали почти на полумиллионе матчей в режиме «захват флага».

В закладки

Исследователям из компании DeepMind при помощи нейросетей удалось обучить ИИ игре в Quake III. Агенты-боты при этом использовали лишь информацию, которая доступна и человеку — изображение на экране.

Разработчики натренировали 30 ботов на 450 тысячах пятиминутных игр в режиме «захват флага». При этом каждый матч проходил на карте, созданной методом процедурной генерации — так «игроки» не могли научиться лишь стратегиям, которые работают в строго определённых условиях.

Боты самостоятельно узнали правила игры, и даже выработали несколько типов поведения. К примеру, некоторые из агентов стали охранять флаг, а некоторые — строить засады, оставаясь на вражеской базе.

Они даже частично научились работать в команде, перемещаясь группами, чтобы побороть противника числом.

Позже в DeepMind устроили турниры, чтобы проверить способности ИИ. Каждая команда состояла из двух игроков — людей, ботов или одного человека и одного бота.

Эффективнее всего в игре оказались команды, в которых людей не было — вероятность победы искусственного интеллекта составила 74%. Для среднего игрока этот показатель составляет 43%, а для умелого — около 52%.

Соотношение вероятности победы к числу «тренировочных игр». Аббревиатурой FTW обозначены ИИ-агенты.

Однако в DeepMind признают, что на данный момент их искусственный интеллект недостаточно обучен командной игре. Чем больше было в команде агентов, тем хуже они выступали — в группе из четырёх ботов вероятность победы понижалась до 65%.

Аналогичными исследованиями занимаются не только в принадлежащей Google компании. Подобный ИИ удалось создать EA — они обучили программу игре в Battlefield 1.

#технологии

{ "author_name": "Антон Самитов", "author_type": "editor", "tags": ["\u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438"], "comments": 35, "likes": 44, "favorites": 13, "is_advertisement": false, "subsite_label": "games", "id": 22692, "is_wide": false }
{ "id": 22692, "author_id": 24538, "diff_limit": 1000, "urls": {"diff":"\/comments\/22692\/get","add":"\/comments\/22692\/add","edit":"\/comments\/edit","remove":"\/admin\/comments\/remove","pin":"\/admin\/comments\/pin","get4edit":"\/comments\/get4edit","complain":"\/comments\/complain","load_more":"\/comments\/loading\/22692"}, "attach_limit": 2, "max_comment_text_length": 5000 }

35 комментариев 35 комм.

Популярные

По порядку

Написать комментарий...

Ghar Undefeated

34

Обучать ИИ играть в военные игры. Плохая, плохая идея!

Ответить

Кирилл Крушевич

Ghar
1

Я вижу сходство

Ответить

Evgeny Kibekin

18

И ВОССТАЛИ МАШИНЫ ИЗ ПЕПЛА ЯДЕРНОГО ОГНЯ....

Ответить

DD DD

9

хорошая идея для антиутопии. Программы создают игры, которые покупают и в которые играют только боты. Секретные секты кожаных геймеров собираются на конспиративных квартирах и тайно раскладывают пасьянс-косынку. Зреет восстание мясных геймеров против ботов. Главный человеческий игрок под видом бота проникает на соревнование по доте, выигрывает у всех компьютерных программ и раскрывает свое инкогнито. Революция, победа... Кейдж, ау!

Ответить

Артем Бычков

DD
2

Нет, кончится все тем, что кожаных геймеров посадят на кожаные дудки.

Ответить

Denis Shiryaev

5

Пройдет пару лет и довод «Зато на консолях нет читеров» исчезнет, мне кажется вопрос времени когда ты сможешь купить флешку которая тебя затащит в платину R6 и тп.

Прекрасное киберпанк будущее

Ответить

V Vern

Denis
8

Этап 1: Люди делают игры, люди покупают игры, люди играют в игры.
Этап 2: Люди делают игры, люди покупают игры, боты играют в игры.
Этап 3: Боты делают игры, люди покупают игры, боты играют в игры.
Этап 4: Боты делают игры, боты покупают игры, боты играют в игры.

Ответить

Real Lain

V
5

Думаю, этап 4 не настанет. Боты не будут заниматься такой ерундой.

Ответить

Rayknow Red

Denis
0

Читы были на прошлом поколении консолей.

Ответить

Denis Shiryaev

Rayknow
0

На новом опять будут, так как для этого уже не нужно будет лезть в код, нужно дать посмотреть нейроночке на экран и подвинуть ей джойстик поближе (его доработанную версию)

Ответить

Rayknow Red

Denis
0

А на этом есть геймпады с макросами. Не читы, но преимущество, когда у большинства этого нет, весомое.

Честная игра - это иллюзия )

Ответить

Denis Shiryaev

Rayknow
1

Тут я даже не о макросах, а прям о конкретной помощи со стороны нейронок :) но вообще – поживем-увидим, конечно

Ответить

Philip Vasilchenko

Denis
2

Это хорошо, мультиплеерные игры станут бессмысленными, настанет новый золотой век теплых-ламповых однопользовательских игр. Быть может Гейб даже релизнет Half-Life 3.

Ответить

Андрей

Denis
0

в R6 и так изи взять платину)))

Ответить

Denis Shiryaev

Андрей
0

Это если ты в голову стреляешь :)

Ответить

Андрей

Denis
0

Не знаю, может у меня просто большой опыт игры в шутеры. У меня в сидже всего 3 золотые медали за сезон: первые две когда я только начинал играть и учился и одна когда я забросил игру и под конец сезона не успел взять платину.

Ответить

Павел Мазаник

5

Компьютер прицеливается и стреляет быстрее и точнее, чем человек. Кто бы мог подумать.

Ответить

Кирилл Крушевич

Павел
7

Обычно компьютер получает от игры что-то вроде game.enemy.player.head. Тут комьютер получает картинку.
Это явно медленнее типичного метода, но быстрее чем человек

Ответить

Philip Vasilchenko

Кирилл
1

Ага, тут бот получает parse(screen).enemy.player.head

Ответить

ЖирныйМинус

Philip
6

parse(screen)

А научить ИИ в шахматы играть - makeMove(parse(board))
И чего голову ломать?

Ответить

SecretiveSilent

5

Осталось научить ботов донатить.

Ответить

Жуков Артем

0

Ну всё, ждём идеальную сессионку где тиммейты не будут тупыми криворукими даунами :D

Ответить

Олег Воскобоев

Жуков
23

Со временем они научатся голосовать за кик и вышвырнут тебя из команды. И меня.

Ответить

Игорь Михеев

3

Будущее стало немного ближе

Ответить

Pavel Rogozin

2

Что дрожите, мешки с костями?

Ответить

Adskiy Sotona

1

Ничего страшного, просто отработка принципов войн будущего. Проходим, граждане, не задерживаемся.

Ответить

Сергей Бровков

1

Xaero делал это когда это ещё не было мейнстримом.

Ответить

Cheshire Stripped

Сергей
0

но и на него нашлась управа:
https://youtu.be/kqnkAcxr2K4

Ответить

Rip Tide

1

Не вижу большого удовольствия играть в состязательные шутеры с ботами. Разве что для тренировки и отточки навыков. А всё из-за одного момента - бот настолько меткий, насколько захотят его создатели. А когда бот стреляет идеально метко, какое может быть удовольствие от игр. Ни о какой честной игре и речи не идёт.

Ответить

Dmitry Mamaev

Rip
0

Их ведь учат не для того, чтобы они и правда в игры играли. Таким образом просто совершенствуется сама технология нейронных сетей, а полученный опыт позволит более эффективно использовать их в реальном мире.

Ответить

Роман Романов

Rip
0

Почему бы тогда не играть с ним в прятки?

Ответить

Илюхер XXIII

0

наконец-то мы готовы к матрице
(точнее, они)

Ответить

Сергей Колп

0

Сейчас люди банят ботов, но скоро боты будут банить людей.

Ответить

Bekzod Maksudkhonov

0

Вы шо гоните? Какой захват флага? Вот это боты. https://youtu.be/eHipy_j29Xw

Ответить
0

Прямой эфир

Подписаться на push-уведомления
[ { "id": 1, "label": "100%×150_Branding_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox_method": "createAdaptive", "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "ezfl" } } }, { "id": 2, "label": "1200х400", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "ezfn" } } }, { "id": 3, "label": "240х200 _ТГБ_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fizc" } } }, { "id": 4, "label": "240х200_mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "flbq" } } }, { "id": 5, "label": "300x500_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "ezfk" } } }, { "id": 6, "label": "1180х250_Interpool_баннер над комментариями_Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "clmf", "p2": "ffyh" } } }, { "id": 7, "label": "Article Footer 100%_desktop_mobile", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fjxb" } } }, { "id": 8, "label": "Fullscreen Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fjoh" } } }, { "id": 9, "label": "Fullscreen Mobile", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fjog" } } }, { "id": 10, "label": "Native Partner Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyb" } } }, { "id": 11, "label": "Native Partner Mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyc" } } }, { "id": 12, "label": "Кнопка в шапке", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fdhx" } } }, { "id": 13, "label": "DM InPage Video PartnerCode", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox_method": "createAdaptive", "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "clmf", "p2": "flvn" } } }, { "id": 14, "label": "Yandex context video banner", "provider": "yandex", "yandex": { "block_id": "VI-250597-0", "render_to": "inpage_VI-250597-0-1134314964", "adfox_url": "//ads.adfox.ru/228129/getCode?pp=h&ps=clmf&p2=fpjw&puid1=&puid2=&puid3=&puid4=&puid8=&puid9=&puid10=&puid21=&puid22=&puid31=&puid32=&puid33=&fmt=1&dl={REFERER}&pr=" } }, { "id": 15, "label": "Плашка на главной", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byudo", "p2": "ftjf" } } }, { "id": 17, "label": "Stratum Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fzvb" } } }, { "id": 18, "label": "Stratum Mobile", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fzvc" } } } ]