Dota 2 - ONLINE
Steam - ONLINE
SteamDB - ONLINE

Разработчики OpenAI поделились отчетом о работе

В воскресенье прошел матч команды людей против ботов OpenAI, в котором нейросеть дважды победила человеческий коллектив. Разработчики поделились возможностями своего проекта, а также рассказали о самых частых ошибках. Перевод основных моментов уже в нашем материале.

Прогнозирование

Одной из возможностей OpenAI Five является моментальная оценка шансов на победу после того или иного драфта. Выбор героя является весьма сложной частью Dota 2, так как отдельные герои взаимодействуют между собой по-разному.

Изображение показывает, как изменялись шансы на победу после появления того или иного героя.

В конце июня мы добавили отображение вероятности выигрыша в нашу нейросеть, чтобы видеть то, что прогнозирует OpenAI. Позже, когда мы рассматривали черновой вариант, стало понятно, что возможно использовать его для оценки вероятности победы при любом драфте: обратите внимание на промежуточные прогнозы на изображении выше. За одну неделю мы создали вариацию для каждого из 11 миллионов возможных матчей и написали алгоритм поиска, чтобы найти оптимальный пик OpenAI Five.

После первой игры драфт OpenAI Five предсказал вероятность выигрыша в 95%. Боты выиграли первую игру за 21 минуту и 37 секунд. Для второй игры драфт OpenAI предсказал вероятность выигрыша 76,2%. Ее команда искуственного интеллекта выиграла за 24 минуты и 53 секунды.

Драфт для третьей карты выбирали зрители. До начала матча нейросеть предсказала вероятность победы в размере 2,9%. Боты играли несмотря на плохие шансы, и в какой-то момент достигли 17% шанса одержать верх. Однако в конечном итоге они проиграли за 26 минут.

Обучение

Наш цикл разработки заключается в обучении каждой крупной версии ботов с нуля. Текущая нейросеть OpenAI содержит знания, которые были получены с 9 июня. Она имеет шесть системных обновлений, которые основаны на параметрах предыдущих версий.

Мы вложили много усилий в инструменты, которые позволяют сопоставлять старые параметры с новой сетевой архитектурой. 

Наблюдение за ботами

Мы можем получить представление о том, куда герой отправится в ближайшем будущем. В следующем видео выделенная область показывает, куда Sven Sven отправится в течение шести секунд.

Также мы можем прогнозировать количество ластхитов, добиваний и прочего.

Ошибки и нелогичное поведение являются неотъемлемой частью работы над нейросетью. Вот несколько примеров.

Что дальше?

Эти результаты дают уверенность в переходе к следующей ступени проекта. Мы хотим сыграть против команды профессионалов на The International в этом месяце. Детали матча будут объявлены сразу после того, как он будет подтвержден.

Другие интересные новости

Комментарии

Правила
На данный момент в комментариях у нас действуют следующие правила: https://dota2.ru/forum/rules/ (срок бана выдаётся на усмотрение модератора).
07 Авг 2018 в 15:11
2
Изи ТИ9 для ботов
07 Авг 2018 в 18:32
-1
И наступит новая эра для Навей
07 Авг 2018 в 15:12
0
Скоро у кожаных уже не будет шансов
07 Авг 2018 в 15:19
14
Можно и бота бустера сделать.
07 Авг 2018 в 15:52
12
возможно даже стримера на твиче
07 Авг 2018 в 16:22
0
который будет раскастовываться на тинкерочке
07 Авг 2018 в 16:38
0
Со всем набором возможностей, включая отдаление камеры
07 Авг 2018 в 16:51
2
с лазерочком и гавриками?
07 Авг 2018 в 17:54
1
И слабыми ребятулечками
07 Авг 2018 в 18:12
3
ля ля ля. нармальна нармальна нармальна
07 Авг 2018 в 15:23
0
c профессионатами сложно будет(
07 Авг 2018 в 15:29
0
Конери приди и Скайнета победи!
07 Авг 2018 в 15:32
0
Главное научить ботов зарабатывать и донатить Габенчику
07 Авг 2018 в 15:34
0
блин будущее подъехало прикольно
07 Авг 2018 в 17:00
5
а у тебя в гараже до сих пор москвич и плохие дороги
07 Авг 2018 в 21:24
0
как узнал про моего личного раба-москвича?
07 Авг 2018 в 15:43
0
я так и знал что мне габен подкручивает ботов в команду, они точно так же как в видео после того как сдохнут байбекаются
07 Авг 2018 в 15:43
0
боты умеют в 1 страту, их через пару игр любой норм стак будет бахать
07 Авг 2018 в 16:52
0
сейчас да, а через десять лет?
07 Авг 2018 в 16:58
10
через 10 лет в окопах будем сидеть
08 Авг 2018 в 02:17
0
А они будут тянок, сестер и мам чпокать еще, потому что будут альфачами.
07 Авг 2018 в 15:46
0
Исправьте профессионатов пожалуйста
07 Авг 2018 в 15:59
-1
Вообще-то, 11 миллионов 27 тысяч 16
07 Авг 2018 в 16:17
0
Ну короче чуть меньше, чем держит в голову Денди
07 Авг 2018 в 16:15
0
К тому моменту как допилят сколько нибудь адекватный движок Дота3 успеет умреть
07 Авг 2018 в 17:35
1
Прикиньте скоро роботы такие будут как т1000
07 Авг 2018 в 17:44
0
Никто из ботов никогда не заменит папаню
07 Авг 2018 в 18:15
0
Надо бы Даньке нейросеть в голову вставить и изи ти9.
07 Авг 2018 в 19:20
-5
Мне одному совершенно не интересно что там за ботов делают и как они играют да с кем?
08 Авг 2018 в 01:23
2
Нет, просто тем кому действительно не интересно в новость даже не заходят.
07 Авг 2018 в 19:55
0
Когда уже ботов научат разбивать шмотки и фидить? Столько времени разрабатывают, но до настоящих людей им ещё далеко
07 Авг 2018 в 20:02
0
Смотрим. После пика лича шанс около 50 процентов, чисто погрешность нейросети дает еще +0.2. И замечаем, что после пика шейкера шансы победы ботов возрастают на 13 процентов. Что там Величайший говорил про шейкера?
07 Авг 2018 в 22:29
0
...и настанет судный день
10 Авг 2018 в 18:14
0
Ну вот и спалили читы у ботов.
Как минимум играют с отдалением камеры, как минимум скрипты на покупку/продажу итемов.
Если кто не понял - покупка и продажа итемов это большое количество действий.
Бот выполняет их мгновенно, без задержек со стороны клиента.
Вспомните как вы покупаете шмотки в доте, особенно перед смертью - можно купить шмотку, услышать звук покупки, увидеть её в инвентаре, а после смерти обнаружить что ничего у тебя не купилось - ты умер и отняло бабки =)
Хотя промежуток между покупкой и смертью был намного больше чем задержка до сервера.

Лучшие авторы

За день
Всего мемов: 1
KDA: 80
80
За неделю
Всего мемов: 2
KDA: 160
319
За месяц
Всего мемов: 8
KDA: 117
933

Мемы

Dota 2 Факты [Дота 2]
-7

Новости

Железо

Форум

Матчи

Стримы

Видео

Есть предложение по улучшению сайта?