Будет летом или осенью blizzcon

В рамках него люди и соревнуются

так там играют обычные игроки, или будут и ИИ?

я думал речь шла именно о соревновании ИИ

Обычные точно есть. Я не уверен, но там, вроде, и с участием ИИ есть какие-то матчи

Но ИИ пока не тащит

Китайцы хотели исследовать коммуникацию в мультиагентном RLе. И подвернулся под руку старкрафт комбат таск. Так уж вышло.  А для игры в старкрафт в целом, полагаю, обойдутся без multiagent. Но скорее всего будут отдельные сетки для добычи ресурсов, строительства, собственно микроконтроля в бою.

А почему китайцы хотели исследовать ?

По поводу рекуррентных сетей в этом подходе. Внутренний слой у актора и у критика выглядит как развернутая двухнаправленная rnn. Т.е. как сеть рекуррентная по агентам. А по времени здесь рекуррентности нет.

Наверное посмотрели, что фейсбук в этом преуспел, и решили догонять :)

Natural Value Approximators:
Learning when to Trust Past Estimates
http://papers.nips.cc/paper/6807-natural-value-approximators-learning-when-to-trust-past-estimates

Наконец-то! Я ждал подобной статьи уже давно. Обратили внимание на то, что функции ценности могут иметь резкие перепады при сколь угодно малом приращении.

Ребят, а здесь есть тот кто сможет пропатчить обертку https://github.com/deepmind/pysc2 для работы в Agent-vs-Agent режиме? Оригинальное API поддерживает такой режим https://github.com/Blizzard/s2client-api

что ты имеешь в виду под пропатчить?

ээ

написать патч?

не то чтобы можно было взять и за 5 минут это сделать)

@romovpa Кхм-кхм. Вообще-то тебе нужна не deepmind'овская поделка, а бесценный оригинал.
https://github.com/Blizzard/s2client-proto/blob/master/docs/protocol.md#play-two-bots-against-each-other

Как вы наверное слышали, Blizzard с DeepMind сделали Learning Environment для StarCraft 2. Он работает на основе внешнего API игрового клиента — s2client-api, написанного на C++ близзами. Python-обертка для экспериментов от DM — pysc2, поддерживает только режим игры, когда агент играет с человеком, либо со стандартным внутриигровым ботом, при том что С++ интерфейс позволяет делать agent-vs-agent.
Задача в том, чтобы поправить библиотеку, так чтобы ее можно было использовать в agent-vs-agent режиме.

Ничего патчить в общем-то и не надо. Просто поправь конфиг.

Речь не про код близов, ребята из дипмайнда сказали что плюсовый код поддерживает. И задача в том, чтобы поправить обертку pysc2. https://github.com/deepmind/pysc2/issues/24