Телеграмм чат группы theoreticalrl страница 152

Из наиболее реального для RL в геймдеве — это применять его для анимации, по крайней мере я знаю несколько студий, которые этим занимаются, но все это пока на уровне прототипов и ресерча все равно.

Если я не ошибаюсь, первая версия анимации на основе машинки была в последнем ассасинс криде

источник

10:21пожаловаться #4

Ivan Kapranov in RL reading group

Оно выбирало следующий фрейм костевой анимации из motion capture для перса

источник

10:23пожаловаться #5

Ivan Kapranov in RL reading group

То бишь склейкой кадров занималась

источник

10:23пожаловаться #6

Ivan Kapranov in RL reading group

В колде используют для тестирования мультиплеера

источник

10:26пожаловаться #7

Ivan Kapranov in RL reading group

Недавно доклад на GDC был

источник

10:26пожаловаться #8

Sergey Kolesnikov in RL reading group

Vlad Kurenkov

rllib пытается ещё быть фреймворк-агностик, туда и полиси из пайторча втыкаются

только работает хреново :kekeke:
и практически все алгоритмы не поддерживаются

источник

11:34пожаловаться #9

Constantine in RL reading group

гайз, кто-нибудь в канале для реальных роботов RL практикует? интересует какие есть прикладные задачи, и как вы это решаете

источник

11:38пожаловаться #10

Constantine in RL reading group

я пытаюсь пилить стартап, делаем акцент на ML и RL в частности для создания policy для навигации

источник

11:40пожаловаться #11

Constantine in RL reading group

кое-что получается, но по ощущениям все еще не стабильно, и требует много семплов

источник

11:41пожаловаться #12

Constantine in RL reading group

если кто сталкивался с реальным железом + RL, напишите плз

источник

11:41пожаловаться #13

Constantine in RL reading group

не pr-а ради, вот такие use-case'ы пробуем: https://youtu.be/N7dPhJcinGU?t=80

YouTube

nopilot – follow-me

It is extremely hard to design robust fully autonomous navigation even for simple cases. But why don’t we teach robots instead of hand-coding them?

With this POC we demonstrate that follow-me policy could be learned by the agent with only 30-min footage from a depth camera.

источник

11:46пожаловаться #14

Gleb Sterkin in RL reading group

А это с симулятором, или только на реальных данных?

источник

11:56пожаловаться #15

Constantine in RL reading group

Gleb Sterkin

А это с симулятором, или только на реальных данных?

конкретно это - только на реальных. но там imitation learning + (немного) rl'я.

источник

11:57пожаловаться #16

Artyom Sorokin in RL reading group

Ну, тогда есть целый набор статей из серии Sim2Real: учат используя кучу сэмплов на симуляторе + плюшки для лучшей генерализации. Только хз найдешь ли ты подходящий симулятор

источник

11:58пожаловаться #17

Constantine in RL reading group

Artyom Sorokin

мы используем сейчас Carla, AirSim. Но с sim2real это всегда проблема. Пока не получается стабильно переносить. Может неправильно готовлю.

источник

12:00пожаловаться #18

Constantine in RL reading group

забавно, когда я такие штуки обсуждаю в каналах по робототехнике, меня вообще не понимают. ML и robotics как будто два непересекающихся мира.

источник

12:01пожаловаться #19

Anton Pechenko in RL reading group

@lightcaster обучаемый симулятор не пробовали? Для самоездящих машинок это конечно довольно сложно, но для ходящих роботов есть вот такая статья https://arxiv.org/abs/1901.08652 неплохая

arXiv.org

Learning agile and dynamic motor skills for legged robots

Legged robots pose one of the greatest challenges in robotics. Dynamic and
agile maneuvers of animals cannot be imitated by existing methods that are
crafted by humans. A compelling alternative is...

источник

12:17пожаловаться #20