IP
Есть кстати нелохое видео:
https://www.youtube.com/watch?v=IaFnLlWVOm0
https://www.youtube.com/watch?v=IaFnLlWVOm0
о, хорошее видео, даже формулы с объяснениями, спасибо
Size: a a a
2019 May 14
M
Мы же сейчас обсуждаем саму систему, поэтому да, все просто, за удачное действие вводиться награда, за неудачное (медленное движение) штраф
M
На практике конечно уйма нюансов и подводных камней и корреляция может проявляться в тех местах, где уж точно никогда не ждал
IP
Мы же сейчас обсуждаем саму систему, поэтому да, все просто, за удачное действие вводиться награда, за неудачное (медленное движение) штраф
есть ситуация, когда важен тайминг, а не движение вперед. Например, когда надо обойти огненные крутилки
M
Например, можно выставить так, что двигаться быстрее не собирая монетки окажется выгоднее
SL
Yurii
Насколько это быстро происходит и затратно?
Самый большой и масштабный пример на текущий варик - это обучение автопилотов Тесла. Можете посмотреть то, как они это делают
M
есть ситуация, когда важен тайминг, а не движение вперед. Например, когда надо обойти огненные крутилки
На n раз сеть поймет, что нужно начинать двигаться после определенного состояния пикселей впереди и продолжит проходить игру
SL
Самый большой и масштабный пример на текущий варик - это обучение автопилотов Тесла. Можете посмотреть то, как они это делают
Прям супнр-онлайн там нет. Но тем не менее
M
Мы же сейчас обсуждаем саму систему, поэтому да, все просто, за удачное действие вводиться награда, за неудачное (медленное движение) штраф
это легко когда действий мало как в играх атари, а в доте много действий и для каждой награду проаисать сложно, а в реадьной жизни бесконечно действий, нужно чтоб он сам понимал, иначе нужно перепробовать все действия а это много вычислит ресурсов
M
Это уже задача масштабирования.
В реальной жизни и человек мало что знает - например механик ни космонавт
В реальной жизни и человек мало что знает - например механик ни космонавт
M
Я не знаю как выжить в джунглях
M
Просто системный подход - итеративно разбивать задачи на более простые.
Не обязательно, чтобы один ии решал все виды задач
Не обязательно, чтобы один ии решал все виды задач
IP
На n раз сеть поймет, что нужно начинать двигаться после определенного состояния пикселей впереди и продолжит проходить игру
по сути это перебор, если перебрать достаточно вариантов, то можно и с бинарным ответом (прошел/не прошел уровень) пройти получается
M
Я не знаю как выжить в джунглях
просто ты понимаешь если тебе нужно выбраться с острова, нужно построить плот, чтобы построить плот нужно срубить деревья и т.д. это тема из иерархического RL, пока для ИИ нерешенная проблема
M
Marklar
просто ты понимаешь если тебе нужно выбраться с острова, нужно построить плот, чтобы построить плот нужно срубить деревья и т.д. это тема из иерархического RL, пока для ИИ нерешенная проблема
Так это все равно твой опыт, кино, книги и прочие источники.
В повелителе мух написано, что делали бы дети (как и нынешние ии)
В повелителе мух написано, что делали бы дети (как и нынешние ии)
M
Так это все равно твой опыт, кино, книги и прочие источники.
В повелителе мух написано, что делали бы дети (как и нынешние ии)
В повелителе мух написано, что делали бы дети (как и нынешние ии)
это да опыт экономит много времени и сил) но человек фундаментально может разбивать на подцели, пусть и легкие задачи, думаю
M
Вообще без датасета размеченного в ml решаются задачи кластеризации, а это точно не ИИ.
А в нашем случае датасет это опыт.
Человек сейчас может разбивать задачи на подзадачи и строить логические цепочки.
А раньше люди и огня боялись
А в нашем случае датасет это опыт.
Человек сейчас может разбивать задачи на подзадачи и строить логические цепочки.
А раньше люди и огня боялись
IP
Marklar
просто ты понимаешь если тебе нужно выбраться с острова, нужно построить плот, чтобы построить плот нужно срубить деревья и т.д. это тема из иерархического RL, пока для ИИ нерешенная проблема
а если построить плот это неправильное решение, как в "Таинственном острове" например, потому что до ближайшее материка 1000 миль
M
И прошли сотни лет, поколений - т.е. итераций
M
А наши бабушки и дедушки не умеют пользоваться смартфонами, хотя колоссальный опыт за плечами, но не тот, что нужен