Коллеги, вопрос по lambda архитектуре:
для Real-Time и для батчей данные должны быть одинаковые по форме и структуре, или в RT можно пустить raw, а в батч - некий агрегат этих данных?

Хотите освоить продвинутые приемы Машинного обучения?

Начните получать новые знания уже 25 ноября с демо-занятия «Кластеризация временных рядов». Вместе с Дмитрием Сергеевым вы познакомитесь с интереснейшей задачей, которую можно прикрутить к временным рядам. Вы выясните, можно ли найти похожие друг на друга по динамике финансовые активы на бирже и заберёте с собой код, позволяющий сделать это с нуля.
Демо-занятие входит в онлайн-курс «Machine Learning. Advanced». Программа рассчитана на специалистов с опытом в Data Science. ДЛя регистрации на занятие пройдите вступительный тест  https://otus.pw/iRP1/

че за бред?

Видимо там матрицы пересножаются

Написано ж что дим1!=дим0

так размерности то одинаковые у трейна и теста

Читай внимательно до просветления

у меня борода до пояса выростет

Пока поймёшь что 2!=1080334?

Борода нет, но коэффициент внимательности поднимется

=)

типа в обратном порядке взять столбцы из теста?

Ты доки читал?

это?

Ну допустим это

так как в примерах с документации ничего путнего не нашел, то полез в гугл. https://stackoverflow.com/questions/38957178/how-to-predict-new-values-using-statsmodels-formula-api-python
вроде как я сделал всё верно

+ я так раньше делал для простых примеров, вроде всё работало

правда, я игрек не брал, но если я его дропаю ничего не меняется.
ValueError: shapes (1080334,2) and (1080334,1) not aligned: 2 (dim 1) != 1080334 (dim 0)

Взял транспонированный датафрейм на тест. Словил MemoryError: Unable to allocate 8.49 TiB for an array with shape (1080334, 1080334) and data type float64

Ну ему кажется надо n^2 места