пайпы в mlr3 все же немного для другого, а вот drake - точно то, что нужно

https://books.ropensci.org/drake/index.html#short-version целая книжка про него

о, благодарю

согласен, drake самое оно

не хочется питон, я верю в Р)

- Из источников есть 3 разных бд, данные социальных сетей, CRM
- Из задач есть BI, типа надо делать отчетность для табло. Есть лайтовые задачи с банальными агрегациями, достаточно вьюх навертеть и скормить табло, бывают чуть масштбанее, типа посчитать кучу всего по 100 метрикам (значимости, дисперсии, графики и т.п)
- Еще есть задачи с банальным перекладыванием одних данных из одной таблички одной бд в другую бд по расписанию и там еще тоже какую то агрегацию применить
- Ну и есть задачки типа стучаться к API фейсбука и рекламные расходы забирать, их обрабатывать, складировать в одну базу одну, в другую другое

Оркестрация да, тут оч оч нужна(

mlr3 + plumber и в docker

Ага, хм. Посмотрю эту связку.

ну вариантов масса, уже озвучили несколько

атомарные (с точки зрения пользы от работы) скрипты на R, а их уже дергать или R/drake или системами ETL

Или кучка микросервисов и сервер очередей.

да, или так... сильно зависит от... )

в этом плане R вообще восхищает - там все есть, можно построить оч. быстро решение, а на тяжелые штуки переходить если нагрузка ну прямо настоящий highload

С логами в R тоже все хорошо. Хоть в файлы, хоть в бд писать можно. Потом их мониторить и анализировать.

в R только с нейронками похуже чем в питоне, а так - я пока не нашел для себя доводов на питон переходить... это если только будущий работы-датель заставит...

Коллеги, помогите пожалуйста. Есть два дата фрейма df1 и df2.  Необходимо из каждой строки df1 взять комбинацию значений определенных столбов, пускай это будет df1$а1 и df1$а2, найти соответствующую комбинацию в df2, пускай это будут df2$a1 и df2$a2, и вернуть в df1  значение df2$a3 из строки в которой было найдено совпадение с условием.  Можно это через джоин провернуть, но получается хтоническое чудовище. \

кусочек данных в .RDS или .csv - исходник - и желаемый результат - даст прирост вероятности помощи )

Я работаю с персональными данными, как минимум - так плохо делать, с такой инфой))

ну исскуственные то - на 5ть строчек сделать можно )

а иначе - как помочь?

я, например, из описания плохо понял, в чем проблема