ПФ
только в продакшн-использовании
Size: a a a
2018 October 15
ПФ
а, ну с другой стороны если ты считаешь randomforest прямо в таком режиме — он считается долго, а значит оптимизируется со временем
GF
Типичный пример - подбор параметров функции: запустили функцию, посмотрели результат, поменяли параметры запустили опять
GF
Или гая возможность: grid search. Есть много наборы параметров. Запустить функцию много раз с каждым из наборов , чтобы посмотреть, какой набор даст лучший результат
GF
В каком случае функция оптимизируется?
ПФ
вот это вот и есть прогрев по сути — в рамках одного запуска запустить много раз одну функцию
ПФ
с разными параметами. И смотреть с какой скоростью она выполняется
ПФ
что такое много я сказать не могу, к сожалению, это надо прямо на примере смотреть
GF
То есть если я запущу код, интерпретатор сам будет анализировать, запуска ли я похожий раньше? Ведь запуск функции с другими параметрами - другой, хотя и похожий код
ПФ
нее, все оптимизации работают только в рамках одного запуска
ПФ
то есть тебе надо написать цикл, который будет вызывать твою функцию много раз. Сначала с одними параметрами, потом с другими
ПФ
И это ещё достаточно примитивный подход, потому что он не учитывает кучу нюансов, но так — лучше чем никак
GF
вот это вот и есть прогрев по сути — в рамках одного запуска запустить много раз одну функцию
То есть, только во втором случае?
ПФ
не понял вопроса
GF
Тогда другой вопрос. Grid search делается обычно с использованием распараллеливания. Что с оптимизацией в этом случае?
ПФ
Ну параллельность не должны никуда деваться, оптимизации на ней рботают так же, как и на любом другом куске кода
ПФ
Но как работает параллельность в FastR — это опять вопрос к Олегу. @shelajevoleg
OS
Gregory Finkelshteyn
Типичный пример - подбор параметров функции: запустили функцию, посмотрели результат, поменяли параметры запустили опять
Если в том же самом процессе то будет оптимизироваться ок
ПФ
а как вообще работает параллелизм в FastR? Как в джаве или с GIL?
OS
Хороший вопрос, скорее всего не очень хорошо, особенно если в Р нет нормальной модели памяти