В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

R language and Statistical data analysis

1056 membersпожаловаться на группу
2020 May 22

m

monagatep in R language and Statistical data analysis
У меня, скорее, другая ситуация - в Linux распаралленивание хоть какое-то есть, где-то раза в полтора. А в Windows - нету. Я подозреваю, что в Linux работает makeForkCluster, который почти мгновенно копирует данные в кластер. А в винде функции fork() нету, и данные гоняются по сокету, поэтому снижается производительность.
источник
15:11пожаловаться#1

m

monagatep in R language and Statistical data analysis
Вообще, так и не понял, почему нельзя параллелить тупо внутри потоков...
источник
15:12пожаловаться#2

m

monagatep in R language and Statistical data analysis
Зачем отдельные процессы запускать...
источник
15:13пожаловаться#3

AM

Aleksei Morozov in R language and Statistical data analysis
Alexander Semenov
Ну раз уж об этом заговорили, а разве в ML сейчас что-то кроме линейных моделей и бустинга используют? Второй сам неплохо параллелится.
нейронки?
источник
15:13пожаловаться#4

AS

Alexander Semenov in R language and Statistical data analysis
В моей голове они отдельно находятся =)
источник
15:13пожаловаться#5

m

monagatep in R language and Statistical data analysis
Alexander Semenov
В моей голове они отдельно находятся =)
Отдельно от ML?
источник
15:14пожаловаться#6

AM

Aleksei Morozov in R language and Statistical data analysis
в моей голове это линейные модели с вывертом)
источник
15:14пожаловаться#7

AS

Alexander Semenov in R language and Statistical data analysis
Отдельно от анализа данных.
источник
15:14пожаловаться#8

m

monagatep in R language and Statistical data analysis
Alexander Semenov
Отдельно от анализа данных.
Ну, данные ими сложно анализировать. А прогнозировать -- вполне
источник
15:15пожаловаться#9

AS

Alexander Semenov in R language and Statistical data analysis
Aleksei Morozov
в моей голове это линейные модели с вывертом)
Ну по сути-то это так и есть. Но в такой формулировке это не продать.
источник
15:15пожаловаться#10

JS

Jury Sergeev in R language and Statistical data analysis
monagatep
Вообще, так и не понял, почему нельзя параллелить тупо внутри потоков...
можно, только надо не забывать что нет fork, и данные лучше не гонять в новый процесс, а что бы он сам их откуда-то забирал, будет быстрее в сумме
источник
15:15пожаловаться#11

m

monagatep in R language and Statistical data analysis
Jury Sergeev
можно, только надо не забывать что нет fork, и данные лучше не гонять в новый процесс, а что бы он сам их откуда-то забирал, будет быстрее в сумме
Есть какие-то пакеты, которые поддерживают распараллеливание на уровне потоков?
источник
15:16пожаловаться#12

JS

Jury Sergeev in R language and Statistical data analysis
но польза не всегда достижима, да и в каждом отдельном случае надо внимательно с этим разбираться... впрочем как и в SQL - не оптимизированный запрос будет долго работать
источник
15:16пожаловаться#13

m

monagatep in R language and Statistical data analysis
Или как тогда Ваше "можно" осуществить?
источник
15:16пожаловаться#14

m

monagatep in R language and Statistical data analysis
Ну я ж пишу, в Linux польза была.
источник
15:16пожаловаться#15

JS

Jury Sergeev in R language and Statistical data analysis
monagatep
Или как тогда Ваше "можно" осуществить?
ну Вы уже привели пример такого пакета
источник
15:17пожаловаться#16

m

monagatep in R language and Statistical data analysis
Хочу теперь в Windows повторить
источник
15:17пожаловаться#17

JS

Jury Sergeev in R language and Statistical data analysis
monagatep
Ну я ж пишу, в Linux польза была.
Вы уже объяснили - почему )
источник
15:17пожаловаться#18

JS

Jury Sergeev in R language and Statistical data analysis
monagatep
Хочу теперь в Windows повторить
для этого придется переделать кое-что, что именно - от Вашей ситуации зависит...
источник
15:17пожаловаться#19

m

monagatep in R language and Statistical data analysis
Jury Sergeev
ну Вы уже привели пример такого пакета
Так он не на уровне потоков работает, а создаёт процессы, и гоняет по сокету данные. А мне бы -- пакет, который параллелит на уровне потоков, ну или хотя бы через shared memory гоняет
источник
15:18пожаловаться#20