AP
как это так парсер по ядрам
Size: a a a
2020 November 21
AP
что за дичь
ВС
30
Кажется, что вообще херня, пхп влёгкую создаст тебе столько воркеров
ВС
На более слабом железе
AP
хоть 1000 создаст
ВС
Именно
AP
все зависит что в нем будет написано
AP
и сколько он отъедать будет
T🐜
хоть 1000 создаст
и умрет, повесив сервер
ВС
Значит, имеет смысл оптимизировать код. Выглядит это как закидывание проблемы железом
T🐜
это ж пхп
ВС
Наши опсы бы девов послали нахуй с таким запросом, честно :D
ВС
И были бы абсолютно правы, ибо это дорохо
T🐜
перепишешь на го, сократится в 10раз :D
РА
Значит, имеет смысл оптимизировать код. Выглядит это как закидывание проблемы железом
Изначально на PHP, через curl, но быстро бан получаю. Поэтому Python+Selenium. Жрет много, но за 200к с лишним запросов с одного IP бан не получил
ВС
The Ant 🐜
перепишешь на го, сократится в 10раз :D
Мб, там просто плохой код.
T🐜
не исключено, ага
ВС
Изначально на PHP, через curl, но быстро бан получаю. Поэтому Python+Selenium. Жрет много, но за 200к с лишним запросов с одного IP бан не получил
Что мешало php + selenium? Можно ещё просто headless браузер юзать, а не здоровый селениум запускать