R3
Делай на коллбеках
Чего блять?
Size: a a a
2020 May 21
БГ
асинкио не даст тебе словить блокировкой по щщам
P
В мультипроцессинге вроде можно данными кидаться, но уходит время на сереализацию/десереализацию
Ну по идее для этого пикл есть, или нет?
R3
Какие коллбеки, если у тебя в мультипроцессинге разные интерпретаторы
R3
Ну по идее для этого пикл есть, или нет?
Там маршал под капотом для этого дела, а пикл сделан поверх маршала
A
асинкио гораздо проще трединга в использовании
Тоже сомнительное утверждение
БГ
Тоже сомнительное утверждение
сколько минимум кода надо чтоб в 100 потоков загружать ссылки?
A
Сейчас скажу
БГ
как минимум очередь
R3
async def fuck(): ...
loop.run(fuck())
loop.run(fuck())
A
pool = concurrent.futures.thread.ThreadPoolExecutor(max_workers=DEFAULT_NUMBER_OF_THREADS)
pool.map(lambda x : requests.get(x), urls)R3
А хули собствнна
R3
А теперь тебя наебет пул.мап
R3
Ибо по очереди ска🌚
БГ
pool = concurrent.futures.thread.ThreadPoolExecutor(max_workers=DEFAULT_NUMBER_OF_THREADS)
pool.map(lambda x : requests.get(x), urls)лол, GIL делает блокировку
A
Блять вы что там бенчмарки чтоли пишете
A
Говорю же сравнивал с aiohttp одно и то же
R3
Мы биоробот, просто никто не знает об этом
БГ
Мы биоробот, просто никто не знает об этом
не пали, чо ты