i
Size: a a a
2020 July 05
i
Хотя пишут что лучше при этом использовать temporary, она де будет и в памяти в основном, и сможет сбрасываться на диск, когда соседнему процессу память понадобится: https://stackoverflow.com/questions/32833145/advantages-of-an-in-memory-database-in-sqlite
SS
А если один паук отправляет запросы сразу на два сайта (домена), то DOWNLOAD_DELAY для каждого в отдельности соблюдается?
A
А если один паук отправляет запросы сразу на два сайта (домена), то DOWNLOAD_DELAY для каждого в отдельности соблюдается?
если download_delay в settings то для всех пауков, а если в конкретной пауке указать то именно для него будет конкретное значение
A
А если один паук отправляет запросы сразу на два сайта (домена), то DOWNLOAD_DELAY для каждого в отдельности соблюдается?
тоесть ты для паука определяешь свойство, а не для сайтов, он и там и там будет ползать так само
Юd
Будет вылазить все равно - ты реально гугл решил перехитрить?
Ну видимо человек уже всю информацию Пентагона спарсил(не хакнул, а именно спарсил) раз за Гугл взялся
Юd
так если таймаут будет 30с, оно явно капчу не будет показывать
Юd
так если таймаут будет 30с, оно явно капчу не будет показывать
Тайм-аут никак не влияет на появление капчи
D
Тайм-аут никак не влияет на появление капчи
Дай человеку поупражняться! Где гугл, а где русские парсеры!!