AB
почему) тупой скрипт который жмет на кнопку коннект всем без разбора, линкедин стопит конечно через определенный период, но мне хватило запустить 3 раза
Size: a a a
2020 June 08
A
Линкедина? Успехов
Дело в том , что виндовс селениум все ок работает, а в линуксе краш при клике на кнопку и ифрейм по другом грузит
AB
не сталкивался, я делал на убунте
AB
попробуй селенойд ваще развернуть
🎱
как добавлять новые значения в meta "на лету" ?
есть метод, к нему прилетает мета c items из другого метода, как я могу в мету добавить туда еще один элемент (item)?
пробую так
есть метод, к нему прилетает мета c items из другого метода, как я могу в мету добавить туда еще один элемент (item)?
пробую так
response.meta['item']['hash'] = md5_hash
через дебагер смотрю, новый элемент добавляется но когда через yield request передаю в другой метод, в нем уже нет добавленного элемента yield Request(image_url, callback=self.upload_image, meta={'item': response.meta['item']})A
А есть група по selenium?)
МС
response.meta['item']['hash'] = md5_hash
не надо так делать...
не надо так делать...
🎱
response.meta['item']['hash'] = md5_hash
не надо так делать...
не надо так делать...
а как правильно, подскажите ?
МС
просто забери в переменную item, измени, потом передай ее в мету
🎱
просто забери в переменную item, измени, потом передай ее в мету
это как? можно пример?
МС
my_item = respone.meta.get('item')
my_item['come_name'] = some_value
yield scrapy.Request(url, meta = {'item': my_item})
my_item['come_name'] = some_value
yield scrapy.Request(url, meta = {'item': my_item})
МС
как то так.
я пока оставлю "за кадром" рекомендацию не передавать данные через мету :)
я пока оставлю "за кадром" рекомендацию не передавать данные через мету :)
A
START IN 2020-06-08-14-17-28
Driver created successfully
Traceback (most recent call last):
File "script_linux.py", line 178, in <module>
pause()
File "script_linux.py", line 123, in pause
driver.get('https://www.linkedin.com/campaignmanager/login')
File "/home/user/.local/lib/python3.8/site-packages/selenium/webdriver/remote/webdriver.py", line 333, in get
self.execute(Command.GET, {'url': url})
File "/home/user/.local/lib/python3.8/site-packages/selenium/webdriver/remote/webdriver.py", line 321, in execute
self.error_handler.check_response(response)
File "/home/user/.local/lib/python3.8/site-packages/selenium/webdriver/remote/errorhandler.py", line 242, in check_response
raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.WebDriverException: Message: unknown error: session deleted because of page crash
from unknown error: cannot determine loading status
from tab crashed
(Session info: headless chrome=83.0.4103.97)
A
тупо креш и все(
A
а у винде все работает гладко
S
Andrii
START IN 2020-06-08-14-17-28
Driver created successfully
Traceback (most recent call last):
File "script_linux.py", line 178, in <module>
pause()
File "script_linux.py", line 123, in pause
driver.get('https://www.linkedin.com/campaignmanager/login')
File "/home/user/.local/lib/python3.8/site-packages/selenium/webdriver/remote/webdriver.py", line 333, in get
self.execute(Command.GET, {'url': url})
File "/home/user/.local/lib/python3.8/site-packages/selenium/webdriver/remote/webdriver.py", line 321, in execute
self.error_handler.check_response(response)
File "/home/user/.local/lib/python3.8/site-packages/selenium/webdriver/remote/errorhandler.py", line 242, in check_response
raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.WebDriverException: Message: unknown error: session deleted because of page crash
from unknown error: cannot determine loading status
from tab crashed
(Session info: headless chrome=83.0.4103.97)
а каким боком тут скрапи?