Телеграмм чат группы scrapy

2021 January 16

A

Andrii in Scrapy

$200 free monthly usage
For most of our users, the $200 monthly credit is enough to support their needs. You can also set daily quotas to protect against unexpected increases.

источник

15:51пожаловаться #1

МП

Максим Петров... in Scrapy

Ashgaz

И сразу спрошу: мне заказали парсинг яндекс карт и гугл карт. Периодический парсинг фирм в небольших городах. Может делал кто?
1. Во сколько такое оценить вообще можно?
2.Запасаться супер-гугл-проксями сразу?
3.У гугла нет открытого апи? Яндекс точно денег просит за апи
4.Только селениум, да? Или можно порачится с скрапи попробывать?

у гугла есть апи json можно по радиусу фильтрам парсить необходимые места

источник

15:51пожаловаться #2

A

Ashgaz in Scrapy

"There are 1,000 free Places API lookups per 24 hours" гугл выдал

источник

15:52пожаловаться #3

AR

Andrey Rahmatullin in Scrapy

Andrii

$200 free monthly usage
For most of our users, the $200 monthly credit is enough to support their needs. You can also set daily quotas to protect against unexpected increases.

ссылочку дай, я впервые такое слышу про апи карт

источник

15:52пожаловаться #4

A

Andrii in Scrapy

https://cloud.google.com/maps-platform/pricing

Google Cloud

Pricing & Plans | Google Maps Platform | Google Cloud

Review flexible pricing that scales to fit your needs and comes with $200 in free usage every month. After that, you pay only for what you use.

источник

15:52пожаловаться #5

AR

Andrey Rahmatullin in Scrapy

про клауд слышал, но вроде не в месяц

источник

15:52пожаловаться #6

AR

Andrey Rahmatullin in Scrapy

интересно

источник

15:52пожаловаться #7

AR

Andrey Rahmatullin in Scrapy

$7 за тыщу, 30 тыщ в месяц значит если ничего больше не брать

источник

15:53пожаловаться #8

A

Andrii in Scrapy

и сколько хоч аккаунтов :)

источник

15:53пожаловаться #9

AR

Andrey Rahmatullin in Scrapy

🤷‍♂️

источник

15:53пожаловаться #10

A

Andrii in Scrapy

ну ето уже такое

источник

15:53пожаловаться #11

A

Ashgaz in Scrapy

Осталось со страшным корпоративным монстром Яндекса разобраться. Тут всё в селениум и страдать с проксями?

источник

15:55пожаловаться #12

MM

Marat Mkhitaryan in Scrapy

Marat Mkhitaryan

Как получить координаты тайлов с яндекс карт для 1 города? Например https://core-jams-rdr-cache.maps.yandex.net/2.x/tiles?trf&l=trf,trfe&lang=ru&x=19801&y=10275&z=15&tm=1610692200&format=protobuf откуда берутся x и y?

https://gis-lab.info/forum/viewtopic.php?t=19763#p147223 тут объяснили. xyz стоят как на форуме прям

gis-lab.info

OpenLayers 3 + YandexMap - Форумы GIS-Lab.info

Геоинформационные системы (ГИС) и дистанционное зондирование Земли (ДЗЗ), новости, программное обеспечение, журналы, публикации, документация, форум

источник

20:15пожаловаться #13

S

S in Scrapy

Приветствую, подскажите вопрос по Selenium, я открываю новую вкладку через 'click()' как в дальнейшем работать с ней, т.е. искать элементы в ней?

источник

20:18пожаловаться #14

A

Andrii in Scrapy

S

Приветствую, подскажите вопрос по Selenium, я открываю новую вкладку через 'click()' как в дальнейшем работать с ней, т.е. искать элементы в ней?

переключиться на новою вкладку

источник

20:28пожаловаться #15

S

S in Scrapy

Andrii

переключиться на новою вкладку

Оо точно спасибо

источник

20:29пожаловаться #16

S

SoHard 🎄 in Scrapy

Andrii

переключиться на новою вкладку

sticker.webp

(20.56 Кб)

источник

20:30пожаловаться #17

MM

Marat Mkhitaryan in Scrapy

Marat Mkhitaryan

https://gis-lab.info/forum/viewtopic.php?t=19763#p147223 тут объяснили. xyz стоят как на форуме прям

gis-lab.info

OpenLayers 3 + YandexMap - Форумы GIS-Lab.info

Геоинформационные системы (ГИС) и дистанционное зондирование Земли (ДЗЗ), новости, программное обеспечение, журналы, публикации, документация, форум

Как можно прикрутить питон, чтобы на вход давал lat long и выходили эти x y z? Нужна же библиотека для преобразования lat long в x y z? Через какую питон библиотеку такое можно провернуть?

источник

20:37пожаловаться #18

i

i in Scrapy

пример как закрыть переключиться на вкладку(вкладки) открывшиеся по клику и позакрывать их:

источник

20:38пожаловаться #19

A

Andrii in Scrapy

Marat Mkhitaryan

Как можно прикрутить питон, чтобы на вход давал lat long и выходили эти x y z? Нужна же библиотека для преобразования lat long в x y z? Через какую питон библиотеку такое можно провернуть?

https://stackoverflow.com/questions/1185408/converting-from-longitude-latitude-to-cartesian-coordinates

Stack Overflow

Converting from longitude\latitude to Cartesian coordinates

I have some earth-centered coordinate points given as latitude and longitude (WGS-84).

How can i convert them to Cartesian coordinates (x,y,z) with the origin at the center of the earth?

источник

20:44пожаловаться #20