SB
Сейчас такие вопросы, по-моему, вообще не проблема. Stackoverflow в помощь
Size: a a a
2019 October 26
EA
Стоит ли брать для курсовой тему, смысл которого в парсинге? У кого м.б. печальный опыт был и лучше не стоит...
Парсить определенный сайт, или универсальный парсер?
Ки
Парсить определенный сайт, или универсальный парсер?
Да, универсальный
Ки
Ну или предположим что определенный, если это будет легче
EA
Каким образом парсить будет? По регуляркам или xPath?
Ки
Каким образом парсить будет? По регуляркам или xPath?
Через агилитипак, если я правильно понял вопрос
EA
Для курсовой это отличная тема. Самое главное актуальность будешь описывать когда, будет легко найти причину, почему это актуально
EA
Вообще Парсинг признали вполне законным средством за границей, хотя раньше были сложности с юридической точки зрения
EA
У меня просто проблема с проксями
Это наименьшая из проблем, поверь
Ки
Это наименьшая из проблем, поверь
Тогда попробую взять, осталось только что и для чего парсить понять
EA
Тогда попробую взять, осталось только что и для чего парсить понять
Обычно продавцы в онлайн магазах хотят знать сколько стоит у конкурента, поэтому любой продающий сайт, без динамической погрузки содержимого.
Ки
Обычно продавцы в онлайн магазах хотят знать сколько стоит у конкурента, поэтому любой продающий сайт, без динамической погрузки содержимого.
Е-каталог?
EA
Е-каталог?
Не, сложно по началу...
EA
Тогда попробую взять, осталось только что и для чего парсить понять
Вообще критерий любого парсера -> При изменении вёрстки или формата данных нужно быстро изменить параметры парсинга, допустим в файле конфига. Ну и соответственно исходный код не трогать
SB
Я знакомому вытаскивал товары и цены из каталога Икеи. Он доставкой занимается.
SB
Только эти сволочи постоянно код страниц меняют, переделывать приходится)))
MP
У меня просто проблема с проксями
Через ноду делал парсер. За пару дней все гуд было, можно настроить спокойно под эмуляцию поведения человека. Меня только через пару недель первый раз в бан кинули по ip. И то, потому что на ночь не хотел выключать)
Б[
Есть оч нужно запарится под эмуляцию человека, идеальное решение - selenium
S
мне нужно на сокет оправить такое сообщение 422["getBalance","\"e531217889425d0fe08cd5ff238a9fca\""]
как мне заекранировать обратный слэш?
как мне заекранировать обратный слэш?
SB
обратным слешем