Телеграмм чат группы scrapy

Size: a a a

Scrapy

2021 January 14

Andrii

Уххх жесть :)

самое интересное, что если редактировать запрос и запросить список не из 10 а из 1000 страниц, по времени разница не особо заметна

источник

16:13пожаловаться #1

i in Scrapy

1. если можешь лучше получи данные не через пдф
2. если это текстовый пдф то все-равно лучше пункт 1. но либы в принципе тоже есть. но работа с пдф это всегда боль.
3. если не можешь - куча враппингов для ocr-либ под питон тебе в помощь

источник

16:14пожаловаться #2

Andrey Rahmatullin in Scrapy

мы тессеракт юзаем, вроде успешно

источник

16:15пожаловаться #3

i in Scrapy

CTRLCTRLV

Привет. Просветите новичка насчет что лучше в парсинге java или python?

подытоживая, в принципе, и то и то справится одинаково, просто в джаве кода тебе придется написать в 2-3 раза больше. А скорость будет одинаковая скорее всего, особенно в случае ocr над pdf, т.к. да, подключаются либы вида tesseract/opencv/abbyy.

источник

16:24пожаловаться #4

i in Scrapy

и еще я заметил, что странным образом либы эти под питоном проще обычно подключить, особенно какие-нибудь еще для нейронок в том числе или жестко юзающие GPU

источник

16:28пожаловаться #5

i in Scrapy

правда, это не мое личное наблюдение, это я на хабре плачь Ярославны читал про какие-то медицинские исследования с нейронками. И не совсем уверено что это так и есть.

источник

16:31пожаловаться #6

CTRLCTRLV in Scrapy

abbyy как подключить к пайтону?

источник

16:32пожаловаться #7

i in Scrapy

ну чувак, введи уже в гугль чонить типа abby ocr api python

источник

16:33пожаловаться #8

CTRLCTRLV in Scrapy

ну чувак, введи уже в гугль чонить типа abby ocr api python

да подумал может все проще, чем просить доступа на сайте разраба

да подумал может все проще, чем просить доступа на сайте разраба

куда проще?

источник

16:34пожаловаться #10

SoHard 🎄 in Scrapy

https://pypi.org/project/ABBYY/

PyPI

ABBYY

ABBYY Cloud OCR API Wrapper.

источник

16:34пожаловаться #11

CTRLCTRLV in Scrapy

SoHard 🎄

куда проще?

обычно abbyy все платно

источник

16:35пожаловаться #12

SoHard 🎄 in Scrapy

CTRLCTRLV

обычно abbyy все платно

конечно

источник

16:35пожаловаться #13

SoHard 🎄 in Scrapy

ты же их облако использовать будешь

источник

16:35пожаловаться #14

i in Scrapy

ну abbyy это платная контора, они хотят за это денежку, все-равно надо будет как-то да проходить аутентификацию в с их апи. если тебе надо бесплатно то есть тессеракт)

источник

16:35пожаловаться #15

МС

Михаил Синегубов... in Scrapy

tesseract же бесплатный...

источник

16:35пожаловаться #16

МС

Михаил Синегубов... in Scrapy

аббю для примера, просто, назвали

источник

16:36пожаловаться #17