K
MoneyExtractor
Size: a a a
2021 July 27
K
Внутри неё
AP
спасибо!
2021 July 28
T.
Hello everyone
Could you please suggest good books/articles/videos learn about text classification with deep learning in steps, along with python code explanation? (RNN/LSTM/GRU/CNN) & (All types of word embedding)
Could you please suggest good books/articles/videos learn about text classification with deep learning in steps, along with python code explanation? (RNN/LSTM/GRU/CNN) & (All types of word embedding)
N
Всем привет! У меня по результатам экспериментов с NeMo от nvidia базовые вопросы возникли, надеюсь кто-то сможет помочь с ответами. Пытаюсь дотренировать английскую модель расстановки пунктуации, которая в свою очередь дотренирована с distilbert. Дотренировываю на испанский язык. Пробовал брать tatoeba предложения, там у испанского вышло порядка 300К строк, при тренировке лосс уменьшается, а вальдейшен лосс не меняется. Если беру больший датасет, 3М строк, то памяти на gpu не хватает. Взял вот 1М строк, опять val loss за 15 эпох как был 0.2 - 0.25, так и остался. Что я делаю не так?
J
Всем привет 🙂
Подскажите пожалуйста, есть ли sentence-токенизаторы для русского (или похожие работы/статьи для др. языков), для разбиения в том числе сложносочиненных предложений?
Подскажите пожалуйста, есть ли sentence-токенизаторы для русского (или похожие работы/статьи для др. языков), для разбиения в том числе сложносочиненных предложений?
J
Необходимо для оценки тональности
DD
Разбивает текст на предложения хорошо пакет razdel.
Сложные предложения я разбивал на придаточные, применяя правила к синтаксическому дереву из natasha или spacy, в большинстве случаев тоже получалось норм.
Сложные предложения я разбивал на придаточные, применяя правила к синтаксическому дереву из natasha или spacy, в большинстве случаев тоже получалось норм.
J
Для обычных я беру nltk токенизатор
За подсказку к наташе и спайси спасибо!
За подсказку к наташе и спайси спасибо!
D
А по tesseract есть специалисты тут?)
——
Не определяет одиночные цифры
( танцы с бубнами не помогают тоже)
——
Не определяет одиночные цифры
( танцы с бубнами не помогают тоже)
A
а какие танцы с бубном? у tesseract посмотрите параметры page segmentation mode и допустимые символы
D
пробовал все параметры —psm osd —digits
не видит одиночную цифру и все
не видит одиночную цифру и все
VM
склей две картинки )
станет двойная
станет двойная
VM
или на картинке много цифр, просто одна обособленно стоит?
A
если можно, бросьте картинку
A
хотя может здесь подскажут, как-то более профильно
https://t.me/opencv_ru
https://t.me/opencv_ru
A
а высота такая - "священная корова"?.. почему бы не отквадратить.
да и тут mnist'ом вообще похоже можно пользоваться)
да и тут mnist'ом вообще похоже можно пользоваться)
VM
разбить на морфологические компоненты, взять самый центральный или самый квадратный
или "одновременно самый центральный и квадратный", придумав функцию от координат и размеров
или "одновременно самый центральный и квадратный", придумав функцию от координат и размеров