🕵
У них была возможность указать свой фикс-лист, как-раз для таких случаев, насколько я знаю.
Спасибо, гляну сейчас. Я просто использую обертку на Python, она не дает никаких особых настроек.
Size: a a a
2017 May 19
🕵
pymystem3, которая
|
Привет. Для проверки длины строк есть встроенный лейбл: https://github.com/bureaucratic-labs/yargy/blob/master/yargy/labels.py#L86
Можно написать такой же, но для чисел (у них
Можно написать такой же, но для чисел (у них
token.forms[0]['normal_form'] - текстовое представление)
А можно ли как-то сделать два условия для токена: gram(NUM) и length_eq(4)?
🕵
А в python-mystem снятие омонимии возможно тоже, да?
DV
А можно ли как-то сделать два условия для токена: gram(NUM) и length_eq(4)?
Да, нужно просто передать список лейблов в правилах, как тут: https://github.com/bureaucratic-labs/natasha/blob/master/natasha/grammars/person/grammars.py#L45
Если все лейблы проходят - токен сматчится.
Если все лейблы проходят - токен сматчится.
DV
А в python-mystem снятие омонимии возможно тоже, да?
Нет, в
libmystem.so от яндекса, которую использует библиотека эту фичу вырезали.DV
Т.е. снятие морфологической неоднозначности есть только в бинарнике
mystem🕵
Нет, в
libmystem.so от яндекса, которую использует библиотека эту фичу вырезали.😢
🕵
Прямо беда с этим NLP, ни одного готового решения нет. Приходится какого-то франкенштейна делать.
S
обколются этими вашими nlp
DV
Готовые решения есть, просто нужно деньги занести :)
RCO, ABBYY, PullEnti, вот эти ребята.
RCO, ABBYY, PullEnti, вот эти ребята.
🕵
Да, этот список я уже поизучал )
🕵
Еще забавный результат выдал сегодня Mystem:
Это ошибка орфографическая, конечно. Но что за
{'text': 'клеют', 'analysis': [{'lex': 'клеть', 'qual': 'bastard', 'gr': 'V,сов,нп=непрош,мн,изъяв,3-л'}]}Это ошибка орфографическая, конечно. Но что за
'qual': 'bastard'? )🕵
А, нашел в примерах. )
2017 June 14
EV
Привет. Наташа использует только правила или ещё и машинное обучение?
DV
Привет. Прямо сейчас - частично. Например, морфанализатор умеет предсказывать неизвестные слова (там используются статистические методы)
В дальнейшем, я хочу использовать, например, статистический токенизатор - это тоже машинное обучение.
В дальнейшем, я хочу использовать, например, статистический токенизатор - это тоже машинное обучение.
EV
Пишу обзор инструментов для вкр. Решил описать её.
2017 June 15
🕵
Где можно будет почитать обзор? :)
2017 June 18
DB
@dveselov, привет! Выражаю всяческое уважение за проделанную работу. Скажи, пожалуйста, как бы ты рекомендовал подходить добыче именнованных сущностей с помощью Наташи в большом тестке, например, >5000 знаков?