AW
Товарищи у кого то было что pymorphy2 не видит на коллабе свои словари?
Size: a a a
2020 September 23
AW
Вот такая штука
YS
Привет всем, я новичок в теме NLP
Подскажите пожалуйста, пишу rules по работе с адресами на украиском языке, рулы странным образом вообще не работают, подскажите пожалуйста, куда тут можно копать чтобы разобраться?
Подскажите пожалуйста, пишу rules по работе с адресами на украиском языке, рулы странным образом вообще не работают, подскажите пожалуйста, куда тут можно копать чтобы разобраться?
YS
украинский поддерживает libpostal
YS
М
Товарищи у кого то было что pymorphy2 не видит на коллабе свои словари?
Да, поставила предыдущую версию пайморфи
YB
Товарищи у кого то было что pymorphy2 не видит на коллабе свои словари?
Все ругаются. Поломалось. Надо бы опять найти Мишу Коробова, автора pymorphy, что появился, выкатил апдейт, который ломается, и пока что не отвечает на issue.
А лучше -- если кто-нибудь разберётся и пришлет патч.
https://github.com/kmike/pymorphy2/issues/131
А лучше -- если кто-нибудь разберётся и пришлет патч.
https://github.com/kmike/pymorphy2/issues/131
AW
Я в ручную давал ему директорию он просто рипнулся
2020 September 24
IM
ГС
Есть что-то полезное для правки ошибок в тексте на русском?
SZ
Подскажите какой инструмент используется для того, чтобы расшифровывать сокращения в тексте? Я правильно понимаю, что это не в сторону спел чекера надо смотреть? Или готового инструмента нет и надо с нуля свой писать?
T
Есть что-то полезное для правки ошибок в тексте на русском?
jamspell?
V
Подскажите какой инструмент используется для того, чтобы расшифровывать сокращения в тексте? Я правильно понимаю, что это не в сторону спел чекера надо смотреть? Или готового инструмента нет и надо с нуля свой писать?
https://github.com/bakwc/JamSpell/issues/69
Мы у себя используем и от пары человек тоже слышал, что модель в целом хорошая получилась :)
Мы у себя используем и от пары человек тоже слышал, что модель в целом хорошая получилась :)
V
Главное если будете обучать его на своих данных (это довольно легко), не используйте датасет общим весом больше 1Гб — об этом как-то раньше @yuri_baburov упоминал
YB
Не, сокращения он же не умеет расшифровывать...
SZ
JamSpell сейчас у меня как раз на первом месте из более менее пригодного... Вот уже даже начал готовить датасет
SZ
Но не уверен, по этому спросил)
FF
Может как-то на более-менее простых эвристиках построить? В том плане, что сокращения обычно являются подстроки, которые используются в том же контексте, что и оригиналы сокращений.
YB
Для сокращений пишут словари сокращений, хотя бывают конечно моменты неоднозначности.
SZ
Для сокращений пишут словари сокращений, хотя бывают конечно моменты неоднозначности.
То есть есть варианты кроме регулярных выражений как я понял?)