d
Если из них можно более правильные эмбединги получить, то нафиг заморозку
Size: a a a
2021 August 25
d
А если мы порушим только знания о каких-нибудь синонимах, то нафиг мучать эмбединги
VA
Т.е. вопрос эксперимента? Там только, без заморозки обучение очень долгое.
Спасибо!
Спасибо!
d
Берты вроде на fp16 хорошо ускоряются
Сам не юзал, когда игрался, но, наверняка это архитектура под которую куча тюнинга работает.
Всякие torch.backends.cudnn.benchmark=True, torch.backends.cudnn.deterministic=False и т.п. в том числе
Ну и банальные, работающие для всех, не паддить в одном батче километровое предложение с предложением в одно слово
Сам не юзал, когда игрался, но, наверняка это архитектура под которую куча тюнинга работает.
Всякие torch.backends.cudnn.benchmark=True, torch.backends.cudnn.deterministic=False и т.п. в том числе
Ну и банальные, работающие для всех, не паддить в одном батче километровое предложение с предложением в одно слово
VA
Спасибо
KL
Товарищи, склоняю имена Арина, Алена с помощью пайморфи, он думает, что это мужские имена Арин и Ален, и соответственно склоняю.
Есть у кого-то идеи, как принудить его думать, что это женское имя?
Там вроде есть альтернативный разбор этих имен, как его активировать?
Есть у кого-то идеи, как принудить его думать, что это женское имя?
Там вроде есть альтернативный разбор этих имен, как его активировать?
A
🤔вроде в ОДС был хороший ответ. Не помог pymorphy?
KL
я там уточнение спросил, думал еще тут узнать попробовать
у меня альтернативный разбор что-то не помогает ( там какая-то чушь, я что-то не так делаю, может версия старая, не пойму пока :(
у меня альтернативный разбор что-то не помогает ( там какая-то чушь, я что-то не так делаю, может версия старая, не пойму пока :(
2021 August 26
KL
если кому-то интересно, как подсказали, pytrovich неплохо склоняет имена, но, увы, нужен доп параметр - пол. В некоторых случаях он может определять пол сам, но не во всех, увы.
SS
В OpenCorpora слов Арина и Алена нет, но есть Арин и Ален. Наверное, кто-то решил пошутить 🙂
Добавьте их туда сами руками и все у Вас получится.
В OpenCorpora, вообще, много странных имен. 🙂
Добавьте их туда сами руками и все у Вас получится.
В OpenCorpora, вообще, много странных имен. 🙂
KL
) понятно примерно. Да, много проблем еще с азиатскими (извините, если неправильно обозначил) именами, типа Маржан. Пайморфи вообще не хочет ее как женщину склонять, а вот Пайтрович уже лучше, но неправильно определяет пол сам, поэтому появляется доп параметр пола, что не очень удобно ...
Наверно, руками мы не сможем. придется еще попотеть
Наверно, руками мы не сможем. придется еще попотеть
SS
Маржан в OpenCorpora тоже нет …
SS
Там (в Петровиче) правило есть:
Попробуйте его либо убрать, либо уточнить существующие правила …
# Хачикян, Богдан, *
- gender: male
test: [ян, ан, йн]
mods: [а, у, а, ом, е]
Попробуйте его либо убрать, либо уточнить существующие правила …
АГ
день добрый , подскажите библиотеку для разбора текстовых команд - а то начал писать свой велосипед на регулярных выражениях
A
поподробнее чуть, что за команды?
а то все может быть очень сложно. начните с rasa
а то все может быть очень сложно. начните с rasa
A
Есть готовая модель для Relation Extraction для английского языка? Сходу не нашёл, в основном только статьи.
d
A
))) это я первым делом открыл. Я про модель спрашивал.
d
Я не работал с данной задачей, но вот один из репозитариев по ссылке со странички и вроде там есть модель:
https://github.com/thunlp/OpenNRE
https://github.com/thunlp/OpenNRE
