E
Есть надежда, что новые модели bert2bert чем-то помогут. По крайней мере, обучить bert с нуля на нужном языке проще.
Size: a a a
2020 September 26
E
Bert2bert буквально на этой неделе в hugging face появился, я еще не пробовала даже
DK
Я сейчас пытаюст сделать fine tuning английского bart на баскском датасете для суммаризации. Получается не очень. Вместо абстрактной суммаризации модель просто выдает две-три фразы из того же текста, бывает, пару слов меняет. И все.
Баскский сет воу
Kaixo!
Kaixo!
E
Баскский сет воу
Kaixo!
Kaixo!
Aupa :)
е
Баскский сет воу
Kaixo!
Kaixo!
в чем польза использлвания такого маленького языка
е
эьо просто курсовая или есть применение?
E
Я работаю в баскской компании
е
Я работаю в баскской компании
вы для их культуры делаете аи продукт? круто. всегда думал мелкие языки не так важны, в мире всего 10крупных языков на которых выходит вся инфа. наверно развлекатель. чтото делаете для басков
E
Баски просто очень увлечены своим языком и много делают для него
E
Вот сейчас один из проектов, end-to-end машинный перевод голос-голос, баскский-испанский и обратно. Работает пока не очень, но сам факт!
IN
в чем польза использлвания такого маленького языка
Для моделирования малоресурсных языков разрабатывают подходы в академии, даже если они какие-нибудь полисинтетические и с ними традиционные методы вообще не работают
DK
вы для их культуры делаете аи продукт? круто. всегда думал мелкие языки не так важны, в мире всего 10крупных языков на которых выходит вся инфа. наверно развлекатель. чтото делаете для басков
"мелкие" языки значительно более важны, чем вы думаете, -- как минимум, для языкового разнообразия
E
Испания очень удобный пример малоресурсных языков, тут их несколько, и все используются в жизни
SP
У маленьких языков Европы ресурсов больше чем у русского.
SP
Университетские гранты + местный национализм = финансирование разработки.
BS
Bert2bert буквально на этой неделе в hugging face появился, я еще не пробовала даже
На инглише(((
BS
Радует хотя бы, что это свежая тема)
SP
Например разбор гэльский рукописиной записи - бог знает кому он может пригодится, а заказ такой был.
DK
У маленьких языков Европы ресурсов больше чем у русского.
смотря что считать ресурсами
скажем, синтаксически размеченного корпуса на миллион токенов пока ни у кого нет больш
скажем, синтаксически размеченного корпуса на миллион токенов пока ни у кого нет больш
SP
смотря что считать ресурсами
скажем, синтаксически размеченного корпуса на миллион токенов пока ни у кого нет больш
скажем, синтаксически размеченного корпуса на миллион токенов пока ни у кого нет больш
А, я только про деньги.