TM
Всем привет! модели русского языка для SpaCy достаточно для решения задачи классификации запроса к боту? Где то читал что недовольны поддержкой русского в SpaCy, но возможно у недовольных были более сложные и широкие задачи.
Size: a a a
2020 November 16
YB
Всем привет! модели русского языка для SpaCy достаточно для решения задачи классификации запроса к боту? Где то читал что недовольны поддержкой русского в SpaCy, но возможно у недовольных были более сложные и широкие задачи.
с классификацией запросов проблема в другом: там обычно очень мало тренировочных данных, и поэтому точность классификации низкая.
это не сильно будет зависеть от выбора spacy или чего-то ещё.
это не сильно будет зависеть от выбора spacy или чего-то ещё.
TM
с классификацией запросов проблема в другом: там обычно очень мало тренировочных данных, и поэтому точность классификации низкая.
это не сильно будет зависеть от выбора spacy или чего-то ещё.
это не сильно будет зависеть от выбора spacy или чего-то ещё.
тут немного примитивнее чем, наверное, вы подумали. планируется классифицировать на основе семантической близости типо Левенштейна токенов запроса с "Эталоном"
TM
думаете бедовый подход даже если учесть что классов не больше 10 а запросы не превышают длину одного простого предложения?
YB
тут немного примитивнее чем, наверное, вы подумали. планируется классифицировать на основе семантической близости типо Левенштейна токенов запроса с "Эталоном"
то есть вам нужны вектора? в spacy-ru 2.3 есть вектора для слов. контекстуальные вектора тоже можно получить, но это немного сложнее.
TM
то есть вам нужны вектора? в spacy-ru 2.3 есть вектора для слов. контекстуальные вектора тоже можно получить, но это немного сложнее.
в виде метода объекта Token?
NS
Добрый день! Посоветуйте пжлс хорошую библиотеку по аугментации текстов на русском. Спасиб.
Кстати, недавно было такое https://dyakonov.org/2020/11/09/text-augmentation/
без готового кода, но обзор хороший
без готового кода, но обзор хороший
YB
в виде метода объекта Token?
да. token.vector_norm должно работать. и similarity тоже.
TM
да. token.vector_norm должно работать. и similarity тоже.
👍
YB
да. token.vector_norm должно работать. и similarity тоже.
https://github.com/buriy/spacy-ru/releases/tag/v2.3_beta
попробуйте, скажете. там во всех 4 моделях вектора одинаковые.
попробуйте, скажете. там во всех 4 моделях вектора одинаковые.
TM
спасибо
TM
https://github.com/buriy/spacy-ru/releases/tag/v2.3_beta
попробуйте, скажете. там во всех 4 моделях вектора одинаковые.
попробуйте, скажете. там во всех 4 моделях вектора одинаковые.
да выглядит хорошо, будем пробовать
GB
Звонили из Geekbrain, предлагали вот такой курс Факультет искусственного интеллекта
135к рублей за 18 мес. ~$100/мес за 2 раза в неделю по 2 часа.
Нужно ваше мнение, стоит ли брать?
И если стоит, то есть ли у кого то знакомые в Geekbrain, чтоб дали хороший скидос?
135к рублей за 18 мес. ~$100/мес за 2 раза в неделю по 2 часа.
Нужно ваше мнение, стоит ли брать?
И если стоит, то есть ли у кого то знакомые в Geekbrain, чтоб дали хороший скидос?
NS
GB
Николай, ну что же ты раньше молчал 😉Круто, спасибо,прямо открыл Америку, серьёзно не знал всех этих мест.
NS
Да не за что
ТС
только туда еще пройти надо
YB
Звонили из Geekbrain, предлагали вот такой курс Факультет искусственного интеллекта
135к рублей за 18 мес. ~$100/мес за 2 раза в неделю по 2 часа.
Нужно ваше мнение, стоит ли брать?
И если стоит, то есть ли у кого то знакомые в Geekbrain, чтоб дали хороший скидос?
135к рублей за 18 мес. ~$100/мес за 2 раза в неделю по 2 часа.
Нужно ваше мнение, стоит ли брать?
И если стоит, то есть ли у кого то знакомые в Geekbrain, чтоб дали хороший скидос?
Курсы нынче -- очень прибыльное дело для их создателей. Но не факт, что для участников. Пробуйте...
TM
Звонили из Geekbrain, предлагали вот такой курс Факультет искусственного интеллекта
135к рублей за 18 мес. ~$100/мес за 2 раза в неделю по 2 часа.
Нужно ваше мнение, стоит ли брать?
И если стоит, то есть ли у кого то знакомые в Geekbrain, чтоб дали хороший скидос?
135к рублей за 18 мес. ~$100/мес за 2 раза в неделю по 2 часа.
Нужно ваше мнение, стоит ли брать?
И если стоит, то есть ли у кого то знакомые в Geekbrain, чтоб дали хороший скидос?
в geekbrain говорят так себе уровент образования. из otus ну и конечно да ШАД но там отбор
SD
Question to the group: does anybody know of any code that can generate all cases of Russian nouns? So basically the reverse of lemmatization: you give the code a noun in nominative singular; and the code returns all other grammatical cases of that noun