A
Как вариант, обучить классификатор. Датасет для обучения можно подобрать, наверное, тут https://github.com/natasha/corus
Size: a a a
2021 January 20
МП
Привет, подскажите чем лучше определить жанр новости? (политика, спорт, наука, ...)
Тоже задавался этим вопросом
Есть конечно на ленте метки
Но их мало
Есть конечно на ленте метки
Но их мало
A
там несколько новостных датасетов
DD
Привет, подскажите чем лучше определить жанр новости? (политика, спорт, наука, ...)
Вроде бы в корпусе taiga много протестированных новостей разных сми
A
возможно, получиться собрать нужные тематики
YS
Коллеги, всем привет! Скажите встречал ли кто-нибудь набор русской открытой речи со звуками поезда?
Eg
Yaroslav Seliverstov
Коллеги, всем привет! Скажите встречал ли кто-нибудь набор русской открытой речи со звуками поезда?
вспоминается, как готовила такой текст в устный подкорпус НКРЯ в студенческие годы) какой-то ужас) извини за оффтопик, думаю, немного такого
YS
Я вот тоже голову ломаю, не могу найти ничего такого)
GF
Yaroslav Seliverstov
Коллеги, всем привет! Скажите встречал ли кто-нибудь набор русской открытой речи со звуками поезда?
почему бы не смешать самому что угодно со звуками поезда?
GF
или просто сходить поговорить на станцию)
YS
да так сейчас и делаем) просто вдруг уже есть что-то подобое)
PV
Товарищи знатоки, обращаюсь вот с чем. Были ли прецеденты совмещения gpt-подобного чего-либо с поисковым движком? Интересует делали ли подобное совмещение (в принципе) гиганты индустрии, или кто-либо в частном порядке. Может кому-то приходила идея..
PV
Речь о получении более продвинутого поиска по разнородно накопленным вещам, типа сайтов, текстовых документов (включая книги в пдф), и прочего прочего
PV
Если кто-то из вас уже задумывался, то может знаете насколько задача сложна по доведению до ума, т.е. пояснении машине какая поисковая выдача ложна, а какая точна, и т.д.
PV
Ведь если так задуматься, то можно подключить поисковый движок подобного класса к тем же открытым чатам профильных специалистов (например в тг), набирая тем самым непроверенный, но справочник знаний
ni
YB
Товарищи знатоки, обращаюсь вот с чем. Были ли прецеденты совмещения gpt-подобного чего-либо с поисковым движком? Интересует делали ли подобное совмещение (в принципе) гиганты индустрии, или кто-либо в частном порядке. Может кому-то приходила идея..
да. гуглите BERT for google search
(GPT — генератор текста, а BERT — хорошие эмбеддинги).
или интересует именно генерация текста? тогда мне непонятна задача
(GPT — генератор текста, а BERT — хорошие эмбеддинги).
или интересует именно генерация текста? тогда мне непонятна задача
PV
Спасибо большое!
Запись неплохая, тезисы есть - хорошо, теперь гуглинг.
Запись неплохая, тезисы есть - хорошо, теперь гуглинг.
DD
Товарищи знатоки, обращаюсь вот с чем. Были ли прецеденты совмещения gpt-подобного чего-либо с поисковым движком? Интересует делали ли подобное совмещение (в принципе) гиганты индустрии, или кто-либо в частном порядке. Может кому-то приходила идея..
Яндекс недавно писал, как они берт в поиск воткнули
https://habr.com/ru/company/yandex/blog/529658/
https://habr.com/ru/company/yandex/blog/529658/
SМ
да. гуглите BERT for google search
(GPT — генератор текста, а BERT — хорошие эмбеддинги).
или интересует именно генерация текста? тогда мне непонятна задача
(GPT — генератор текста, а BERT — хорошие эмбеддинги).
или интересует именно генерация текста? тогда мне непонятна задача
Знаю что ребята юзали для токсика гпт эмбеддинги)