В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Natural Language Processing

2186 membersпожаловаться на группу
2020 October 29

SZ

Sasha Zhu in Natural Language Processing
Друзья, привет!
Подскажите, в чем может быть проблема?

Работаю с gpt2, переобучила на своем корпусе, все классно, на эвале в конце каждой эпохи показывает более-менее удовлетворительный результат. Когда пытаюсь с моделью что-то делать (в того же бота в тг закинуть), то результат отличается кратно от того, что получается в процессе обучения (в худшую сторону).
источник
15:54пожаловаться#1

SZ

Sasha Zhu in Natural Language Processing
Я дообучаю уже существующую модель, у меня после этого получается несколько *.pt - моделей, конфиг и базовая модель остаются теми же, что и в начале
источник
15:57пожаловаться#2

DD

Darina Dementyeva in Natural Language Processing
Sasha Zhu
Друзья, привет!
Подскажите, в чем может быть проблема?

Работаю с gpt2, переобучила на своем корпусе, все классно, на эвале в конце каждой эпохи показывает более-менее удовлетворительный результат. Когда пытаюсь с моделью что-то делать (в того же бота в тг закинуть), то результат отличается кратно от того, что получается в процессе обучения (в худшую сторону).
а вы пытались просто из питона вызывать модель на генерацию?
источник
16:00пожаловаться#3

SZ

Sasha Zhu in Natural Language Processing
Darina Dementyeva
а вы пытались просто из питона вызывать модель на генерацию?
да, конечно
источник
16:01пожаловаться#4

SZ

Sasha Zhu in Natural Language Processing
и результат отличается почему-то от эвала тоже
источник
16:01пожаловаться#5

BS

Bogdan Salyp in Natural Language Processing
А что с параметрами типо temperature, они на эвале дефолтные?
источник
16:01пожаловаться#6

SZ

Sasha Zhu in Natural Language Processing
Bogdan Salyp
А что с параметрами типо temperature, они на эвале дефолтные?
везде одни и те же параметры
источник
16:02пожаловаться#7

SZ

Sasha Zhu in Natural Language Processing
хоть убей, не могу понять, в чем дело
источник
16:02пожаловаться#8

DD

Darina Dementyeva in Natural Language Processing
Sasha Zhu
Друзья, привет!
Подскажите, в чем может быть проблема?

Работаю с gpt2, переобучила на своем корпусе, все классно, на эвале в конце каждой эпохи показывает более-менее удовлетворительный результат. Когда пытаюсь с моделью что-то делать (в того же бота в тг закинуть), то результат отличается кратно от того, что получается в процессе обучения (в худшую сторону).
а как проверяете "более-менее удовлетворительный результат"?
источник
16:04пожаловаться#9

SZ

Sasha Zhu in Natural Language Processing
субъективно :)
вижу, что во время обучения в конце каждой эпохи на эвале гораздо более "осмысленные" вещи выдаются, по сравнению с тем, что просто в процессе генерации получается
источник
16:04пожаловаться#10

SZ

Sasha Zhu in Natural Language Processing
очень странно и непонятно мне
источник
16:04пожаловаться#11

DD

Darina Dementyeva in Natural Language Processing
вот проблема может быть в том, что на ваш взгляд по какому-то одному-двум предлоежниям кажется, что модель обучается, а на самом деле нет. лучше смотреть на цифры - во время обучения модель все равно ориентируется на метрики, лучше их выводить (и лучше всего в виде графика), чтобы действительно оценить, что происходит с моделью.
источник
16:06пожаловаться#12

SZ

Sasha Zhu in Natural Language Processing
Darina Dementyeva
вот проблема может быть в том, что на ваш взгляд по какому-то одному-двум предлоежниям кажется, что модель обучается, а на самом деле нет. лучше смотреть на цифры - во время обучения модель все равно ориентируется на метрики, лучше их выводить (и лучше всего в виде графика), чтобы действительно оценить, что происходит с моделью.
так и по метрикам тоже все в порядке, это, в целом, дефолтный показатель, на который ориентируюсь
источник
16:08пожаловаться#13

SZ

Sasha Zhu in Natural Language Processing
просто результаты ОЧЕНЬ разные
источник
16:08пожаловаться#14

DS

Damir Safix in Natural Language Processing
приветствую. посоветуйте пожалуйста что-нибудь для рерайта статей на русском. скилл джуниор.
источник
18:34пожаловаться#15

DS

Damir Safix in Natural Language Processing
или готовые решения.
источник
18:35пожаловаться#16

DS

Damir Safix in Natural Language Processing
уникализации.
источник
18:37пожаловаться#17

DS

Damir Safix in Natural Language Processing
когда в последний раз был в чате было 200 человек. или это другой.
источник
18:38пожаловаться#18

ND

Nirfa Diya in Natural Language Processing
need help in word2vec prblm
источник
20:58пожаловаться#19

AW

Alex Wortega in Natural Language Processing
Damir Safix
приветствую. посоветуйте пожалуйста что-нибудь для рерайта статей на русском. скилл джуниор.
Джуниор?
источник
21:39пожаловаться#20