Size: a a a

Natural Language Processing

2020 September 30

SZ

Sasha Zhu in Natural Language Processing
Nikolay V. Shmyrev
батч поменьше если памяти не хватает
уже, на 1 поставила
источник

SZ

Sasha Zhu in Natural Language Processing
вместо дефолтных двух
источник

SZ

Sasha Zhu in Natural Language Processing
сейчас заново запускаю, хочу логи собрать
источник

NS

Nikolay V. Shmyrev in Natural Language Processing
gpt маленькая?
источник

NS

Nikolay V. Shmyrev in Natural Language Processing
карточка какая
источник

SZ

Sasha Zhu in Natural Language Processing
в коллабе делаю
источник

SZ

Sasha Zhu in Natural Language Processing
через ssh
источник

SD

Sergey Dulikov in Natural Language Processing
Маленькая должна влезать
источник

SZ

Sasha Zhu in Natural Language Processing
так, и еще вопрос — какой минимальный размер датасета для файнтюнинга, подскажет кто?
источник

SZ

Sasha Zhu in Natural Language Processing
у меня он маленький совсем, 8к примерно образцов, и что-то вообще как будто не повлиял, хотя должно было вроде хоть немного отобразиться
источник

SD

Sergey Dulikov in Natural Language Processing
Я файнтюнил на 5к семплов, 10 эпох
источник

SD

Sergey Dulikov in Natural Language Processing
Получилось годно
источник

SD

Sergey Dulikov in Natural Language Processing
Но вообще эффект сразу после первой эпохи заметен был
источник

SZ

Sasha Zhu in Natural Language Processing
а сэмплы короткие или длинные?
источник

SZ

Sasha Zhu in Natural Language Processing
скажем, среднее количество символов какое?
источник
2020 October 01

SD

Sergey Dulikov in Natural Language Processing
Я брал описания фильмов с кинопоиска, в районе 300 токенов вроде в среднем
источник

SZ

Sasha Zhu in Natural Language Processing
Sergey Dulikov
Я брал описания фильмов с кинопоиска, в районе 300 токенов вроде в среднем
Значит, что-то делаю не так. Могу в личку с вопросами зайти, чтобы не флудить? Завтра уже только
источник

SD

Sergey Dulikov in Natural Language Processing
Sasha Zhu
Значит, что-то делаю не так. Могу в личку с вопросами зайти, чтобы не флудить? Завтра уже только
Да, конечно
источник

A

Ajay in Natural Language Processing
Hello, I have text data containing some doctor prescription like - take 1 tablet by oral route 2 times every day
and I want to calculate the total frequency that the text talks about, here it's 2. How should I go further by predicting the frequency from text data?
источник

SD

Sergey Dulikov in Natural Language Processing
Ajay
Hello, I have text data containing some doctor prescription like - take 1 tablet by oral route 2 times every day
and I want to calculate the total frequency that the text talks about, here it's 2. How should I go further by predicting the frequency from text data?
I think you may want to implement a some sort of NER to select amount and pereodicity, and then multiply them
источник