Телеграмм чат группы natural_language

2020 October 22

OR

Oleg Ruban in Natural Language Processing

нет. я spacy-ru делаю. SlovNet делает @alexkuk
речь в том сообщении шла про модели для spacy.

По Spacy, в чем принципиальное отличие в POS и NER от Наташи будет? И известно, на каком фреймворке предобученный SlovNet окажется?

источник

23:12пожаловаться #1

YB

Yuri Baburov in Natural Language Processing

Oleg Ruban

По Spacy, в чем принципиальное отличие в POS и NER от Наташи будет? И известно, на каком фреймворке предобученный SlovNet окажется?

SlovNetBert пока что медленнее на CPU, чем Spacy (который без трансформеров!), а SlovNet (который без берта) не на новостях очень слабый.
>И известно, на каком фреймворке SlovNet окажется?
а это непонятный мне вопрос.

источник

23:14пожаловаться #2

SS

Sergey Shulga in Natural Language Processing

@yuri_baburov когда планируешь 2.3 с NER выкатить?

источник

23:14пожаловаться #3

YB

Yuri Baburov in Natural Language Processing

Sergey Shulga

@yuri_baburov когда планируешь 2.3 с NER выкатить?

всё очень сложно из-за завала по работе и из-за того, что я не смог с первого раза измерить метрику naeval на NER. прямо сейчас выложу версии с каким-то неплохим качеством NER, но чуть хуже рекордного качества прошлого года (впрочем, не факт, что вы заметите разницу ;) ). это назову бетой.
а доделка будет в течение ближайшей пары недель, как только смогу повторить метрику на NER и оптимизировать модель по ней.

источник

23:16пожаловаться #4

OR

Oleg Ruban in Natural Language Processing

Yuri Baburov

SlovNetBert пока что медленнее на CPU, чем Spacy (который без трансформеров!), а SlovNet (который без берта) не на новостях очень слабый.
>И известно, на каком фреймворке SlovNet окажется?
а это непонятный мне вопрос.

То есть Словнет с Бертом обучен только на новостных датасетах по типу Ленты и РИА?

А насчет того, на чем предобученный - имел в виду PyTorch или Tensorflow

источник

23:17пожаловаться #5

N

Natalia in Natural Language Processing

о, а на каких датасетах, кстати, для русского качество ner меряют?

источник

23:17пожаловаться #6

YB

Yuri Baburov in Natural Language Processing

Natalia

о, а на каких датасетах, кстати, для русского качество ner меряют?

https://github.com/natasha/naeval#ner

GitHub

natasha/naeval

Comparing quality and performance of NLP systems for Russian language - natasha/naeval

источник

23:18пожаловаться #7

SS

Sergey Shulga in Natural Language Processing

@yuri_baburov Юра, отлично, я как раз опечаточник с пунктуатором докручу к этому моменту в пайплайн к себе

источник

23:18пожаловаться #8

YB

Yuri Baburov in Natural Language Processing

Oleg Ruban

То есть Словнет с Бертом обучен только на новостных датасетах по типу Ленты и РИА?

А насчет того, на чем предобученный - имел в виду PyTorch или Tensorflow

нет, он обучен на fiction + news .
>А насчет того, на чем предобученный - имел в виду PyTorch или Tensorflow
pytorch там под капотом, https://github.com/natasha/slovnet/search?q=torch

GitHub

natasha/slovnet

Deep Learning based NLP modeling for Russian language - natasha/slovnet

источник

23:21пожаловаться #9

N

Natalia in Natural Language Processing

Yuri Baburov

https://github.com/natasha/naeval#ner

GitHub

natasha/naeval

Comparing quality and performance of NLP systems for Russian language - natasha/naeval

спасибо, точно же!
там, кстати, полетела ссылка на BSNLP (лучше поменять на http://bsnlp.cs.helsinki.fi/bsnlp-2019/shared_task.html - @alexkuk? или отдельно в issues писать? :))

bsnlp.cs.helsinki.fi

Balto-Slavic Natural Language Processing 2019

BSNLP 2019

источник

23:22пожаловаться #10

OR

Oleg Ruban in Natural Language Processing

Yuri Baburov

нет, он обучен на fiction + news .
>А насчет того, на чем предобученный - имел в виду PyTorch или Tensorflow
pytorch там под капотом, https://github.com/natasha/slovnet/search?q=torch

GitHub

natasha/slovnet

Deep Learning based NLP modeling for Russian language - natasha/slovnet