Size: a a a

Natural Language Processing

2021 January 25

СВ

Сергей Власов... in Natural Language Processing
Добрый день. Возможно ли с помощью только TensorFlow решить задачу по выделению именованных сущностей? Немного коркретизирую вопрос, есть утверждение, что TensorFlow, лучше справиться с этими задачами, чем Natasha. Про DeepPavlov  в курсе, меня интересует именно TensorFlow, можно ли используя только его решить подобные задачи. Мое понимание данного вопроса, что только построив модель и ее обучив, это возможно, по другому ни как. Мне нужно третье мнение. Спасибо.
источник

МП

Михаил Притугин... in Natural Language Processing
Думаю не сильно лучше, чем Natasha
источник

E

Elena in Natural Language Processing
Сергей Власов
Добрый день. Возможно ли с помощью только TensorFlow решить задачу по выделению именованных сущностей? Немного коркретизирую вопрос, есть утверждение, что TensorFlow, лучше справиться с этими задачами, чем Natasha. Про DeepPavlov  в курсе, меня интересует именно TensorFlow, можно ли используя только его решить подобные задачи. Мое понимание данного вопроса, что только построив модель и ее обучив, это возможно, по другому ни как. Мне нужно третье мнение. Спасибо.
Возможно. Это будет зависеть от вашего корпуса с аннотациями и от параметров нейросети.
источник

E

Elena in Natural Language Processing
Если ваш корпус лучше, больше, с большим количеством аннотаций, то есть шанс сделать модель лучше
источник

СВ

Сергей Власов... in Natural Language Processing
Получается модель все равно нужна?
источник

E

Elena in Natural Language Processing
Но если честно, не очень понятно, зачем это делать с нуля, если есть уже готовые решения, например с BERT
источник

E

Elena in Natural Language Processing
Сергей Власов
Получается модель все равно нужна?
нужна.
источник

М

Марк in Natural Language Processing
Сергей Власов
Добрый день. Возможно ли с помощью только TensorFlow решить задачу по выделению именованных сущностей? Немного коркретизирую вопрос, есть утверждение, что TensorFlow, лучше справиться с этими задачами, чем Natasha. Про DeepPavlov  в курсе, меня интересует именно TensorFlow, можно ли используя только его решить подобные задачи. Мое понимание данного вопроса, что только построив модель и ее обучив, это возможно, по другому ни как. Мне нужно третье мнение. Спасибо.
несколько не корректный вопрос.

В целом на TensorFlow можно написать лучше решение чем Наташа и хуже и саму Наташу.
источник

E

Elena in Natural Language Processing
берешь BERT на русском, делаешь файн-тюнинг на своем корпусе и получаешь модель, которая стабильно работает
источник

E

Elena in Natural Language Processing
BERT на TF вроде бы есть
источник

СВ

Сергей Власов... in Natural Language Processing
Писать не собираюсь, понимаю, что можно лучше или хуже.
источник

DD

David Dale in Natural Language Processing
Сергей Власов
Получается модель все равно нужна?
Модель нужна в любом случае)
Natasha - это библиотека, куда входит уже готовая модель.
Tensorflow - это библиотека, позволяющая обучать новые модели. В ней самой никаких знаний о языке нет.
DeepPavlov - это библиотека для обучения и применения моделей (под капотом у неё тоже Tensorflow), но в ней есть и несколько готовых моделей.

Поэтому сравнивать TF с Наташей некорректно. Это как сравнивать кирпичи с подъёмным краном - и то и другое используется для строительства домов, но в разном смысле.
источник

СВ

Сергей Власов... in Natural Language Processing
Вопрос в том, что когда я человеку сказал, что использую наташу для выделения именованных сущностей, он мне ответил, что тензерфлоу сэтим справился лучше бы
источник

DD

David Dale in Natural Language Processing
Сергей Власов
Вопрос в том, что когда я человеку сказал, что использую наташу для выделения именованных сущностей, он мне ответил, что тензерфлоу сэтим справился лучше бы
Довольно бессмысленное высказывание)
источник

E

Elena in Natural Language Processing
Сергей Власов
Вопрос в том, что когда я человеку сказал, что использую наташу для выделения именованных сущностей, он мне ответил, что тензерфлоу сэтим справился лучше бы
TF это же просто фреймворк, сам по себе он не лучше и не хуже
источник

DD

David Dale in Natural Language Processing
Сергей Власов
Вопрос в том, что когда я человеку сказал, что использую наташу для выделения именованных сущностей, он мне ответил, что тензерфлоу сэтим справился лучше бы
Можно было бы сказать, что tensorflow + определённая нейросетевая архитектура + определённый датасет для обучения могут дать более хороший NER, чем Наташа. Но тогда надо сказать, какая архитектура и какой датасет.
источник

М

Марк in Natural Language Processing
David Dale
Можно было бы сказать, что tensorflow + определённая нейросетевая архитектура + определённый датасет для обучения могут дать более хороший NER, чем Наташа. Но тогда надо сказать, какая архитектура и какой датасет.
Да, скорее надо вести обсуждения в сторону наличия предобученных моделей под TF для нужного языка.
источник

СВ

Сергей Власов... in Natural Language Processing
Спасибо, я все понял, просто один из к.т.н. считает, что pandas, numpy  и scipy, были разработаны специально для TF. Ну и соответственно, высказываение выше от него.
источник

E

Elena in Natural Language Processing
какое интересное мнение :)
источник

SancheZz Мов in Natural Language Processing
David Dale
Можно было бы сказать, что tensorflow + определённая нейросетевая архитектура + определённый датасет для обучения могут дать более хороший NER, чем Наташа. Но тогда надо сказать, какая архитектура и какой датасет.
+
источник