Ещё как вариант можно взять тот же RNNMorph и обучить его на своих данных, предварительно разметив их руками, как вам нужно. И проблема с ФИО не будет уже такой острой

Проще словарь. Разметка руками это прямо последнее дело. Я еще сам кое-что написал для обхода ошибок.

антисемитизмом от комментария повеяло.
пусть не по теме  NLP,  но напишу публично.

Что тут обсуждать?
Человек культивирует то, у одного древнего народа называется хуцпой.
Это полезный навык, не каждому дано.
Да и не всеми одобряется.

Вот ещё поржать. На самом деле я его понимаю. Правильно Си цзиньпин без мягкого знака,просто многие СМИ даже не удосуживаются глянуть правила транслитерации

А что насчёт не чисто русских фамилий?

А я пока про русские говорю только

Про нерусские не знаю

Не пишите чушь.
Я интернационалист.
Просто это слово еврейское.
И навык полезный.
Но не всем дано .

В русском есть тоже свои термины - смекалка и халява.
Их тоже употреблять нельзя?

хуцпа не значит "сверхнаглость" и наглость вовсе, в нём нет негативных коннотаций.
оно значит скорее "смелость, кураж".

вы сравнили достаточно неадекватное поведение человека со словом не из русского языка, параллельно с этим указав что такое недостойное поведение - это доблесть у целой этнической группы.

поэтому ваш пример мне напомнил о том, что слово "хуцпа" ,как правило, используется неевреями в контексте вполне себе антисемитском - мол, все евреи наглые, всегда всё себе а гоев считают за лошков.

предлагаю прекратить вести этическо-лингвистический спор здесь.

спасибо.

Для меня здесь нет проблемы.
Мы также занимаемся определением Stance,  ИПВ, пропаганды, аргументации  фейков и тп

Грань очень тонкая.

Точнее так, как учёный я понимаю, что здесь есть разные точки зрения. Выраженные на разных языках.
Таких спорных проблем много, и это предмет для изучения.
И относиться к этому следует спокойно.
Так как точки зрения существовали, существуют и будут существовать.

Наконец-то в чате интересно!

Это все интересно. А вот возможно ли  сентимент-классификатор на тему антисемитизма собрать? Чтобы автоматически проверять юдофобское высказывание или нет?

Помогите, пожалуйста, за денежку написать скрипт

Нужно написать скрипт, который берет данные из csv в формате id ; text и вычисляет вектора. Язык английский и русский. Если русский, то вероятно нужно взять модель Rusvectores. Либо USE для начала.
На выходе файл id и вектора в json
В идеале в докер зашить.

Кто может дать примеры для использования aot ?

Интересно! Вы термин "антисемитизм" отождествляете с термином "юдофобия"?

++