его нужно инициализировать явно https://colab.research.google.com/notebooks/tpu.ipynb

Не уверен, что он так нативно вместо gpu встанет, но попробую

а тематика не про Processing.org ?

Нынче в новостных агенствах жертвы ЕГЭ трудятся;)

Вот совсем нет))

Привет всем! Я недавно занимаюсь обработко текстов и столкнулся проблемой с извлечением ФИО целиком и отдельных компонентов в библиотеке natasha.  Не находит имена отдельно почти никогда и не находит ФИО с маленькой буквы. Скажите, может, есть уже решения этой проблемы?

deeppavlov bert ner

https://ai.googleblog.com/2020/10/rethinking-attention-with-performers.html
Пробовал уже кто-нибудь?

Всем привет
Можете подсказать библиотеку для определения языка текста на Python?

cld2, cld3, fasttext

langdetect

Кто-то использовал Amazon mechanical turk?
Сколько там стоит заказать создание(написание) туркерами диалогов на заранее заданную тематику? Диалогов нужно 10000, в каждом по 10 реплик.
Просто не шарю есть ли там какие-то средние цены или целиком от сложности задачи зависит(тем более там ранги есть)

Во всех чатах спросил и никто не знает)) ну хоть на Толоке скажите

Привет, как вам идея?

habr.com/ru/company/leader-id/blog/521378/

Ну хз, хотелось бы потыкать. Звучит как вундервафля

Они предоставляют доступ к демкам платный, к слову

Хабр потерял уровень технической подготовки и диалога, увы

Смотрю со своей колокольни, не с аспекта заучек. Умение и желание мыслить и вчитываться для меня в собеседнике первичнее, и анализируя тексты прихожу к выводу о каком-то крайне поверхностном мышлении, пока не заходит в область каких-то заучных тонкостей. Хотя это и не аспект экспертизы и знания профобластей, но огорчает гораздо сильнее

По ощущениям: на толоке народ готов делать задачи за ~$0.01, если они занимают единицы минут, 1-3.

Прикинь сколько времени займет написать диалог.

Но на Толоке надо очень внимательно относиться к контролю качества, есть прямо целые сегменты исполнителей, которые готовы скликать твой бюджет.

Для задачи класса "написать диалог" обязательно настраивать постприемку и выдавать/принимать задачи небольшими пачками, чтобы не получилось, что пул из 10000 заданий заполнен пустыми диалогами.

Агрессивно банить абьюзеров.

Сильно фильтровать по глобальному скору исполнителей.

В идеале сделать свой навык и отдельной подзадачей, на каком-то обучающем/тестовом сете отскорить исполнителей по качеству исполнения, назначить навык, потом работать только с ними.

Закладывай бюджет в 3-5 раз больше, чем получается простым умножением, так как наверняка часть сольешь впустую, в рамках самообучения 🙂