E
а насколько большой датасет?
Size: a a a
2020 December 14
E
апи гугла позволят около 10 тысяч в день переводить бесплатно, если я не ошибаюсь
IN
Присоединюсь к вопросу, потому что мы с Катей работаем над одним проектом. Вот решили спросить в индустрии, использовал ли кто-то перевод датасетов в своей работе и, если да, то какие были результаты?
Да, пока думаем как раз про Google Translate API + ручное исправление
Создаем русскоязычную копию MultiWOZ, предложения там довольно простые. Это не что-то сложное и художественное
Да, пока думаем как раз про Google Translate API + ручное исправление
Создаем русскоязычную копию MultiWOZ, предложения там довольно простые. Это не что-то сложное и художественное
E
Я использовала и АПИ гугла и HuggingFace
E
Но не для русского языка, поэтому про качество не скажу ничего. По простоте использования HuggingFace конечно выигрывает вообще у всех
OR
апи гугла позволят около 10 тысяч в день переводить бесплатно, если я не ошибаюсь
существуют сторонние решения, которые используют ajax-запросы к гугл-транслейту. неограниченно и бесплатно.
они не очень надежные в плане того что гугл их прикрывает регулярно.
разумеется, я не рекомендую ими пользоваться, так как это явно нелегально, но просто для информации - они есть
они не очень надежные в плане того что гугл их прикрывает регулярно.
разумеется, я не рекомендую ими пользоваться, так как это явно нелегально, но просто для информации - они есть
E
Я что-то читала про это
E
Присоединюсь к вопросу, потому что мы с Катей работаем над одним проектом. Вот решили спросить в индустрии, использовал ли кто-то перевод датасетов в своей работе и, если да, то какие были результаты?
Да, пока думаем как раз про Google Translate API + ручное исправление
Создаем русскоязычную копию MultiWOZ, предложения там довольно простые. Это не что-то сложное и художественное
Да, пока думаем как раз про Google Translate API + ручное исправление
Создаем русскоязычную копию MultiWOZ, предложения там довольно простые. Это не что-то сложное и художественное
у гугла лучше качество перевода, Hugging Face бесплатный и простой в использовании. Такой был мой результат :)
IN
датасет представляет собой диалоги между пользователем и чатботом на темы заказа такси, о барах/кафе/ресторанах, достопримечательностях, бронировании мест в отелях и тд
просто размышляем, насколько он будет естественным, если переводить фразы с английского, а не собирать их самим
слоты с адресами/местами мы сможем заполнить российскими эквивалентами, потому что уже в принципе собрали эту информацию
просто размышляем, насколько он будет естественным, если переводить фразы с английского, а не собирать их самим
слоты с адресами/местами мы сможем заполнить российскими эквивалентами, потому что уже в принципе собрали эту информацию
E
попробуйте варианты, которые вам тут посоветовали, и нам расскажите, что получилось
KD
обязательно!)
KA
Присоединюсь к вопросу, потому что мы с Катей работаем над одним проектом. Вот решили спросить в индустрии, использовал ли кто-то перевод датасетов в своей работе и, если да, то какие были результаты?
Да, пока думаем как раз про Google Translate API + ручное исправление
Создаем русскоязычную копию MultiWOZ, предложения там довольно простые. Это не что-то сложное и художественное
Да, пока думаем как раз про Google Translate API + ручное исправление
Создаем русскоязычную копию MultiWOZ, предложения там довольно простые. Это не что-то сложное и художественное
Часть RussianSuperGLUE переведена и исправлена проф. переводчиками
KA
Еще мы использовали переводы BoolQ для предобучения для DaNetQA, как-то работало и помогало – повышало качество, то есть :) Но качество перевода мы не оценивали
KA
Сейчас еще несколько датасетов пытаемся переводить, пока выглядит не очень оптимистично
OR
в естественный перевод пока никто не научился вроде бы
IN
Часть RussianSuperGLUE переведена и исправлена проф. переводчиками
а дорого обошлось нанять профессиональных переводчиков на такую задачу?
KA
Это делали коллеги из сбера :)))
IN
Это делали коллеги из сбера :)))
Понял. Спросим куратора нашего проекта из Сбера Татьяну Шаврину об подобных вещах тогда)
KA
Дада, она как раз должна знать ;)