Яндекс.Переводчик объединил статистический перевод с нейросетью
14 сен 2017 11:40 #61177
от ICT
ICT создал тему: Яндекс.Переводчик объединил статистический перевод с нейросетью
К статистической модели, которая работает в Переводчике с момента запуска, добавилась технология перевода на нейронной сети. Текст переводят обе модели, а затем алгоритм на основе метода машинного обучения CatBoost сравнивает результаты и предлагает лучший. Преимущество гибридной системы в том, что она позволяет взять лучшее от каждого метода и повысить качество перевода. В отличие от статистического переводчика, нейронная сеть не разбивает тексты на отдельные слова и фразы. Она получает на вход предложение целиком и выдаёт его перевод. Такой подход позволяет учесть контекст и лучше передать смысл. Кроме того, результат получается «гладким»: предложение хорошо читается, и иногда даже можно подумать, что его перевёл человек. Статистическая модель, в свою очередь, лучше справляется с редкими словами и фразами и не фантазирует, если смысл предложения непонятен, как это может делать нейросеть. Чтобы снизить количество грамматических ошибок, Яндекс.Переводчик проводит дополнительную проверку переводов, выполненных нейронной сетью. Они проходят через модель языка — так называется свод знаний о языке перевода, накопленный системой. Если в предложении есть рассогласования, например «папа пошла» или «сильный боль», модель исправит их. Сейчас гибридная система работает только для переводов с английского на русский. Это самое популярное направление перевода — на него приходится около 80% запросов. Пользователи веб-версии Яндекс.Переводчика могут сравнить результат работы гибридной системы и статистического переводчика и выбрать вариант, который им больше понравится. Яндекс.Переводчик заработан в 2011 году. На старте он мог работать с тремя языками: русским, украинским и английским. Сейчас он знает 94 языка, включая экзотические наподобие коса или папьяменто, и может выполнять переводы между любой парой. В 2016 году Переводчик выучил синдарин — искусственный язык, на котором говорят эльфы в книгах Дж. Р. Р. Толкина.
© СОТОВИК Ссылка на источник
© СОТОВИК Ссылка на источник
Пожалуйста Войти или Регистрация, чтобы присоединиться к беседе.
Похожие статьи
Тема | Релевантность | Дата |
---|---|---|
«Яндекс.Переводчик» объединил статистический перевод с нейросетью | 44.8 | Четверг, 14 сентября 2017 |
"Яндекс.Переводчик" освоил эмодзи | 12.16 | Среда, 20 декабря 2017 |
«Яндекс» открыл галерею картин, созданных нейросетью | 12.13 | Понедельник, 23 марта 2020 |
«Яндекс.Переводчик» переведёт текст с картинки | 12.03 | Понедельник, 25 мая 2015 |
"Яндекс.Переводчик" доступен на Apple Watch | 12.03 | Пятница, 26 июня 2015 |
«Яндекс.Переводчик» освоил эльфийский язык | 12.03 | Пятница, 15 января 2016 |
Яндекс.Переводчик научился переводить картинки | 12.03 | Четверг, 07 июля 2016 |
В «Яндекс.Переводчик» встроили нейросеть с фантазией | 12.03 | Четверг, 14 сентября 2017 |
«Яндекс.Переводчик» научился переводить текст с изображения | 11.9 | Четверг, 07 июля 2016 |
«Яндекс.Переводчик» научился переводить устную речь | 11.9 | Пятница, 27 сентября 2019 |