Компания Tether AI Research представила семейство компактных переводчиков TranslatePsy, которые могут работать непосредственно на смартфоне или компьютере без постоянного подключения к интернету.
Особое внимание разработчики уделили африканским языкам, которые значительно хуже представлены в популярных системах машинного перевода.
Новые модели способны работать с 19 языками Африки, а отдельная европейская версия поддерживает девять распространённых языков.
Почему переводчик может работать без интернета
Большинство современных ИИ-сервисов отправляют текст или голос пользователя на удалённые серверы, где и выполняется обработка.
TranslatePsy использует другой подход.
Модель можно загрузить непосредственно на устройство, после чего перевод выполняется локально — на смартфоне, ноутбуке или другом совместимом оборудовании.
Это позволяет пользоваться переводчиком там, где мобильная связь отсутствует или работает нестабильно.
Кроме того, текст пользователя не обязательно отправлять во внешний облачный сервис, что может быть важно для конфиденциальности.
Какие африканские языки поддерживаются
Самая крупная модель TranslatePsy-AfriSLM работает с английским и 19 африканскими языками.
Среди них:
- суахили
- амхарский
- хауса
- йоруба
- игбо
- зулу
- сомали
- африкаанс
- лингала
- оромо
- малагасийский
- киньяруанда
- коса и другие.
Многие из этих языков используют миллионы людей, однако количество качественных цифровых материалов для обучения систем перевода значительно меньше, чем для английского, испанского или французского.
Именно поэтому автоматический перевод так называемых малоресурсных языков часто оказывается менее точным.
Есть версия и для европейских языков
Отдельная модель TranslatePsy-EuroNano работает с девятью европейскими языками:
- немецким
- испанским
- французским
- итальянским
- португальским
- финским
- чешским
- нидерландским
- шведским.
Перевод выполняется через английский язык.
Например, для перевода с немецкого на испанский система сначала преобразует текст в английский, а затем уже в испанский.
Главное преимущество этой версии — небольшой размер.
Самая компактная конфигурация занимает всего несколько десятков мегабайт, благодаря чему её можно использовать даже на устройствах с ограниченным объёмом памяти.
Может ли маленькая модель переводить хорошо
Разработчики утверждают, что уменьшение размера модели не обязательно означает резкое ухудшение качества.
По их результатам, одна из компактных африканских моделей смогла показать на специализированных тестах результаты лучше некоторых значительно более крупных систем машинного перевода.
Добиться этого удалось в том числе благодаря строгому отбору данных для обучения: разработчики удаляли большое количество плохо переведённых и сомнительных пар предложений.
Это интересный подход.
Вместо принципа «чем больше данных, тем лучше» ставка делается на меньшее количество, но более качественный языковой материал.
При этом результаты тестов всё равно стоит воспринимать осторожно: реальный разговор, сленг, необычные имена и местные выражения могут оказаться намного сложнее стандартного набора проверочных предложений.
Зачем нужен офлайн-перевод редких языков
Для европейского туриста возможность переводить без интернета просто удобна.
В некоторых регионах Африки она может иметь гораздо большее значение.
Стабильный мобильный интернет доступен далеко не везде, а медицинская, образовательная или сельскохозяйственная информация часто существует только на крупных международных языках.
Компактный переводчик теоретически позволяет хранить систему непосредственно на устройстве и использовать её независимо от качества связи.
Это может пригодиться в школах, гуманитарных организациях, путешествиях и обычном общении между людьми из разных регионов.
Станут ли переводчики поддерживать больше редких языков
Долгое время системы машинного перевода развивались прежде всего вокруг крупнейших языков мира.
Теперь ситуация постепенно меняется.
Современные модели становятся меньше, для их работы требуется меньше вычислительных ресурсов, а разработчики уделяют всё больше внимания языкам, которые раньше практически отсутствовали в цифровых сервисах.
TranslatePsy показывает ещё одну возможную тенденцию: переводчики будущего могут работать не только в огромных дата-центрах, но и непосредственно в кармане пользователя — без интернета и без отправки текста в облако.
А если такие технологии продолжат развиваться, список языков, для которых доступен качественный автоматический перевод, может стать значительно шире.
