Умные очки RayNeo iO переводят речь в реальном времени

RayNeo iO — умные очки-переводчик в реальном времени

Переводчики постепенно перебираются со смартфонов прямо перед глазами пользователя. Новые умные очки RayNeo iO умеют распознавать речь собеседника, переводить её и показывать результат непосредственно на линзе практически в реальном времени.

Такой формат особенно интересен для путешествий и общения на иностранном языке: вместо того чтобы постоянно смотреть в экран телефона, перевод можно читать во время самого разговора.

Как работает перевод в RayNeo iO

В очках есть функция Live Captions & Translation.

Микрофоны распознают речь человека, находящегося перед пользователем, после чего система превращает её в текст и при необходимости переводит на выбранный язык.

Перевод появляется непосредственно в поле зрения владельца очков.

Как работает перевод в RayNeo iO — живой перевод и субтитры на линзе
Иллюстрация к разделу о работе перевода в RayNeo iO.

Получается своеобразный вариант субтитров к обычному разговору: собеседник говорит на иностранном языке, а перед глазами появляется понятный текст.

Система при этом старается отделять голос собеседника от голоса самого владельца очков.

Сколько языков поддерживают очки

В официальной документации RayNeo для функции Live Captions сейчас заявлен двусторонний перевод примерно для 40 языков.

Технологическим партнёром системы стала компания Timekettle, известная своими электронными переводчиками и наушниками для общения на разных языках.

Её платформа Babel OS 3.0 способна работать с большим количеством языков и региональных вариантов произношения, однако фактический набор языков непосредственно в RayNeo iO может отличаться.

Поэтому при выборе устройства лучше ориентироваться именно на список языков, который поддерживается самими очками.

Как ответить человеку на другом языке

Перевод работает не только в одну сторону.

Иностранная речь собеседника отображается в очках пользователя, а фраза владельца переводится уже на подключённом смартфоне.

Затем телефон может вслух воспроизвести перевод.

Схема получается примерно такой:

собеседник говорит → очки показывают перевод → пользователь отвечает → смартфон переводит и озвучивает ответ.

Для простого разговора в магазине, кафе, гостинице или поездке такой формат может оказаться удобнее обычного переводчика в телефоне.

Нужен ли смартфон

Несмотря на необычный формат, полностью заменить телефон очки пока не могут.

RayNeo iO работают вместе с подключённым смартфоном для перевода речи
Иллюстрация к разделу о работе RayNeo iO со смартфоном.

Для первоначальной настройки используется приложение RayNeo, а функция перевода требует подключённого смартфона и доступа к интернету.

То есть использовать RayNeo iO как полностью автономный офлайн-переводчик не получится.

Зато пользователю не приходится постоянно держать телефон перед собой и переводить каждую реплику вручную.

Не только переводчик

RayNeo iO умеют также превращать обычную речь в субтитры без перевода.

Это может пригодиться в шумном помещении, при сильном акценте собеседника или во время быстрого разговора, когда отдельные слова сложно расслышать.

Записи разговоров можно сохранять, а затем просматривать их текстовую расшифровку.

Помимо языковых функций, устройство получило инструменты для заметок, работы с ИИ и отображения информации непосредственно перед глазами.

Заменят ли такие очки знание языка

Для туристических ситуаций подобные устройства действительно могут значительно уменьшить языковой барьер.

Не нужно заранее знать десятки фраз, чтобы задать простой вопрос или понять ответ.

Однако автоматический перевод по-прежнему зависит от качества распознавания речи, акцента, фонового шума и контекста. Неправильно понятое слово способно полностью изменить смысл фразы.

Кроме того, общение через переводчик остаётся общением через технического посредника.

Поэтому умные очки вряд ли сделают изучение иностранных языков ненужным. Но они хорошо показывают другое: перевод постепенно становится почти незаметной частью обычного разговора.

Ещё недавно для него требовалось открыть приложение и по очереди говорить в смартфон. Теперь перевод можно увидеть прямо перед глазами, практически не прерывая беседу.

Pro-lingua.Ru – изучение английского и других языков: грамматика, лексика, правила, таблицы, упражнения онлайн
Добавить комментарий