Представлены очки с ИИ, читающие немых

Исследователи Корнельского университета разработали интерфейс распознавания тихой речи, который использует акустическое восприятие и искусственный интеллект для непрерывного распознавания до 31 невокализованной команды на основе движений губ и рта. Маломощному носимому интерфейсу под названием EchoSpeech требуется всего несколько минут данных для обучения пользователя, прежде чем он распознает команды и сможет работать на смартфоне. Жуйдун Чжан, докторант информационных наук, является ведущим автором книги «EchoSpeech: непрерывное распознавание тихой речи в минимально навязчивых очках на основе акустического восприятия», которая будет представлена на конференции Ассоциации вычислительной техники, посвященной человеческому фактору в вычислительных системах ( CHI) в этом месяце в Гамбурге, Германия. «Для людей, которые не могут озвучивать звук, эта технология безмолвной речи может стать отличным входом для голосового синтезатора. Она может вернуть пациентам их голос», — сказал Чжан о потенциальном использовании технологии при дальнейшем развитии. В своем нынешнем виде EchoSpeech можно использовать для общения с другими через смартфон в местах, где речь неудобна или неуместна, например, в шумном ресторане или тихой библиотеке. Бесшумный речевой интерфейс также можно использовать в паре со стилусом и использовать с программным обеспечением для проектирования, таким как САПР, практически исключая необходимость в клавиатуре и мыши. Оснащенные парой микрофонов и динамиками меньшего размера, чем ластик для карандашей, очки EchoSpeech превращаются в носимую гидролокационную систему с искусственным интеллектом , отправляющую и принимающую звуковые волны по лицу и воспринимающую движения рта. Затем алгоритм глубокого обучения анализирует эти эхо-профили в режиме реального времени с точностью около 95%. «Мы перемещаем сонар на тело», — сказал Ченг Чжан, доцент кафедры информатики и директор лаборатории интеллектуальных компьютерных интерфейсов для будущих взаимодействий (SciFi) Корнелла. «Мы очень рады этой системе, — сказал он, — потому что она действительно продвигает вперед области производительности и конфиденциальности . реальный мир.» По словам Чэн Чжан, большинство технологий распознавания немой речи ограничены набором предопределенных команд и требуют, чтобы пользователь смотрел в камеру или носил ее, что нецелесообразно и невыполнимо. По его словам, существуют также серьезные проблемы с конфиденциальностью, связанные с носимыми камерами — как для пользователя, так и для тех, с кем он взаимодействует. Технология акустического восприятия, такая как EchoSpeech, устраняет необходимость в носимых видеокамерах. А поскольку аудиоданные намного меньше, чем изображения или видеоданные, для их обработки требуется меньшая полоса пропускания, и их можно передавать на смартфон через Bluetooth в режиме реального времени, говорит профессор информатики Франсуа Гимбретьер . «А поскольку данные обрабатываются локально на вашем смартфоне, а не загружаются в облако, — сказал он, — конфиденциальная информация никогда не выходит из-под вашего контроля»....

Сообщает android-robot.com

Новость из рубрики: Технологии, Наука

Поделиться новостью: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Топ новости часа

06:00, 07 Дек VR очки: погрузитесь в виртуальный мир на максимум! В последние пару десятилетий технологии шагнули просто бесконечно далеко вперед. Еще недавно молодежь не могла надивиться черно-белому мобильному телефону и самым примитивным играм на Pentium I, как сегодня уже никого не удивляет графика в играх уро...

15:42, 17 Сен Дубинчак: Должны обыгрывать такие команды как АЕК, и добывать очки Динамо Киев должно обыгрывать команды уровня кипрского АЕКа и добывать очки. Такое мнение после поединка Лиги Европы высказал защитник столичного клуба Владислав Дубинчак. По словам футболиста, сейчас в команде тяжелая психологическая обстановка, и ...

18:00, 06 Июн Компания Apple выпустила очки смешанной реальности, которые "могут заменить смартфон" Компания Apple на ежегодной конференции для разработчиков Worldwide Developers Conference-2023 представила очки дополненной (смешанной) реальности Apple Vision Pro. Это первый новый крупный гаджет, который был выпущен техногигантом почти за 10 лет.К...

02:00, 28 Сен Представлены процессоры Intel 13-го поколения Компания Intel представила процессоры семейства Raptor Lake, которые включены в тринадцатое поколение её чипов. Всего было представлено шесть моделей, причём они будут работать на материнских платах как с новым чипсетом Z790, так и с более ранним Z6...

14:00, 18 Май Представлены роботы для помощи людям с деменцией Инженеры из Университета Ватерлоо открыли новый способ программирования роботов, чтобы помочь людям с деменцией находить лекарства, очки, телефоны и другие предметы, которые им нужны, но которые они потеряли. И хотя изначально основное внимание удел...

10:00, 16 Окт Fossil Gen 6 Wellness Edition на Wear OS 3 представлены официально В августе прошлого года Fossil выпустила умные часы Gen 6 с процессором Snapdragon 4100+ и Wear OS. Теперь компания выпустила новую версию этого устройства — Wellness Edition. Fossil Gen 6 Wellness Edition сохранили процессор Snapdragon 4100+,...

18:00, 03 Янв Xiaomi 13 и 13 Pro представлены официально: это первые смартфоны на Snapdragon 8 Gen 2 Xiaomi наконец-то анонсировала свою новую флагманскую серию — Xiaomi 13 и 13 Pro. Оба телефона работают на новейшем Qualcomm Snapdragon 8 Gen 2 (4-нм). Эти устройства также предлагают существенное обновление камеры и щеголяют новым дизайном. Xiaomi ...

00:00, 18 Апр Представлены Huawei Nova 11 Pro и 11 Ultra со спутниковой связью Помимо Huawei Nova 11, китайский производитель представил ещё две модели Nova 11 Pro и Nova 11 Ultra. С точки зрения дизайна в отличие от базовой модели оба гаджета получили экран-водопад. В характеристиках также есть много отличий. Между собой Nova...

19:00, 07 Мар Представлены TWS-наушники OnePlus Buds Pro 2 Lite с автономностью до 39 часов Вместе со смартфоном Ace 2V компания OnePlus представила новые беспроводные наушники Buds Pro 2 Lite. Модель почти ни в чем не уступает флагманским наушникам Buds Pro 2, но стоит немного дешевле. Отличаются Buds Pro 2 Lite от базовой версии лишь отс...

22:00, 03 Апр Представлены TWS-наушники Sony WF-C700 с активным шумодавом и сдержанным ценником Сегодня, 3 апреля, компания Sony представила новые беспроводные наушники WF-C700 с активным шумоподавлением и функцией адаптивного переключения между режимами. Каждый наушник весит всего 4,6 грамма, поэтому их можно носить довольно долго, не испытыв...

13:00, 12 Ноя Ёмкость аккумулятора и дисплей Samsung Galaxy Fold 2 представлены задолго до продажи Детали внешнего и внутреннего дисплея устройства уже раскрыты. Фото: Twitter @UniverseIce IT-Компания Tipster раскрыла новые подробности о Samsung Galaxy Fold 2. Смартфон будет иметь большой 7,7-дюймовый внутренний дисплей — больше, чем у оригинальн...

04:06, 05 Сен Oppo Watch 3 и Watch 3 Pro представлены официально На этой неделе Oppo анонсировала в Китае пару новых носимых устройств. Oppo Watch 3 и Oppo Watch 3 Pro стали первыми умными часами, использующими новейшую платформу Qualcomm Snapdragon W5 Gen 1, которую анонсировали еще в июле. Oppo Watch 3 поставля...

09:00, 31 Май Представлены Audi A6 и Audi A7 2024 Компания Audi готовится вскоре переработать свой модельный ряд с новыми названия для многих моделей, однако модели A6 и A7 пока остаются в линейке и получают несколько обновлений для в 2024 модельному году. Изменения включают обновленную переднюю ча...