Искусственный интеллект распознает безмолвную речь

29.11.2020

Американские ученые разработали систему, состоящую из электромиографических сенсоров, воспринимающих активность лицевых мышц, и алгоритма, предсказывающего слова по сигналам ранней стадии артикуляции, и синтезирующих их в речь. Технологию можно использовать для помощи людям с повреждениями речевого аппарата или для улучшения возможностей голосовых помощников.

Устройство для распознавания безмолвной речи было изобретено специалистами из Калифорнийского университета в Беркли. Они использовали подход "переноса звука из вокализованной записи в бесшумную с сохранением высказывания", сообщает Venture Beat. Для последующей генерации речи они применили декодер WaveNet.

По сравнению со стандартными программами безмолвной речи, обученными с помощью вокализованных данных электромиографии, подход ученых позволил снизить коэффициент ошибок с 64% до 4% при транскрипции предложений из книг. Для того чтобы подстегнуть развитие этой области, исследователи выложили в открытый доступ почти 20 часов данных ЭМГ.

"Цифровое озвучивание безмолвной речи имеет широкий спектр потенциального применения, - говорится в статье. - Например, его можно использовать для создания устройства, аналогичного гарнитуре Bluetooth, которая позволяет вести телефонные разговоры, не мешая окружающим. Такое устройство также может оказаться полезным в условиях, когда вокруг слишком шумно, чтобы разговаривать, или когда важно соблюдать тишину".

Для распознавания речи тех, кто плохо говорит по-английски, специалисты Google разрабатывают сервис Project Euphonia. Чтобы настроить стандартный алгоритм на работу с "проблемными" пользователями, исследователи дополнили наборы данных небольшой выборкой, представляющей людей с БАС и акцентами.

<< Назад: Самое маленькое запоминающее устройство 29.11.2020

>> Вперед: Видео на электронных книгах с цветными чернилами 28.11.2020

Последние новости науки и техники, новинки электроники:

Экраны влияют на детей неравномерно в разном возрасте 01.08.2026

Планшеты и смартфоны давно стали привычной частью повседневной жизни даже самых маленьких детей. Родители часто используют гаджеты, чтобы успокоить малыша или занять его на время, однако ученые все чаще задаются вопросом, как экранное время сказывается на развитии мозга и будущей способности к обучению. Новое исследование показывает, что значение имеет не только продолжительность просмотра, но и возраст, в котором ребенок проводит время перед экраном. Ученые наблюдали детей от рождения до 8 лет. Оказалось, что больше всего экраны влияют на мозг в два периода - в раннем младенческом возрасте и перед поступлением в школу. У детей, много времени проводивших перед экранами в эти возрастные точки, в 9 лет были несколько хуже успехи в обучении, а в 10,5 лет хуже работала рабочая память - способность удерживать и обрабатывать информацию здесь и сейчас. Исследователи из Франции и Сингапура проанализировали данные 502 детей и выделили два ключевых этапа. У младенцев мозг развивается очень ...>>

Умные жилеты, спасающие от жары 01.08.2026

Летняя жара в больших городах все чаще становится серьезным испытанием для людей, работающих на открытом воздухе. Мусорщики, строители и другие специалисты вынуждены проводить часы под палящим солнцем, рискуя перегревом. Китайские инженеры предложили практичное решение - специальные охлаждающие жилеты, которые помогают снизить ощущаемую температуру примерно на 10 градусов. Пока мир страдает от сильной жары, китайские инженеры разработали "умные" жилеты с климат-контролем. Жилеты с кондиционированием почти не отличаются от обычной рабочей одежды. Главное отличие - в системе охлаждения. В городе Нанкин в жилет вмонтированы два вентилятора, работающих от портативных аккумуляторов. Одного заряда хватает на 3-4 часа непрерывной работы. В Чанчжоу решили разместить в карманах охлаждающие элементы с материалом, который при нагревании переходит из твердого состояния в жидкое, активно поглощая тепло. Это поддерживает комфортную температуру в течение 2,5-4 часов. Такие жилеты выглядят почти ...>>

Летающие ветротурбины 3 МВт вышли в серию 31.07.2026

Традиционные ветряные электростанции зависят от силы и стабильности ветра у поверхности земли, где воздушные потоки часто бывают слабыми и порывистыми. На больших высотах ветер обычно сильнее и постояннее, поэтому инженеры уже давно рассматривают возможность подъема турбин в воздух. Китайская компания сделала важный шаг в этом направлении, перейдя от испытаний к мелкосерийному производству. Компания Beijing Linyi Yunchuan Energy Technology запустила мелкосерийное производство летающей ветротурбины S2000, а в провинции Чжэцзян возводят отдельный завод по производству материалов для оболочки аппарата. У компании уже есть предварительные договоренности с прибрежными городами и горными регионами, которые рассматривают возможность использования этой технологии для удовлетворения собственных энергетических потребностей. Прототип, который полгода назад только что поднялся в небо над Сычуанем, теперь превращается в целую отрасль. Идея S2000 проста: вместо того чтобы устанавливать ветряну ...>>

LG и Prime Video: студияная версия кинематографа 31.07.2026

Современные телевизоры предлагают множество режимов изображения, которые автоматически корректируют цвета, контраст и резкость. Однако создатели фильмов часто жалуются, что дополнительная обработка искажает их замысел. Новая функция, появившаяся на телевизорах LG, пытается решить эту проблему, передавая контроль над настройками непосредственно студии. LG и Prime Video запустили режим "Оригинал автора" - первую настройку изображения, которой управляет сама студия. Он доступен только на OLED evo 2026 модельного года. LG Electronics и Prime Video объявили о совместной инициативе, приуроченной к стриминговой премьере фильма "Властелины Вселенной". В рамках сотрудничества на телевизорах компании появились две новые функции - режим изображения "Оригинал автора" и голосовая команда для пульта Magic Remote. Ключевая новинка - режим "Оригинал автора", который в LG называют первым в области настройки изображения для стримингового контента. Его отличие от распространенного FILMMAKER MODE за ...>>

Астронавты на Марсе не смогут выжить даже в скафандрах 30.07.2026

Высадка людей на Марс остается одной из самых амбициозных целей космических агентств. Красная планета лишена пригодной для дыхания атмосферы и подвергается высокому уровню солнечной радиации, поэтому астронавты смогут находиться на ее поверхности только в специальных скафандрах. Однако новые исследования показывают, что даже самые современные космические костюмы могут оказаться непригодными для работы в условиях марсианской гравитации. По результатам испытаний стало ясно, что новые скафандры NASA не подходят для использования астронавтами на Красной планете. На Марсе отсутствует воздух, пригодный для дыхания, а также наблюдается высокий уровень солнечной радиации. Это лишь некоторые из многих факторов, которые усложнят нахождение людей на поверхности. Современные скафандры не рассчитаны на марсианскую гравитацию, составляющую примерно 38 процентов земной. Новейшее поколение костюмов просто слишком тяжелое для использования на Марсе, пишет Phys. Новая серия скафандров, которую раз ...>>

Случайная новость из Архива Белый графен для охлаждения микросхем 26.07.2015 Ученые университета Райса изучали свойства колончатой аллотропной разновидности нитрида бора (BN), который вследствие изоэлектронности с углеродом и способности образовывать слои толщиной в один атом называют "белым графеном", и пришли к выводу, что этот материал обладает более высокой теплопроводностью, чем образующие его структуры по отдельности. Моделирование параметров материала, в котором слои соединены колоннами-нанотрубками, показало, что его теплопроводность зависит от расстояния между колоннами и их длины. Исследование может оказаться перспективным для решения задачи охлаждения микросхем.

Смотрите полный Архив новостей науки и техники, новинок электроники

www.diagram.com.ua
2000-2026