Видеокамера записывает голос без микрофона

14.06.2013

Используя высокоскоростную камеру, делающую тысячи кадров в секунду, японцам удалось сделать запись даже самых мельчайших колебаний поверхности кожи лица и шеи человека, которыми сопровождаются звуки, исходящие от голосовых связок человека.

В мире существуют различные программы, широко используемые всевозможными спецслужбами и правоохранительными органами, которые по движениям губ, челюстей и мышц лица человека могут распознать те слова, которые произносит этот человек. Наиболее сложные программы могут распознать речь человека на различных языках, но в любом случае, компьютер может с некоторой долей вероятности правильно воспроизвести только слова, чистый текст, не включающий в себя никаких интонаций и эмоциональной составляющей.

Используя высокоскоростную камеру, делающую тысячи кадров в секунду, исследователям из университета Васеда (Waseda University in Tokyo) в Токио удалось сделать запись даже самых мельчайших колебаний поверхности кожи лица и шеи человека, которыми сопровождаются звуки, исходящие от голосовых связок человека. После съемки специализированная компьютерная программа, основанная на сложнейших алгоритмах, превратила снятые колебания кожи в соответствующие им звуковые колебания, в голос человека.

"С помощью нашей технологии мы можем получить не только слова, произнесенные человеком, но и его голос с интонациями, несущими эмоциональную составляющую речи", - рассказал Ясухиро Оикоа (Yasuhiro Oikawa), руководитель научной группы, выступая на Международном конгрессе по акустике (International Congress on Acoustics), проходившем в начале июня в Токио.

Используя технологию высокоскоростной съемки, исследователи сделали запись того, как два добровольных участника произносили одно и то же слово на японском языке. Камера снимала с частотой 10 тысяч кадров в секунду (для сравнения, в обычном видео используется съемка с частотой 24 кадра в секунду, а особо качественное видео снимается с частотой 60-80 кадров в секунду). Помимо этого, голос добровольцев записывался с помощью обычного микрофона, а колебания кожи их лица и горла регистрировались с помощью датчиков-виброметров.

После того как компьютерная программы выдала рассчитанную ей на основе визуальных данных последовательность звуковых колебаний, исследователи сравнили их с реальными данными, записанными с помощью микрофона и виброметров. Оказалось, что рассчитанные звуки совпадали с реальными звуками, расходясь лишь в незначительных деталях. Проигрывая получившийся звуковой файл, исследователи смогли достаточно четко распознать отдельные произносимые слова и опознать голосовые интонации.

Технология реконструкции речи и голоса человека с помощью высокоскоростной камеры находится еще в экспериментальной стадии, только доказывающей работоспособность самой идеи. До конца этого года исследователи планируют довести эту технологию до уровня, когда она сможет работать в режиме реального времени, распознавая и воспроизводя не только короткие слова, фразы, а и достаточно длинные предложения. Для этого исследователи собираются серьезно переработать программное обеспечение системы и реализовать функцию анализа колебаний поверхности кожи некоторых других частей лица человека, к примеру, щек, что предоставит в их распоряжение большее количество информации, позволяющей более качественно реконструировать речь, голос и интонации человека.

<< Назад: Гарнитуры серии Sound Blaster от Creative 15.06.2013

>> Вперед: Процессор с частотой 5 ГГц 14.06.2013

Последние новости науки и техники, новинки электроники:

Польза белкового завтрака 14.01.2026

Правильное питание по утрам играет ключевую роль в поддержании здоровья и контроле веса. Многочисленные исследования подтверждают, что состав завтрака может влиять на аппетит в течение всего дня и качество употребляемой пищи. Австралийские ученые провели масштабный эксперимент, который показал, что употребление белковой пищи с утра помогает дольше чувствовать сытость и предотвращает переедание. В исследовании участвовали более 9 тысяч человек среднего возраста 46 лет. В период с 2011 по 2012 год специалисты анализировали рационы респондентов, оценивая долю основных макронутриентов. В среднем участники потребляли 43% углеводов, 31% жиров, 18% белков, 2% клетчатки и 4% алкоголя. Такой рацион позволил ученым проследить взаимосвязь между утренним приемом пищи и пищевым поведением в течение дня. Выяснилось, что участники, чей завтрак содержал недостаточное количество белка, ощущали повышенный аппетит в течение дня. Они ели больше, чем необходимо, и часто выбирали продукты с высоким со ...>>

Технология SmartPower HDR 14.01.2026

Ноутбуки стремительно развиваются в плане графики и мультимедийных возможностей, но яркие дисплеи с высоким динамическим диапазоном (HDR) часто становятся серьезной нагрузкой для аккумуляторов. Длительная работа с видео высокого качества или играми в HDR приводит к быстрой разрядке батареи, что ограничивает мобильность пользователей и снижает комфорт работы. Решить эту проблему призвана новая технология SmartPower HDR, разработанная совместно компаниями Samsung Display и Intel. Суть технологии заключается в динамическом управлении напряжением OLED-панелей. Чипсет ноутбука в реальном времени анализирует пиковую яркость каждого кадра и передает эти данные контроллеру дисплея, который оптимизирует подачу напряжения в зависимости от количества активных пикселей. В отличие от традиционных режимов HDR, где яркость часто фиксируется на максимальном уровне, SmartPower HDR адаптируется к конкретному контенту, что снижает энергопотребление без потери качества изображения. Технология позвол ...>>

Недосып существенно сокращает жизнь 13.01.2026

Сон является одной из самых фундаментальных потребностей человека. Он влияет на обмен веществ, работу сердца и мозга, иммунитет и общее самочувствие. Современный ритм жизни часто заставляет людей жертвовать сном ради работы, учебы или развлечений, но ученые предупреждают: регулярный недосып может иметь далеко идущие последствия для здоровья и долголетия. Исследователи из Орегонского университета здравоохранения и науки пришли к выводу, что сон менее семи часов в сутки связан с сокращением продолжительности жизни. По данным специалистов, хроническая нехватка сна не только вызывает усталость и снижение работоспособности, но и постепенно сказывается на здоровье органов и систем, увеличивая риски развития различных заболеваний. Для анализа ученые использовали обширную национальную базу данных США, сопоставляя показатели ожидаемой продолжительности жизни на уровне штатов с результатами опросов Центров контроля и профилактики заболеваний за период с 2019 по 2025 годы. Они учитывали мно ...>>

Накладные ногти iPolish с управление цветом через смартфон 13.01.2026

Американская компания iPolish представила уникальные акриловые накладные ногти, способные мгновенно менять цвет под управлением смартфона, что открывает новые возможности для самовыражения и индивидуального стиля. Для работы устройства пользователю необходимо предварительно зарядить специальный контроллер и подключить его к мобильному телефону. Управление оттенком осуществляется через приложение, синхронизированное с контроллером. После выбора нужного цвета кончик ногтя подносят к модулю, который отправляет кратковременный электрический импульс, запускающий изменение окраски поверхности. Производитель пока не раскрывает подробностей электрохимического механизма, лежащего в основе технологии, однако отмечает, что перекраска одного ногтя занимает около пяти секунд. Такой подход позволяет мгновенно изменять внешний вид ногтей, что делает маникюр более гибким и адаптивным к повседневным условиям. Каждый ноготь поддерживает до 400 различных оттенков и позволяет многократно менять ц ...>>

Моноблок Lenovo ThinkCentre X AIO 12.01.2026

Компания Lenovo представила новый моноблок ThinkCentre X AIO, который отличается нестандартным форм-фактором и ориентирован на профессиональных пользователей. Информацию об анонсе опубликовал портал Gizmochina. Новинка оснащена 27,6-дюймовой IPS-матрицей с разрешением 2560 x 2880 пикселей. Соотношение сторон экрана составляет 16:18, что делает его почти квадратным. По словам производителя, такой формат позволяет одновременно отображать две страницы формата А4, что особенно удобно при работе с текстовыми документами, таблицами, программным кодом или дизайнерскими проектами. Экран имеет стандартную частоту обновления 60 Гц и время отклика 14 мс. Максимальная яркость достигает 300 нит, контрастность составляет 1000:1, а охват цветового пространства достигает 98% по стандарту DCI-P3. Эти характеристики обеспечивают четкое изображение и точную цветопередачу, что важно для профессионалов в области дизайна и обработки контента. Аппаратная платформа моноблока базируется на мобильных п ...>>

Случайная новость из Архива Гнев может повысить креативность 29.01.2025 Гнев - сложная и многогранная эмоция, которая может возникать в ответ на различные ситуации: от чувства несправедливости до разочарования и угрозы. Он сопровождается учащенным сердцебиением, мышечным напряжением и побуждает человека к действию - решению проблемы или защите. Однако, влияние гнева на креативность до сих пор оставалось предметом споров среди ученых. Одни исследования показывали, что гнев может стимулировать творческое мышление, другие же свидетельствовали о том, что он, наоборот, мешает ему. Группа ученых под руководством Ляньюй Син решила подробно изучить этот вопрос. Они провели метаанализ, изучив 2947 научных работ, посвященных связи между креативностью и гневом. В окончательный анализ вошли 23 исследования, в которых участвовали 2413 человек. Результаты показали слабую, но положительную связь между гневом и творческой продуктивностью. В среднем люди, испытывавшие гнев, немного лучше справлялись с креативными задачами. Однако, сила этой связи зависела от нескольких факторов. Во-первых, эффект гнева на креативность оказался более заметным в странах Восточной Азии, тогда как в западных странах он практически не наблюдался. Это может быть связано с культурными особенностями восприятия и выражения эмоций. Во-вторых, в более новых исследованиях связь между гневом и креативностью была выражена сильнее, чем в более старых. Это может свидетельствовать о том, что методы изучения эмоций и креативности совершенствуются и становятся более точными. Кроме того, гнев особенно усиливал так называемую "вредоносную креативность" - создание идей и решений, направленных на причинение вреда или нарушение этических норм. Это может быть связано с тем, что гнев побуждает человека к агрессивным действиям и поиску способов достижения своих целей любыми путями. Также гнев больше влиял на творчество в задачах, связанных с воображением. Экспериментальные исследования, где ученые намеренно вызывали у участников гнев, чаще фиксировали этот эффект, чем работы, основанные на естественных эмоциях. Возможно, в лабораторных условиях эмоции проявляются более ярко и оказывают большее влияние на когнитивные процессы. При этом тип креативного задания, конечный результат и временные ограничения не оказали значительного влияния на связь гнева и творчества. Авторы исследования отмечают, что их работа фокусировалась только на основном эмоциональном состоянии гнева и не учитывала такие вторичные эмоции, как агрессия и враждебность. Эти факторы могут играть важную роль в понимании механизма влияния гнева на креативность. Гнев может оказывать стимулирующее влияние на креативность, особенно в случае "вредоносного" творчества и задач, связанных с воображением. Однако, сила этого эффекта зависит от многих факторов, включая культурные особенности и индивидуальные различия. Дальнейшие исследования в этой области могут помочь нам лучше понять механизмы взаимосвязи между эмоциями и творческим мышлением, а также найти способы использования этого знания для развития креативных способностей человека.

Смотрите полный Архив новостей науки и техники, новинок электроники

www.diagram.com.ua
2000-2026