Видеокамера записывает голос без микрофона

14.06.2013

Используя высокоскоростную камеру, делающую тысячи кадров в секунду, японцам удалось сделать запись даже самых мельчайших колебаний поверхности кожи лица и шеи человека, которыми сопровождаются звуки, исходящие от голосовых связок человека.

В мире существуют различные программы, широко используемые всевозможными спецслужбами и правоохранительными органами, которые по движениям губ, челюстей и мышц лица человека могут распознать те слова, которые произносит этот человек. Наиболее сложные программы могут распознать речь человека на различных языках, но в любом случае, компьютер может с некоторой долей вероятности правильно воспроизвести только слова, чистый текст, не включающий в себя никаких интонаций и эмоциональной составляющей.

Используя высокоскоростную камеру, делающую тысячи кадров в секунду, исследователям из университета Васеда (Waseda University in Tokyo) в Токио удалось сделать запись даже самых мельчайших колебаний поверхности кожи лица и шеи человека, которыми сопровождаются звуки, исходящие от голосовых связок человека. После съемки специализированная компьютерная программа, основанная на сложнейших алгоритмах, превратила снятые колебания кожи в соответствующие им звуковые колебания, в голос человека.

"С помощью нашей технологии мы можем получить не только слова, произнесенные человеком, но и его голос с интонациями, несущими эмоциональную составляющую речи", - рассказал Ясухиро Оикоа (Yasuhiro Oikawa), руководитель научной группы, выступая на Международном конгрессе по акустике (International Congress on Acoustics), проходившем в начале июня в Токио.

Используя технологию высокоскоростной съемки, исследователи сделали запись того, как два добровольных участника произносили одно и то же слово на японском языке. Камера снимала с частотой 10 тысяч кадров в секунду (для сравнения, в обычном видео используется съемка с частотой 24 кадра в секунду, а особо качественное видео снимается с частотой 60-80 кадров в секунду). Помимо этого, голос добровольцев записывался с помощью обычного микрофона, а колебания кожи их лица и горла регистрировались с помощью датчиков-виброметров.

После того как компьютерная программы выдала рассчитанную ей на основе визуальных данных последовательность звуковых колебаний, исследователи сравнили их с реальными данными, записанными с помощью микрофона и виброметров. Оказалось, что рассчитанные звуки совпадали с реальными звуками, расходясь лишь в незначительных деталях. Проигрывая получившийся звуковой файл, исследователи смогли достаточно четко распознать отдельные произносимые слова и опознать голосовые интонации.

Технология реконструкции речи и голоса человека с помощью высокоскоростной камеры находится еще в экспериментальной стадии, только доказывающей работоспособность самой идеи. До конца этого года исследователи планируют довести эту технологию до уровня, когда она сможет работать в режиме реального времени, распознавая и воспроизводя не только короткие слова, фразы, а и достаточно длинные предложения. Для этого исследователи собираются серьезно переработать программное обеспечение системы и реализовать функцию анализа колебаний поверхности кожи некоторых других частей лица человека, к примеру, щек, что предоставит в их распоряжение большее количество информации, позволяющей более качественно реконструировать речь, голос и интонации человека.

<< Назад: Гарнитуры серии Sound Blaster от Creative 15.06.2013

>> Вперед: Процессор с частотой 5 ГГц 14.06.2013

Последние новости науки и техники, новинки электроники:

Власть является ключевым фактором счастья в отношениях 11.03.2026

Исследования семейных и романтических отношений показывают, что длительное счастье пары зависит не только от привычных факторов, таких как доверие, уважение и преданность, но и от более тонких психологических аспектов. Современные ученые ищут закономерности, которые отличают действительно счастливые пары от остальных, чтобы понять, какие механизмы поддерживают гармонию в отношениях. Группа исследователей из Университета Мартина Лютера в Галле-Виттенберге и Бамбергского университета провела опрос среди 181 пары, которые состояли в совместных отношениях более восьми лет и прожили вместе хотя бы месяц. Участники заполняли анкету, описывая различные аспекты своих отношений, включая распределение обязанностей, эмоциональную поддержку и степень вовлеченности в совместные решения. Анализ данных показал интересный паттерн: пары, где оба партнера ощущали высокий уровень личной власти, оказывались наиболее счастливыми и удовлетворенными. В данном контексте под властью понимается способност ...>>

Защищенная колонка-повербанк Anker Soundcore Boom Go 3i 11.03.2026

Компания Anker представила новую модель линейки Soundcore - колонку Soundcore Boom Go 3i, ориентированную на активное использование на улице. Новинка отличается высокой степенью защиты: корпус соответствует стандарту IP68, что обеспечивает водо- и пыленепроницаемость, а ударопрочный дизайн выдерживает падение с высоты до одного метра. За качество звука отвечает 15-ваттный драйвер, обеспечивающий пик громкости до 92 дБ, а технология BassUp 2.0 усиливает низкие частоты, делая звучание более насыщенным. Колонка обладает автономностью до 24 часов, а LED-индикатор позволяет контролировать уровень заряда батареи. Кроме того, Soundcore Boom Go 3i может выполнять функцию павербанка: согласно внутренним тестам, устройство способно зарядить iPhone 17 с нуля до 40% за один час, что делает его полезным аксессуаром в походах и поездках. Среди функциональных особенностей модели стоит выделить технологию Auracast, которая улучшает подключение и позволяет создавать стереопару из двух колонок ...>>

Раннее воздержание от алкоголя перестраивает мозг и иммунитет 10.03.2026

Алкогольная зависимость - хроническое расстройство с компульсивным употреблением спиртного, которое влияет не только на поведение, но и на функционирование мозга и иммунной системы. Недавние исследования показали, что даже на ранних этапах воздержания организм начинает перестраиваться, открывая новые возможности для терапии зависимости. Ученые сосредоточились на пациентах, находящихся в первые недели абстиненции, и зафиксировали значительные изменения в мозговой активности. С помощью функциональной магнитно-резонансной томографии они выявили перестройку сетей нейронных связей, отвечающих за контроль импульсов и принятие решений. Эти изменения могут быть ключевыми для восстановления самоконтроля и снижения риска рецидива. Одновременно с нейронной перестройкой исследователи наблюдали колебания иммунной системы. В крови повышался уровень цитокинов - сигнальных белков, регулирующих воспалительные процессы. Эти данные свидетельствуют о существовании нейроиммунного взаимодействия, при ...>>

Жесткий диск Seagate 44 ТВ 10.03.2026

С ростом объемов данных, обрабатываемых крупными компаниями и дата-центрами, требования к накопителям резко увеличиваются. Seagate анонсировала начало поставок новейших жестких дисков Exos емкостью 44 ТБ, которые обещают сочетание рекордного объема и высокой производительности, благодаря передовой платформе Mozaic 4+ и технологии термомагнитной записи HAMR. Платформа Mozaic 4+ включает десять магнитных пластин, каждая из которых имеет емкость более 4 ТБ. В сумме это позволяет получить общий объем накопителя 44 ТБ - рекордный показатель для современных HDD. В сочетании с вращением шпинделя на скорости 7200 оборотов в минуту это обеспечивает скорость передачи данных порядка 300 МБ/с, что делает диск подходящим для работы с большими массивами информации. Seagate отмечает, что использование Exos повышает общую эффективность систем хранения примерно на 47%. Для корпоративных клиентов это означает сокращение занимаемой площади под кластеры на 9 квадратных метров и снижение годового эне ...>>

Скука - двигатель перемен 09.03.2026

Современная жизнь редко оставляет человеку время на простое ощущение скуки. С развитием цифровых технологий и постоянным доступом к социальным сетям мы стремимся мгновенно развлекать себя, избегая пауз, когда ум может быть свободен от внешних раздражителей. Между тем, новое исследование показывает, что скука выполняет важную роль в психическом здоровье и может стимулировать личностное развитие. Часто скука воспринимается как негативное состояние, которое хочется немедленно устранить. Однако психологи отмечают, что именно моменты, когда человеку становится по-настоящему скучно, могут побудить к поиску нового хобби, пересмотру жизненных приоритетов или появлению свежих идей. Это состояние открывает пространство для саморефлексии и внутреннего роста. Исследователи из Университета Бата и Тринити-колледжа показали, что привычка уходить в социальные сети в моменты скуки мешает человеку достигать "максимальной скуки". В результате стимулируется лишь поверхностное отвлечение, которое не ...>>

Случайная новость из Архива Водородный электролет Joby Aviation 15.07.2024 Недавние достижения в области авиационных технологий продолжают впечатлять, и одной из самых значительных инноваций стал демонстрационный образец eVTOL на водородных топливных элементах от компании Joby Aviation. Этот летательный аппарат совершил первый в истории длительный перелет, преодолев 842 километра без посадки, что почти втрое превышает предыдущий рекорд компании, установленный на батареях. Летательный аппарат S4 от Joby Aviation использует систему топливных элементов H2F-175, разработанную компанией H2Fly, которую Joby приобрела в 2021 году. Самолет находился в воздухе более четырех часов, а после приземления в его баках оставалось еще 10% топлива. Этот полет демонстрирует значительный потенциал водорода как жизнеспособного альтернативного источника энергии для электрических вертикально-взлетающих и посадочных летательных аппаратов (eVTOL). На сегодняшний день аккумуляторные eVTOL подходят только для небольших экскурсий или городских воздушных такси. Их запас хода ограничен примерно 250 километрами, что является пределом для дальних перевозок. Водород, с его высокой удельной энергоемкостью, представляет собой перспективную альтернативу. Особенно это важно для летательных аппаратов, которым необходимо преодолевать гравитацию, поднимая собственный вес и полезную нагрузку. Тем не менее, технологии водородных топливных элементов пока менее развиты, чем литиевые батареи, особенно в криогенной жидкой форме. Joby Aviation увидела большой потенциал водорода и приобрела немецкую компанию H2Fly, пионера в области водородных самолетов. В сентябре прошлого года демонстрационный аппарат HY4 от H2Fly совершил первый в мире пилотируемый полет на жидком водороде. Этот успех стал основой для дальнейших разработок. Недавно eVTOL на водородном топливе совершил полет вокруг объектов компании в Марина, Калифорния. За 4 часа и 47 минут самолет преодолел 842 километра. Для этого полета Joby переоборудовала свой предсерийный eVTOL с поворотным крылом в водородно-электрический демонстрационный аппарат. В самолете был установлен криогенный топливный бак, вмещающий до 40 килограммов жидкого водорода, хранящегося при температуре -251 °C. Вакуумная оболочка бака поддерживала безопасную температуру его поверхности. Водород питает систему топливных элементов H2F-175, которая запускает электрохимическую реакцию с кислородом из воздуха, вырабатывая электроэнергию, воду и тепло. Электроэнергия, полученная от топливных элементов, является основным источником питания для шести винтов самолета, в то время как небольшая батарея используется для взлета и посадки. Основатель и генеральный директор Joby ДжоБен Бевирт подчеркнул, что большая часть работ по проектированию, испытаниям и сертификации, выполненных для eVTOL на батареях, применима к водородным полетам. Joby планирует использовать те же посадочные площадки, программное обеспечение ElevateOS и операционную группу для обеих моделей. Водородные аппараты предназначены для региональных перевозок без необходимости использования взлетно-посадочной полосы аэропорта. Полет водородного eVTOL от Joby Aviation стал первым в истории прямым полетом VTOL на жидком водороде. Это значительный шаг вперед в раскрытии потенциала водородных технологий. В будущем компания планирует достичь дальности полета более 1500 километров для самолетов с неподвижным крылом, таких как Hy4 от H2Fly, что открывает новые горизонты в авиации и демонстрирует потенциал водорода как эффективного и экологически чистого источника энергии.

Смотрите полный Архив новостей науки и техники, новинок электроники

www.diagram.com.ua
2000-2026