Відеокамера записує голос без мікрофона. Новина Безкоштовної технічної бібліотеки

НОВИНИ НАУКИ ТА ТЕХНІКИ, НОВИНКИ ЕЛЕКТРОНІКИ
Безкоштовна технічна бібліотека / Стрічка новин

Відеокамера записує голос без мікрофона

14.06.2013

Використовуючи високошвидкісну камеру, що робить тисячі кадрів за секунду, японцям вдалося зробити запис навіть найдрібніших коливань поверхні шкіри обличчя та шиї людини, якими супроводжуються звуки, що походять від голосових зв'язок людини.

У світі існують різні програми, що широко використовуються всілякими спецслужбами та правоохоронними органами, які за рухами губ, щелеп та м'язів обличчя людини можуть розпізнати ті слова, які вимовляє ця людина. Найбільш складні програми можуть розпізнати мову людини різними мовами, але в будь-якому випадку, комп'ютер може з деякою часткою ймовірності правильно відтворити тільки слова, чистий текст, що не включає ніяких інтонацій та емоційної складової.

Використовуючи високошвидкісну камеру, що робить тисячі кадрів на секунду, дослідникам з університету Васеда (Waseda University in Tokyo) в Токіо вдалося зробити запис навіть найменших коливань поверхні шкіри обличчя та шиї людини, якими супроводжуються звуки, що походять від голосових зв'язок людини. Після зйомки спеціалізована комп'ютерна програма, заснована на найскладніших алгоритмах, перетворила зняті коливання шкіри на відповідні звукові коливання, на голос людини.

"За допомогою нашої технології ми можемо отримати не тільки слова, вимовлені людиною, а й її голос з інтонаціями, що несуть емоційну складову мови", - розповів Ясухіро Оікоа (Yasuhiro Oikawa), керівник наукової групи, виступаючи на Міжнародному конгресі з акустики (International Congress on Acoustics), що проходив на початку червня в Токіо.

Використовуючи технологію високошвидкісної зйомки, дослідники зробили запис того, як два добровільні учасники вимовляли одне й те саме слово японською мовою. Камера знімала з частотою 10 тисяч кадрів за секунду (для порівняння, у звичайному відео використовується зйомка з частотою 24 кадри за секунду, а особливо якісне відео знімається з частотою 60-80 кадрів за секунду). Крім цього, голос добровольців записувався за допомогою звичайного мікрофона, а коливання шкіри обличчя та горла реєструвалися за допомогою датчиків-віброметрів.

Після того, як комп'ютерна програми видала розраховану їй на основі візуальних даних послідовність звукових коливань, дослідники порівняли їх із реальними даними, записаними за допомогою мікрофона та віброметрів. Виявилося, що розраховані звуки збігалися із реальними звуками, розходячись лише у незначних деталях. Програючи звуковий файл, дослідники змогли досить чітко розпізнати окремі слова і впізнати голосові інтонації.

Технологія реконструкції мови та голосу людини за допомогою високошвидкісної камери знаходиться ще в експериментальній стадії, що лише доводить працездатність самої ідеї. До кінця цього року дослідники планують довести цю технологію до рівня, коли вона зможе працювати в режимі реального часу, розпізнаючи та відтворюючи не лише короткі слова, фрази, а й досить довгі речення. Для цього дослідники збираються серйозно переробити програмне забезпечення системи та реалізувати функцію аналізу коливань поверхні шкіри деяких інших частин особи людини, наприклад, щік, що надасть у їхнє розпорядження більшу кількість інформації, що дозволяє якісніше реконструювати мову, голос та інтонації людини.

<< Назад: Гарнітури серії Sound Blaster від Creative 15.06.2013

>> Вперед: Процесор із частотою 5 ГГц 14.06.2013

Останні новини науки та техніки, новинки електроніки:

Доведено існування правила ентропії для квантової заплутаності 09.05.2024

Квантова механіка продовжує дивувати нас своїми таємничими явищами та несподіваними відкриттями. Нещодавно Бартош Регула із Центру квантових обчислень RIKEN та Людовіко Ламі з Амстердамського університету представили нове відкриття, яке стосується квантової заплутаності та її зв'язку з ентропією. Квантова заплутаність відіграє важливу роль у сучасній квантовій інформатиці та технологіях. Однак складність її структури робить розуміння та керування нею складними завданнями. Відкриття Регулу та Ламі показує, що для квантової заплутаності справедливе правило ентропії, подібне до того, що існує для класичних систем. Це відкриття відкриває нові перспективи в галузі квантової інформатики та технологій, поглиблюючи наше розуміння квантової заплутаності та її зв'язку з термодинамікою. Результати дослідження вказують на можливість оборотності перетворень заплутаності, що може спростити їх використання в різних квантових технологіях. Відкриття нового правила е ...>>

Міні-кондиціонер Sony Reon Pocket 5 09.05.2024

Літо - час відпочинку та подорожей, але часто спека може перетворити цей час на нестерпне борошно. Зустрічайте новинку від Sony – міні-кондиціонер Reon Pocket 5, який обіцяє зробити літо комфортнішим для своїх користувачів. Sony представила унікальний пристрій - міні-кондиціонер Reon Pocket 5, який забезпечує охолодження тіла у спекотні дні. З його допомогою користувачі можуть насолоджуватися прохолодою у будь-який час та в будь-якому місці, просто носячи його на шиї. Цей міні-кондиціонер оснащений автоматичним налаштуванням режимів роботи, а також датчиками температури та вологості. Завдяки інноваційним технологіям, Reon Pocket 5 регулює свою роботу залежно від активності користувача та умов довкілля. Користувачі можуть легко настроювати температуру за допомогою спеціальної мобільної програми, підключеної через Bluetooth. Крім того, для зручності доступні спеціально розроблені футболки та шорти, до яких можна прикріпити міні-кондиціонер. Пристрій може ох ...>>

Енергія з космосу для Starship 08.05.2024

Виробництво сонячної енергії в космосі стає все більш реальним з появою нових технологій та розвитком космічних програм. Керівник стартапу Virtus Solis поділився баченням використання Starship від SpaceX для створення орбітальних електростанцій, здатних забезпечувати енергією Землю. Стартап Virtus Solis представив амбітний проект створення орбітальних електростанцій, використовуючи Starship від SpaceX. Ця ідея може значно змінити сферу виробництва сонячної енергії, зробивши її доступнішою та дешевшою. Основою плану стартапу є зниження вартості запуску супутників у космос із використанням Starship. Передбачається, що завдяки цьому технологічному прориву виробництво сонячної енергії у космосі стане конкурентоспроможнішим порівняно з традиційними джерелами енергії. Віртуальна Solis планує створити великі фотоелектричні панелі на орбіті за допомогою Starship для доставки необхідного обладнання. Однак одним із ключових виклик ...>>

Новий метод створення потужних батарей 08.05.2024

З розвитком технологій та розширенням використання електроніки стає все більш актуальним питання створення ефективних та безпечних джерел енергії. Дослідники з Квінслендського університету представили новий підхід до створення потужних батарей на основі цинку, який може змінити пейзаж енергетичної індустрії. Однією з головних проблем традиційних батарей, що перезаряджаються, на водній основі була їх низька напруга, що обмежувало їх застосування в сучасних пристроях. Але завдяки новому методу, розробленому вченими, цей недолік успішно подолано. В рамках свого дослідження вчені звернулися до спеціального органічного з'єднання – катехолу. Воно виявилося важливим компонентом, здатним покращити стабільність роботи батареї та збільшити її ефективність. Цей підхід призвів до значного збільшення напруги цинк-іонних акумуляторів, що зробило їх конкурентоспроможнішими. За словами вчених, такі батареї мають кілька переваг. Вони мають б ...>>

Спиртуознавство теплого пива 07.05.2024

Пиво, як один із найпоширеніших алкогольних напоїв, має свій унікальний смак, який може змінюватись в залежності від температури споживання. Нове дослідження, проведене міжнародною групою вчених, виявило, що температура пива значно впливає на сприйняття алкогольного смаку. Дослідження, очолюване матеріалознавцем Лей Цзяном, показало, що з різних температурах молекули етанолу і води формують різні типи кластерів, що впливає сприйняття алкогольного смаку. При низьких температурах утворюються пірамідоподібні кластери, що знижує гостроту "етанолового" смаку і робить напій менш алкогольним на смак. Навпаки, при підвищенні температури кластери стають ланцюжнішими, що призводить до більш вираженого алкогольного смаку. Це пояснює, чому смак деяких алкогольних напоїв, таких як байцзю, може змінюватись в залежності від температури. Отримані дані відкривають нові перспективи для виробників напоїв, ...>>

Випадкова новина з Архіву

Акустика шкільного класу 19.07.2010

Інженери та фізики обстежили акустику у двох сотнях порожніх класних кімнат шкіл Берліна.

У кожному класі надували повітряну кульку і проколювали її шпилькою, записуючи бавовну, що виникає, і її луна. Якщо луна звучить не більше ніж півсекунди, така акустика, за німецьким стандартом, вважається гарною для кімнат, у яких ведеться викладання. Але лише 15% обстежених класів відповідали стандарту.

У деяких випадках луна тривала понад три секунди, що робить мову вчителя абсолютно нерозбірливою. Особливо важкі такі умови для дітей з ослабленим слухом і для тих, хто має німецьку мову нерідну. Класи з поганою акустикою доведеться переобладнати звукопоглинаючою обробкою стін та меблів.

Дивіться повний Архів новин науки та техніки, новинок електроніки

All languages of this page

Головна сторінка | Бібліотека | Статті | Карта сайту | Відгуки про сайт