Рубрика «Audio»

Intro

Прежде чем приступать к самому обзору, хотелось бы обозначить отличительные черты подхода, относительно большинства диалоговых систем:

Текущие системы работают в каскадной манере: сначала «активационное» слово, затем аудио переводится в текст (ASR), текст обрабатывается и анализируется, и, наконец, ответ генерируется через TTS. Однако это медленно, теряет эмоции и «живость» разговора, и, что самое важное, все взаимодействие происходит через жесткое чередование говорящих — сначала ты, потом я, и так далее.

  • Moshi не опирается на сложные каскадные пайплайны (ASR, NLU, TTS), а объединяет все эти функции Читать полностью »

«Невозможный» аудиокодек для Sega MD - 1


Вступительный текст про легендарную консоль, вода, бла-бла-бла. Искрой для появления статьи послужил неожиданный факт: ЦАП мегадрайва способен воспроизводить звук с качеством 26 килогерц 8 бит. Что? Хочу такое! Но… Максимальный размер картриджа 4 Мб, этого хватит на 2.5 минуты такого звука, с распаковкой современных кодеков старый процессор не справится. Качество против количества. Нерешаемое противоречие, но если сильно хочется, то всё получается.
Читать полностью »

Совсем недавно мы купили новый ноутбук на Windows человеку, который до сих пор пользовался Mac'ами. Одна из замеченных проблем - при просмотре видео звук в Bluetooth наушниках запаздывает по отношению к видео, причём заметно. Используя slow motion видео на телефоне, мы выяснили, что задержка составляет порядка 200мс. Это много, и это мешает воспринимать речь в видео.

200мс даже нет на шкале
200мс даже нет на шкале
Читать полностью »

Всем привет! Меня зовут Илья, я из команды TinyPlay. В этой статье хотел бы поделиться тем, как мы работаем с аудио. Надеюсь, для вас эта статья будет полезной.

Работа с аудио в Unity — трассировка и облачные вычисления - 1

Архитектура аудио

Читать полностью »

Несколько дней назад www.reddit.com сообщил, что Googlе прекращает выпуск Chromecast Audio, устройства, которое в свое время стало одним из самых удобных альтернатив большим мультирум системам. Для тех, кто успел забыть, что это за штуковина, напомню, что это такой диск, который превращал любые колонки в беспроводные, принимал звуковой сигнал по WI-FI, предлагал 3 варианта коммутации и стоил $ 35. Лично для меня Chromecast Audio и тв-приставка Chromecast стали если не эталонами, то своеобразным символами того, что инновации могут существенно расширить возможности пользователя без астрономических затрат.

Некролог на смерть Chromecast Audio: Google убил черные диски - 1
Читать полностью »

Не многие знают о том, что в СССР существовала собственная программа по созданию цифровых аудиоформатов и устройств для их воспроизведения. Вполне вероятно, что она могла бы составить конкуренцию CD. В прошлых материалах этого цикла я касался первых CD-проигрывателей, созданных в Эстонской ССР. Эти устройства были выпущены через 10 лет после появления первых прототипов в США, под уже существующий западный стандарт. Задолго до этого в Союзе проводились работы по разработке собственного стандарта цифровой звукозаписи.

Советский HI-FI и его создатели: цифровая звукозапись в СССР — в шаге от победы - 1

Первые прототипы такой записи на оптическом диске и проигрыватель для них были созданы за год до появления серийного устройства Philips. А готовые к серийному выпуску советские проигрыватели оптических дисков показали на ВДНХ практически одновременно с первыми серийными образцами на Западе в 1982-м году. Под катом неизвестная история советской программы по созданию цифровой звукозаписи.
Читать полностью »

Акустические системы, о которых пойдет речь, известны тем, что установили новый отраслевой стандарт в звукозаписи, а несколько позже и в домашнем аудио. Эта разработка JBL стала значимой частью истории не только этой компании, но также мировой звукозаписывающей индустрии, акустического дизайна студий и в какой-то степени истории музыки.

Легенды мирового колонкостроения: эволюция трехполосного стандарта, студийный культ JBL - 1

Речь пойдет об одной из самых популярных линеек студийных мониторов за всю историю электроакустики. Эволюционную преемственность в этой линейе можно проследить с конца 60-х до настоящего времени. Иными словами, пост о мониторах JBL 4310 и разработках, созданных на их основе.

Именно благодаря решениям, реализованным в этих АС, к 1977-му году подавляющее количество звукозаписывающих студий в мире использовало студийные мониторы JBL.

Так, по данным опроса Billboard, к концу 70-х общее количество студий, использующих оборудование JBL, превышало общее количество студий с оборудованием всех остальных брендов.
Читать полностью »

image

В сфере распознавания эмоций голос – второй по важности после лица источник эмоциональных данных. Голос можно охарактеризовать по нескольким параметрам. Высота голоса – одна из основных таких характеристик, однако в сфере акустических технологий корректнее называть этот параметр частотой основного тона.

Частота основного тона имеет непосредственное отношение к тому, что мы называем интонацией. А интонация, например, связана с эмоционально-экспрессивными характеристиками голоса.

Тем не менее, определение частоты основного тона является не совсем тривиальной задачей с интересными нюансами. В этой статье мы обсудим особенности алгоритмов для ее определения и сравним существующие решения на примерах конкретных аудиозаписей.
Читать полностью »

Чего сложного с I2S скажете вы? Подключаешься проводками к нужным пинам и все работает.

Omega2 миникомпьютер Я тоже так думал, но с миникомпьютером Omega2 оказалось не все так просто. Поэтому я решил написать эту статью.

Начнем с того, чего я добился в итоге. Я подключил микросхему TDA1543 (стерео I2S ЦАП с разрешением по амплитуде 16 бит) к микрокомпьютеру Omega 2. Звук хороший, я с удовольствием слушаю интернет радиостанции (тут должна быть шутка про аудифилию и теплый ламповый звук). Однако я так и не разобрался в причине перегруза аудио, а лишь научился его обходить костыльным методом. И я очень хотел бы услышать ваши идеи по этому вопросу.
Читать полностью »

Ностальгия со вкусом винила - 1

Когда-то давно, когда деревья были больше, трава зеленее, небо — голубе́е (в хорошем, не опошлённом ещё смысле этого слова!), а солнце — ярче, я любил слушать винил!

Ну как — любил… Когда хотелось «прекрасного», то бишь музыки, то включал проигрыватель с корундовой иглой и…
Альтернатив ведь было немного: магнитофоны были (сравнительно) дорогими (и дефицитными), интернета не было вовсе (смешно, правда?), по радио «крутили» «классику» а по телевизору — «Утреннюю почту» с «Песнярами», так что виниловые диски, а в просторечии — пластинки (или, на жаргоне, «пласты́»), были практически единственным «народным» носителем «консервированного» звука в быту.
И, кстати, довольно-таки качественным и долговечным носителем! Не зря же сейчас они обрели «вторую жизнь»…
Читать полностью »


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js