Литература
Архив выпусков
Для чего применяется создание и обработка звука?
Создание (синтез) звука в основном преследует две цели: имитация различных естественных звуков (шум ветра и дождя, звук шагов, пение птиц и т.п.), а также акустических музыкальных инструментов (имитационный синтез), и получение принципиально новых звуков, не встречающихся в природе (чистый синтез). Обработка звука обычно направлена на получение новых звуков из уже существующих (например, "голос робота"), либо придание им дополнительных качеств или устранение существующих (например, добавление эффекта хора, удаление шума или щелчков). Каждый из методов синтеза и обработки имеет свою математическую и алгоритмическую модель, что позволяет любой из них реализовать на компьютере; однако, многие методы, будучи реализованы точно, требуют слишком большого объема вычислений, отчего их обычно реализуют с какой-либо степенью допущения.
Каковы основные свойства звука?
Чаще всего в звуке рассматривается амплитуда и спектральный состав звукового колебания, а также их изменение во времени.
Амплитуда (amplitude) определяет максимальную интенсивность колебаний - громкость (volume) или силу звука. На осциллограмме амплитуда представляется размахом сигнала - наибольшим и наименьшим относительно среднего значения уровнями.
Спектральный состав определяет окраску или тембр звука (timbre). Любое периодическое колебание может быть представлено рядом Фурье - суммой конечного числа синусоидальных колебаний (чистых тонов). Спектр звука представляет собой график интенсивностей (амплитуд) этих частотных составляющих, обозначаемых обычно в виде вертикальных линий соответствующей высоты. Спектр чистого тона имеет только одну линию, соответстующую его частоте; спектр любого другого колебания имеет более одной линии. Если на спектре звука имеется достаточно острый пик, то такой звук воспринимается на слух как тон соответствующей высоты, а остальные составляющие определяют его окраску; в противном случае звук воспринимается как одновременное звучание нескольких тонов или шум. Частотные составляющие, кратные основной частоте тона, называются гармониками (harmonics) или обертонами; гармоники нумеруются, начиная с самого основного тона (первая гармоника), а обертоны - с первой кратной составляющей (первый обертон - вторая гармоника и т.д.).
Из-за особенностей слухового восприятия высота звука определяется больше по его спектральному составу, нежели по самому основному тону. Например, субъективная высота большинства спектрально богатых низкочастотных звуков практически не меняется даже при полном удалении из них основного тона, который в слуховом аппарате восстанавливается по разностным частотам первых обертонов.
Изменение амплитуды во времени называется амплитудной огибающей (envelope) звука - на амплитудном графике она как бы огибает график колебания, а график получается как бы вписанным в огибающую. Любой природный звук имеет огибающую примерно такого вида:
/~~~\ / \__________ / \ / \ -------!--!--!----------!---1 2 3 4 5
Цифрами обозначены фазы развития звука, принятые в акустике:
1 - атака (attack) - начальная фаза, подъем 2 - остановка (hold) - короткая стабилизация после подъема 3 - спад (decay) - фаза перехода звука в установившееся состояние 4 - удержание (sustain) - фаза "поддержки" 5 - затухание (release) - послезвучание
Фаза поддержки имеет место лишь в том случае, когда вызвавшее появление звука воздействие остается постоянным в течение какого-то времени (например, движение пилы по металлу или поток воздуха в духовом инструменте).
Аналогично, имеется понятие спектральной огибающей - трехмерный график изменения спектра (и соответственно - тембра) во времени.
Кроме периодических колебаний - тонов - рассматриваются также непериодические колебания - шумы. Для шума характерно более или менее равномерное распределение интенсивности по спектру, без явно выраженных пиков или спадов. В основном различается два вида шума: белый и розовый. Белый шум имеет равномерную спектральную плотность и в чистом виде в природных звуках не встречается, однако часто встречается в электронных приборах; плотность розового шума спадает с ростом частоты (1/f) - это характеристика шума дождя, прибоя, ветра и прочих неярко выраженных природных шумов. Иногда рассматривается также коричневый шум с плотностью 1/f^2, быстро спадающей с ростом частоты - характеристика, близкая к звукам ударного происхождения (гром, обвал).
Что такое децибел?
Это относительная логарифмическая единица измерения величин, связанных с интенсивностью звука (мощности, амплитуды, напряжения или тока сигнала, усиления/ ослабления и т.п.). Чувствительность слуха носит логарифмический характер - нарастание интенсивности в виде степенной функции воспринимается на слух как линейное увеличение громкости, поэтому в ряде случаев удобее пользоваться логарифмическими, а не линейными единицами. Десятичный логарифм отношения некоторой величины к ее эталонному значению - lg (X/Xэ) - называется белом (Б), а его десятая часть - lg (X/Xэ) / 10 - децибелом (дБ). Измерение в децибелах удобно еще и тем, что человеческое ухо различает относительное изменение интенсивности примерно на 1 дБ.
При измерениях абсолютной интенсивности звука (Вт/кв.м.) за эталонное значение принимается уровень порога слышимости для синусоидального сигнала с частотой 1 кГц - 10 в степени -12 (10E-12) Вт/кв.м. При этом порог слышимости определяется интенсивностью 0 дБ, а интенсивность, при которой начинаются болевые ощущения (болевой порог) - около 140 дБ. Интенсивность тихого шепота - около 35 дБ, громкого голоса - около 95 дБ, forte fortissimo (fff) оркестра - около 100 дБ, оркестрового тутти (звучания всех инструментов) - около 120 дБ.
При измерениях величин, с которыми интенсивность связана квадратичной зависимостью - напряжения, тока и звукового давления - в выражении для децибела множитель 10 меняется на 20 (двойка выносится из логарифма отношения квадратов).
При измерениях относительных величин за эталонный уровень принимается какое-либо значение величины. Например, при оценке усиления за него принимается единичное усиление (пропускание сигнала без изменения), равно 0 дБ. При этом 60 дБ соответствует усилению в 1000 раз (60 = 20 lg 1000), а -20 дБ - ослаблению в 10 раз. Для описания характеристик усилителей и фильтров применяется также единица "децибел на октаву" (дБ/окт), показывающая изменение усиления при изменении частоты в два раза.
Какие параметры характеризуют звуковой тракт?
Звуковым трактом называют любое устройство, осуществляющее передачу и/или преобразование звука. Звуковой тракт характеризуется следующими параметрами:
номинальный входной и выходной уровень (Input/Output Level) - величина сигнала на входе и выходе тракта, до которого он сохраняет указанные параметры. Указывается в вольтах и обычно принимается за 0 дБ. Таким образом, рабочие уровни сигнала имеют отрицательный либо нулевой уровень.
максимальный входной и выходной уровень - величина сигнала, до которой тракт сохраняет работоспособность. Уровни сигналов от номинального до максимального всегда имеют ненулевой положительный уровень.
коэффициент усиления - отношение величины выходного сигнала ко входному. Указывается в разах, процентах или децибелах.
диапазон частот (Frequency Response) - частотный интервал, в котором тракт сохраняет свои основные характеристики. Нуль подразумевает постоянный ток.
форма амплитудно-частотной характеристики (АЧХ) - график зависимости амплитуды сигнала на выходе от его частоты при неизменной амплитуде сигнала на входе. Тракты с горизонтальной внутри частотного диапазона АЧХ называют частотно-независимыми.
неравномерность АЧХ - отклонения графика от заданной формы. Указывается в процентах или децибелах.
уровень шума (Noise Level) - величина шума относительно номинального уровня сигнала. Указывается в децибелах и всегда имеет отрицательное значение. Другое название - соотношение сигнал/шум (Signal to Noise Ratio, SNR), которое имеет такое же положительное значение. Иногда указывется уровень шума, приведенный ко входу - в предположении, что весь шум поступает только на вход, а сам тракт собственного шума не имеет.
коэффициент гармоник (Total Harmonic Distortion, THD) - величина побочных гармонических составляющих, вносимых нелинейностью тракта. Указывается в процентах от величины сигнала; в ряде случаев указывается для различных гармоник (на слух наибольшие искажения вносят нечетные гармоники высших порядков).
уровень интермодуляционнх искажений (InterModulation Distortion, IMD) - относительный уровень паразитных частотных компонент, порожденных взаимной модуляцией полезных компонент сигнала. Указывается в процентах от величины сигнала.
переходное затухание (Stereo Crosstalk) - степень ослабления сигнала при его проникновении в соседний стереоканал. Указывается в децибелах.
динамический диапазон (Dynamic Range) - диапазон наибольшего и наименьшего уровней сигнала, внутри которых сохраняются основные характеристики тракта. Снизу обычно ограничен уровнем шума, сверху - номинальным уровнем, поэтому часто равен соотношению сигнал/шум, однако нелинейность тракта в ряде случаев не позволяет выдержать параметры в этих областях, а это сужает динамический диапазон.
Какие частотные характеристики имеет музыкальный звукоряд?
В основе всех звукорядов лежит понятие октавы - звуковысотного диапазона, частоты крайних звуков которого различаются вдвое. Музыкальный звукоряд разбивает октаву на ряд ступеней (в европейской системе - двенадцать), которые в любой октаве имеют одинаковое название и смысл. Различаются два основных музыкальных звукоряда - натуральный и хроматический. Натуральный строится из обертонов базового звука, сведенных в одну октаву, хроматический основан на равномерном делении октавы на двенадцать ступеней. Соотношения частот натурального звукоряда представляют собой рациональные дроби, что соседние ступени хроматического отличаются в корень 12 степени из двойки - примерно в 1.059 раза. Опорным звуком принято считать ноту Ля первой октавы - 440 Гц.
Использование натурального звукоряда позволяет получить более слитные (консонасные) созвучия, однако неравномерность его ступеней затрудняет транспонирование музыки на интервалы, не кратные октаве. Хроматический звукоряд не дает таких слитных созвучий, однако из-за равномерности ступеней получил преимущественное распространение.
Какие методы используются для синтеза звука?
1. Аддитивный (additive). Основан на утверждении Фурье о том, что любое периодическое колебание можно представить в виде суммы чистых тонов (синусоидальных колебаний с различными частотами и амплитудами). Для этого нужен набор из нескольких синусоидальных генераторов с независимым управлением, выходные сигналы которых суммируются для получения результирующего сигнала. На этом методе основан принцип создания звука в духовом органе.
Достоинства метода: позволяет получить любой периодический звук, и процесс синтеза хорошо предсказуем (изменение настройки одного из генераторов не влияет на остальную часть спектра звука). Основной недостаток - для звуков сложной структуры могут потребоваться сотни генераторов, что достаточно сложно и дорого реализовать. Для снижения стоимости реализации вместо набора отдельных генераторов (реальных или математических) применяется обратное преобразование Фурье.
2. Разностный (subtractive). Идеологически противоположен первому. В основу положена генерация звукового сигнала с богатым спектром (множеством частотных составляющих) с последующей фильтрацией (выделением одних составляющих и ослаблением других) - по этому принципу работает речевой аппарат человека. В качестве исходных сигналов обычно используются меандр (прямоугольный, square), с переменной скважностью (отношением всего периода к положительному полупериоду), пилообразный (saw) - прямой и обратный, и треугольный (triangle), а также различные виды шумов (случайных непериодических колебаний). Основным органом синтеза в этом методе служат управляемые фильтры: резонансный (полосовой) - с изменяемым положением и шириной полосы пропускания (band) и фильтр нижних частот (ФНЧ) с изменямой частотой среза (cutoff). Для каждого фильтра также регулируется добротность (Q) - крутизна подъема или спада на резонансной частоте.
Достоинства метода - относительно простая реализация и довольно широкий диапазон синтезируемых звуков. На этом методе построено множество студийных и концертных синтезаторов (типичный представитель - Moog). Недостаток - для синтеза звуков со сложным спектром требуется большое количество управляемых фильтров, которые достаточно сложны и дороги.
3. Частотно-модуляционный (frequency modulation - FM). В основу положена взаимная модуляция по частоте между несколькими синусоидальными генераторами. Каждый из таких генераторов, снабженный собственными формирователем амплитудной огибающей, амплитудным и частотным вибрато, именуетчся оператором. Различные способы соединения нескольких операторов, когда сигналы с выходов одних управляют работой других, называются алгоритмами синтеза. Алгоритм может включать один или больше операторов, соединенных последовательно, параллельно, последовательно-параллельно, с обратными связями и в прочих сочетаниях - все это дает практически бесконечное множество возможных звуков.
Благодаря простоте цифровой реализации, метод получил широкое распространение в студийной и концертной практике (типичный представитель класса синтезаторов - Yamaha DX). Однако практическое использование этого метода достаточно сложно из-за того, что бОльшая часть звуков, получаемых с его помощью, представляет собой шумоподобные колебания, и достаточно лишь слегка изменить настройку одного из генераторов, чтобы чистый тембр превратился в шум. Однако метод дает широкие возможности по синтезу разного рода ударных звуков, а также - различных звуковых эффектов, недостижимых в других методах разумной сложности.
4. Самплерный (sample - выборка). В этом методе записывается реальное звучание (сампл), которое затем в нужный момент воспроизводится. Для получения звуков разной высоты воспроизведение ускоряется или замедляется; при неизменной скорости выборки применяется расчет промежуточных значений отсчетов (интерполяция). Чтобы тембр звука при сдвиге высоты не менялся слишком сильно, используется несколько записей звучания через определенные интервалы (обычно - через одну-две октавы). В ранних самплерных синтезаторах звуки в буквальном смысле записывались на магнитофон, в современных применяется цифровая запись звука.
Метод позволяет получить сколь угодно точное подобие звучания реального инструмента, однако для этого требуются достаточно большие объемы памяти. С другой стороны, запись звучит естественно только при тех же параметрах, при которых она была сделана - при попытке, например, придать ей другую амплитудную огибающую естественность резко падает.
Для уменьшения требуемого объема памяти применяется зацикливание сампла (looping). В этом случае записывается только короткое время звучания инструмента, затем в нем выделяется средняя фаза с установившимся (sustained) звуком, которая при воспроизведении повторяется до тех пор, пока включена нота (нажата клавиша), а после отпускания воспроизводится концевая фаза.
На самом деле этот метод нельзя с полным правом называть синтезом - это скорее метод записи-воспроизведения. Однако в современных синтезаторах на его основе воспроизводимый звук можно подвергать различной обработке - модуляции, фильтрованию, добавлению новых гармоник, звуковых эффектов, в результате чего звук может приобретать совершенно новый тембр, иногда совсем непохожий на первоначальный. По сути, получается комбинация трех основных методов синтеза, где в качестве основного сигнала используется исходное звучание.
Типичный представитель этого класса синтезаторов - E-mu Proteus.
5. Таблично-волновой (wave table). Разновидность самплерного метода, когда записывается не все звучание целиком, а его отдельные фазы - атака, начальное затухание, средняя фаза и концевое затухание, что позволяет резко снизить объем памяти, требуемый для хранения самплов. Эти фазы записываются на различных частотах и при различных условиях (мягкий или резкий удар по клавише рояля, различное положение губ и языка при игре на саксофоне и т.п.), в результате чего получается семейство звучаний одного инструмента. При воспроизведении эти фазы нужным образом составляются, что дает возможность при относительно небольшом объеме самплов получить достаточно широкий спектр различных звучаний инструмента, а главное - заметно усилить выразительность звучания, выбирая, например, в зависимости от силы удара по клавише синтезатора не только нужную амплитудную огибающую, как делает любой синтезатор, но и нужную фазу атаки.
Основная проблема этого метода - в сложности сопряжения различных фаз друг с другом, чтобы переходы не воспринимались на слух и звучание было цельным и непрерывным. Поэтому синтезаторы этого класса достаточно редки и дороги.
Этот метод также используется в в синтезаторах звуковых карт персональных компьютеров, однако его возможности там сильно урезаны. В частности, почти нигде не применяют составление звука из нескольких фаз, сводя метод к простому самплерному, хотя почти везде есть возможность параллельного воспроизведения более одного сампла внутри одной ноты.
6. Метод физического моделирования (physical modelling). Состоит в моделировании физических процессов, определяющих звучание реального инструмента на основе его заданных параметров (например, для скрипки - порода дерева, состав лака, геометрические размеры, материал струн и смычка и т.п.). В связи с крайней сложностью точного моделирования даже простых инструментов и огромным объемом вычислений метод пока развивается медленно, на уровне студийных и экспериментальных образцов синтезаторов. Ожидается, что с момента своего достаточного развития он заменит известные методы синтеза звучаний акустических инструментов, оставив им только задачу синтеза не встречающихся в природе тембров.
7. (Alexander Grigoriev) WaveGuide технология, активно pазpабатываемая в Стэнфоpдcком Унивеpcитете и пpименяемая yже в неcкольких пpомышленных моделях электpонных pоялей, напpимеp, фиpмы Baldwin. Пpедcтавляет cобой pазновидноcть физичеcтого моделиpования, пpи котоpой моделиpyетcя pаcпpоcтpанение колебаний, пpедcтавленных диcкpетными отcчетами, по cтpyне (одномеpное моделиpование) и по pезонанcным повеpхноcтям (двyмеpное моделиpование) или в объемном pезонатоpе (тpехмеpное). Пpи этом появляетcя возможноcть моделиpовать также нелинейные эффекты, напpимеp yдаp молоточка и каcание cтpyны демпфеpом, а также взаимнyю cвязь cтpyн и cвязь гоpизонтальной и веpтикальной мод.
Какие методы используются для обработки звука?
1. Монтаж. Состоит в вырезании из записи одних участков, вставке других, их замене, размножении и т.п. Называется также редактированием. Все современные звукои видеозаписи в той или иной мере подвергаются монтажу.
2. Амплитудные преобразования. Выполняются при помощи различных действий над амплитудой сигнала, которые в конечном счете сводятся к умножению значений самплов на постоянный коэффициент (усиление/ослабление) или изменяющуюся во времени функцию-модулятор (амплитудная модуляция). Частным случаем амплитудной модуляции является формирование огибающей для придания стационарному звучанию развития во времени.
Амплитудные преобразования выполняются последовательно с отдельными самплами, поэтому они просты в реализации и не требуют большого объема вычислений.
3. Частотные (спектральные) преобразования. Выполняются над частотными составляющими звука. Если использовать спектральное разложение - форму представления звука, в которой по горизонтали отсчитываются частоты, а по вертикали - интенсивности составляющих этих частот, то многие частотные преобразования становятся похожими на амплитудные преобразованиям над спектром. Например, фильтрация - усиление или ослабление определенных полос частот - сводится к наложению на спектр соответствующей амплитудной огибающей. Однако частотную модуляцию таким образом представить нельзя - она выглядит, как смещение всего спектра или его отдельных участков во времени по определенному закону.
Для реализации частотных преобразований обычно применяется спектральное разложение по методу Фурье, которое требует значительных ресурсов. Однако имеется алгоритм быстрого преобразования Фурье (БПФ, FFT), который делается в целочисленной арифметике и позволяет уже на младших моделях 486 разворачивать в реальном времени спектр сигнала среднего качества. При частотных преобразованиях, кроме этого, требуется обработка и последующая свертка, поэтому фильтрация в реальном времени пока не реализуется на процессорах общего назначения. Вместо этого существует большое количество цифровых сигнальных процессоров (Digital Signal Processor - DSP), которые выполняют эти операции в реальном времени и по нескольким каналам.
4. Фазовые преобразования. Сводятся в основном к постоянному сдвигу фазы сигнала или ее модуляции некоторой функцией или другим сигналом. Благодаря тому, что слуховой аппарат человека использует фазу для определения направления на источник звука, фазовые преобразования стереозвука позволяют получить эффект вращающегося звука, хора и ему подобные. При помощи сдвига фазы на 90-180 градусов (последнее получается простым инвертированием отсчетов) реализуется эффект "псевдообъемности" звука (Surround).
5. ВременнЫе преобразования. Заключаются в добавлении к основному сигналу его копий, сдвинутых во времени на различные величины. При сдвигах на величины, сравнимые с периодом сигнала, эти преобразования превращаются в фазовые; при небольших сдвигах за пределами перида (примерно менее 20 мс) это дает эффект, близкий к хоровому (размножение источника звука), при бОльших - эффекты многократного отражения: реверберации (20..50 мс) и эха (более 50 мс).
6. Формантные преобразования. Являются частным случаем частотных и оперируют с формантами - характерными полосами частот, встречающимися в звуках, произносимых человеком. Каждому звуку соответствует свое соотношение амплитуд и частот нескольких формант, которое определяет тембр и разборчивость голоса. Изменяя параметры формант, можно подчеркивать или затушевывать отдельные звуки, менять одну гласную на другую, сдвигать регистр голоса и т.п.
Как делаются звуковые эффекты, применяемые в музыке?
При помощи различных комбинаций описанных выше преобразований. Вот наиболее распространенные звуковые эффекты:
вибрато - амплитудная или частотная модуляция сигнала с небольшой частотой (до 10 Гц). Амплитудное вибрато также носит название тремоло; на слух оно воспринимается, как замирание или дрожание звука, а частотное - как "завывание" или "плавание" звука (типичная неисправность механизма магнитофона - детонация). Вибрато обычно реализуется модуляцией синусоидальным сигналом, а тремоло - треугольным или пилообразным сигналом либо многократным автоматическим перезапуском ноты.
динамическая фильтрация (wah-wah - "вау-вау") - реализуется изменением частоты среза или полосы пропускания фильтра с небольшой частотой. На слух воспринимается, как вращение или заслонение/открывание источника звука - увеличение высокочастотных составляющих ассоциируется с источником, обращенным на слушателя, а их уменьшение - с отклонением от этого направления.
фленжер (flange - гребень). Название происходит от способа реализации этого эффекта в аналоговых устройствах - при помощи так называемых гребенчатых фильтров, имеющих АЧХ такого же вида. Гребенчатые фильтры могут строиться на линиях задержки - при этом постоянный сдвиг фазы создает характерную форму АЧХ. Заключается в добавлении к исходному сигналу его копий, сдвинутых во времени на небольшие величины (примерно 3..30 мс) с возможной частотной модуляцией копий или величин их временных сдвигов и обратной связью (суммарный сигнал снова копируется, сдвигается и т.п.). На слух это ощущается как "дробление", "размазывание" звука, возникновение биений - разностных частот, характерных для игры в унисон или хорового пения, отчего фленжеры с определенными параметрами (сдвиги с модуляцией противофазным сигналом) применяются для получения хорового эффекта (chorus). Меняя параметры фленжера, можно в значительной степени изменять первоначальный тембр звука.
фейзер (phase - фаза) - смешивание исходного сигнала с его копиями, сдвинутыми по фазе (что равноценно сдвигу по времени на доли-единицы миллисекунд); величина сдвига может модулироваться во времени. По сути, это частный случай фленжера, но с намного более простой аналоговой реализацией, так как сдвиг по фазе выполняется проще задержки по времени (цифровая реализация одинакова). Изменение фазовых сдвигов суммируемых сигналов приводит к подавлению отдельных гармоник или частотных областей, как в многополосном фильтре. На слух такой эффект напоминает качание головки в стереомагнитофоне - физические процессы в обоих случаях примерно одинаковы.
реверберация (reverberation - повторение, отражение). Получается путем добавления к исходному сигналу затухающей серии его задержанных во времени копий. Это имитирует затухание звука в помещении, когда за счет многократных отражений от стен, потолка и прочих поверхностей звук приобретает полноту и гулкость, а после прекращения звучания источника затухает не сразу, а постепенно. При этом время между последовательными отзвуками (примерно 15..50 мс) ассоциируется с величиной помещения, а их интенсивность - с его гулкостью. По сути, ревербератор представляет собой частный случай фленжера без модуляции и с увеличенной задержкой между отзвуками основного сигнала, однако особенности слухового восприятия качественно различают эти два вида обработки.
эхо (echo). Реверберация с еще более увеличенным временем задержки - выше примерно 50 мс. При этом слух перестает субъективно воспринимать отражения, как призвуки основного сигнала, и начинает воспринимать их как повторения. Эхо обычно реализуется так же, как и естественное - с затуханием повторяющихся копий.
дистошн (distortion - искажение) - намеренное искажение формы звука, что придает ему резкий, скрежещущий оттенок. Наибольшее применение получил в качестве гитарного эффекта (классическая гитара heavy metal). Получается переусилением исходного сигнала до появления ограничений в усилителе (среза верхушек импульсов) и даже его самовозбуждения. Благодаря этому исходный сигнал становится похож на прямоугольный, отчего в нем появляется большое количество новых нечетных гармоник, резко расширяющих спектр. Этот эффект применяется в различных вариациях (fuzz, overdrive и т.п.), различающихся способом ограничения сигнала (обычное или сглаженное, весь спектр или полоса частот, весь амплитудный диапазон или его часть и т.п.), соотношением исходного и искаженного сигналов в выходном, частотными характеристиками усилителей (наличие/отсутствие фильтров на выходе).
компрессия - сжатие динамического диапазона сигнала, когда слабые звуки усиливаются сильнее, а сильные - слабее. На слух воспринимается как уменьшение разницы между тихим и громким звучанием исходного сигнала. Используется для последующей обработки методами, чувствительными к изменению амплитуды сигнала. В звукозаписи используется для снижения относительного уровня шума и предотвращения перегрузок. В качестве гитарной приставки позволяет значительно (на десятки секунд) продлить звучание струны без затухания громкости.
вокодер (voice coder - кодировщик голоса) - синтез речи на основе произвольного входного сигнала с богатым спектром. Речевой синтез реализуется обычно при помощи формантных преобразований: выделение из сигнала с достаточным спектром нужного набора формант с нужными соотношениями придает сигналу свойства соответствующего гласного звука. Изначально вокодеры использовались для передачи кодированной речи: путем анализа исходного речевого сигнала из него выделялась информация об изменении положений формант (переход от звука к звуку), которая кодировалась и передавалась по линии связи, а на приемном конце блок управляемых фильтров и усилителей синтезировал речь заново. Подавая на блок речевого синтеза звучание, например, электрогитары и произнося слова в микрофон блока анализа, можно получить эффект "разговаривающей гитары"; при подаче звучания с синтезатора получается известный "голос робота", а подача сигнала, близкого по спектру к колебаниям голосовых связок, но отличающегося по частоте, меняет регистр голоса - мужской на женский или детский, и наоборот.
Что такое Karaoke и как это делается?
Это удаление из песни голоса исполнителя - с тем, чтобы получить так называемую "минусовку" (-1), которую можно использовать в качестве сопровождения при собственном пении. Если в песне звучит голос только одного исполнителя - он обычно находится примерно посередине стереопанорамы, и удалить его можно путем вычитания одного канала из другого. Если голос находится не точно посередине - перед вычитанием нужно уравнять амплитуды голоса в обоих каналах. Если поют несколько голосов, они могут быть удалены путем фильтрации соответствующих частот. Естественно, все эти преобразования приводят к заметной потере качества фонограммы.
Karaoke также называют специально сделанные фонограммы песен без голоса исполнителя.
Как устроен электронный музыкальный синтезатор?
Большинство популярных аналоговых синтезаторов, работающих на разностном принципе, построены по модульной технологии, сложившейся к концу 70-х годов, и содержат блоки Key, Env, VCO, VCA, VCF, LFO, NG, Mix и другие.
Key (Keyboard - клавиатура) - блок музыкальной клавиатуры. В ответ на нажатия клавиш формирует сигнал нажатия, запускающий остальные блоки синтезатора, а также сигнал высоты, напряжение которого пропорционально номеру нажатой клавиши.
VCO (Voltage Controlled Oscillator - генератор, управляемый напряжением, ГУН) - генератор исходного сигнала синтезатора. Вырабатывает прямоугольные колебания с различной скважностью (разным спектром сигнала), а также синусоидальные, треугольные и пилообразные, логарифм частоты которых пропорционален управляющему напряжению.
NG (Noise Generator - генератор шума) вырабатывает шум - в основном белый или розовый.
Mix (Mixer - микшер) объединяет вырабатываемые генераторами сигналы, суммируя их в различных пропорциях, задаваемых регуляторами. Изменение пропорций смешиваемых сигналов дает изменение спектральной плотности выходного сигнала, который подается в другие блоки для дальшейшей обработки.
VCF (Voltage Controlled Filter - управляемый напряжением фильтр) - блок перестраиваемых фильтров. Обычно под воздействием управляющего напряжения изменяется полоса пропускания фильтра (Band, Contour), частота среза (Cutoff) и добротность фильтра - подъем или спад усиления внутри полосы (Resonance - резонанс). Чаще всего используется фильтр нижних частот (ФНЧ), срезающий высшие частоты, с резонансом около частоты среза; в более сложных моделях используются также полосовые фильтры и ФВЧ. Все или часть параметров фильтров выведены на регуляторы, задающие их исходные значения.
Env (Envelope - огибающая) вырабатывает напряжение, изменяющееся по фазам ADSR (Attack - Decay - Sustain - Release). При поступлении сигнала запуска начинается выработка фазы Attack, которая переходит в Decay и далее - в Sustain, где остается до момента снятия сигнала запуска, после чего формируется фаза Release и цикл выработки огибающей завершается. Длительности фаз ADR и уровень S задаются регуляторами. На простых одноголосых синтезаторах имеется только один блок Env, который позволяет сформировать огибающую для одного звука; в многоголосных синтезаторах их несколько. В простых инструментах блок Env формирует только амплитудную огибающую звука, в более сложных имеется отдельный блок для выработки спектральной огибающей для фильтра или дополнительного управления синтезом.
VCA (Voltage Controlled Amplifier - управляемый напряжением усилитель) формирует выходной сигнал синтезатора. Обычно его управляющее напряжение берется с блока Env, что дает амплитудную огибающую звука.
LFO (Low Frequency Oscillator - генератор низкой частоты) вырабатывает колебания различной формы частотой примерно от 0.1 до 20 Гц, которые могут быть смешаны с любым из других управляющих напряжений. Подача их на VCO дает частотную модуляцию, на VCF - эффект "вау-вау", "вращающегося" или "открывающегося" источника звука, на VCA - амплитудное вибрато (тремоло). Некоторые LFO могут вырабатывать случайно меняющийся ступенчатый сигнал, дающий интересные на слух виды модуляции.
Каждый из блоков синтезатора полностью независим от других - все они могут соединяться любым способом для получения различных режимов синтеза. В концертных синтезаторах большинство блоков соединены жестко (Key - на VCO и Env, Env - на VCA, LFO - на VCO и VCA и т.п.), в студийных входы и выходы каждого блока выведены на переднюю панель, и соединение делается внешними шнурами.
В начале 80-х начали внедряться цифровые методы обработки, которые поначалу комбинировались с аналоговыми, выполняя каждый свойственные ему функции. Например, блоки Key, VCO, LFO, NG и Env проще реализуются цифровым способом, а Mix и VCF - аналоговым. При этом цифровые блоки через ЦАП подавали управляющие напряжения на аналоговые. Преимущество цифровых формирователей - более высокая стабильность, точность, а главное - повторяемость сигналов, поскольку аналоговая (непрерывная) форма заменена дискретной (конечной). При достаточно большом числе дискрет ступенчатость перестает ощущаться на слух, но повторяемость остается.
Тогда же появились полностью цифровые FM-синтезаторы, которые не содержали наиболее сложных в цифровой реализации управляемых фильтров.
В середине 80-х был освоен выпуск быстродействующих DSP, и появились полностью цифровые разностные и самплерные синтезаторы.
По сути, цифровой синтезатор представляет собой обыкновенный компьютер с устройствами ввода (клавиатура, кнопки, рычажки, датчики, MIDI), вывода (звук, индикаторы, MIDI), обработки (генераторы, преобразователи, память и т.п.) и центральным процессором, координирующим их работу. Например, клавишный синтезатор Roland JV-30 выпускается как в виде отдельного модуля (тонгенератора) SC-55, так и в виде звуковой карты для PC - SCC-1.
Какие методы синтеза используются в популярных синтезаторах?
В большинстве моделей выпуска 70-х годов использовался в основном разностный метод синтеза. В моделях выпуска начала-середины 80-х - частотно-модуляционный. В конце 80-х стали преобладать самплерные методы, а в начале 90-х - таблично-волновые, с обработкой на мощных DSP. Популярные модели разностных синтезаторов - PolyMoog, Crumar, ARP; частотно-модуляционных - Yamaha DX, ритмический Roland TR; самплерных - E-mu Proteus XR, Korg M1; таблично-волновых - Yamaha PSS/PSR, Roland JV и E, Ensoniq TS и ASR (самплер-синтезатор); таблично-волновых с развитой обработкой звука - Yamaha SY, Kurzweil 2000.
В первых синтезаторах 40-х..60-х годов использовался в основном аддитивный метод синтеза и его разновидности.
Какими способами можно получить звук на IBM PC?
1. Через встроенный громкоговоритель (PC Speaker):
используя в стандартном режиме подключенный к нему канал 2 системного таймера, который может генерировать прямоугольные колебания различной частоты. Таким образом можно получать простые тональные звуки заданной частоты и длительности, однако управление громкостью и тембром звука в этом способе невозможно.
используя прямое управление громкоговорителем через системный порт 61, подавая на него серию импульсов меняющейся частоты и скважности (соотношения длительности 1/0), Так можно получать различные звуковые эффекты: шум, модуляцию, изменение окраски тона. Далее, можно принять во внимание, что диффузор громкоговорителя обладает инерцией (способностью к интегрированию прямоугольного сигнала): например, при подаче уровня 1 диффузор начинает движение, при подаче уровня 0 - тормозится и через какое-то время начинает движение в обратную сторону; своевременно меняя уровни 0/1, можно заставить диффузор двигаться по любой траектории, иначе говоря - излучать звук любой частоты и окраски. Интегрирующим свойством обладает и схема усилителя громкоговорителя, которая обычно содержит фильтрующий конденсатор. Метод такого управления громкоговорителем называется широтноимпульсной модуляцией (ШИМ): частота колебаний диффузора определяется частотой следования импульсов, а амплитуда - их скважностью (шириной положительной части импульса).
Недостаток этого способа - существенное различие массы и упругости у диффузоров разных громкоговорителей - звук, довольно чистый на одном, может превратиться в подобие шума на другом; кроме этого, за счет более тонкого управления требуется гораздо большая скорость процессора, а звук получается намного тише, чем при использовании таймера.
используя нестандарные методы программирования канала 2 таймера: на генерацию импульсов различной длительности и скважности или серий импульсов сверхзвуковой частоты (метод частотной модуляции - ЧМ). В первом случае снова получается метод ШИМ, но со значительно сниженными затратами на переключение уровней и отслеживание времени, которые теперь возлагаются на сам таймер. Во втором случае звуковой сигнал получается путем усреднения высокочастотных колебаний в интегрирующей схеме громкоговорителя.
2. Через простой ЦАП:
подключаемый к параллельному (LPT) порту (Covox). На восьми выходных линиях данных (D0..D7) параллельного порта собирается взвешивающий сумматор - схема, суммирующая логические уровни 0/1 с весами 1, 2, 4, ..., 128, что дает для каждой из комбинаций восьми цифровых сигналов 0..255 линейно изменяющийся аналоговый сигнал с уровнем 0..X (максимальный уровень X зависит от параметров сумматора). Простейший сумматор делается на резисторах, более сложный - на микросхемах ЦАП (например 572ПА). При записи в регистр данных параллельного порта на выходе ЦАП устанавливается уровень, пропорциональный записанному значению, и сохраняется до записи следующего значения. Таким образом получается 8-разрядный преобразователь с частотой дискретизации до нескольких десятков килогерц. Добавив два регистра хранения и логику выбора, можно сделать стереоЦАП, коммутируя каналы с помощью служебных сигналов порта.
собираемый на вставляемой в разъем расширения плате. В этом случае достаточно просто получается 12и 16-разрядный ЦАП (моно или стерео). Попутно он может содержать таймер, генерирующий запросы прерывания, и/или логику поддержки прямого доступа к памяти (DMA), которая позволяет равномерно и без участия процессора передавать данные из памяти на преобразователь.
3. Через специальную звуковую карту:
используя ЦАП, который есть почти на всех картах. В этом случае карта программируется на вывод оцифрованного звука напрямую или через DMA, а подготовка оцифровки в памяти делается так же, как и при выводе на простой ЦАП.
используя синтезатор, который тоже есть почти на всех картах. Большинство карт оснащено простейшими 2или 4-операторными FM-синтезаторами; почти на всех современных картах установлены также WT-синтезаторы. При наличии обоих синтезаторов ими можно управлять одновременно, увеличивая набор тембров и число голосов; параллельно можно задействовать и ЦАП карты, через который удобно выводить различные звуковые эффекты.
4. При помощи внешнего синтезатора, управляемого от компьютера:
используя MIDI-порт, который имеется практически на всех звуковых картах. Выход MIDI Out (обычно при помощи MIDI-адаптера) соединяется со входом MIDI In синтезатора, и через порт подаются MIDI-команды синтезатору. Одновременно можно принимать MIDI-сообщения от синтезатора, подключив его MIDI Out к MIDI In звуковой карты.
используя стандартный последовательный порт, если в BIOS Setup есть возможность переключить его в режим MIDI-совместимости (тактовая частота, при которой возможно получение скорости 31.25 кбит/с). В этом случае понадобится самодельный адаптер для токовой петли.
используя специальные карты-адаптеры - например, Roland MPU-401.
Что такое tracker?
Любительская программа для записи и воспроизведения музыки на нескольких дорожках (треках); трекеры впервые появились на компьютере Amiga. Поскольку трекеры ориентированы на текстовое представление, в них, в отличие от принятой в музыке горизонтальной нотной записи, применяется вертикальная запись нот при помощи буквенно-цифровых обозначений (например, D-5 - нота Ре пятой октавы, A#4 - нотя Ля диез четвертой октавы, и так далее); при этом каждая дорожка представляется собственной колонкой, а совокупность дорожек образует партитуру. Кроме нот, в дорожках могут встречаться различные команды управления: фиксация ноты (педаль), вибрато, тремоло, портаменто, переход к другому участку партитуры и т.п.
Кроме вертикальной записи, в трекерах применяется характерная для них структура музыки: вся партитура делится на кадры (pattern) обычно одинакового размера, а композиция представляет собой последовательность кадров, что очень удобно для организации повторяемых фрагментов. Каждый кадр состоит обычно из 64 строк, что удобно для принятого в трекерах шестнадцатиричного представления номеров и подходит для распространенных музыкальных размеров.
В трекерах применяется два метода синтеза звука: FM - при использовании SBили AdLib-совместимой звуковой карты, и самплерный - при использовании PC Speaker, Covox, ЦАП или WT-синтезатора звуковой карты (последнее - обычно при работе с картой GUS, поскольку она была первой относительно недорогой и распространенной WT-картой с загружаемыми самплами). FM-трекеры используют параметры инструментов для FM-синтезатора, а самплерные трекеры - записи звучаний инструментов (самплы) в собственном формате. В зависимости от сложности трекера могут использоваться 8или 16-разрядные самплы с различными частотами дискретизации, по одному или по несколько самплов на инструмент, неизменные или с возможностью задания огибающих, эффектов и т.п. Современные трекеры (Fast Tracker II, Impulse Tracker) по возможностям не уступают многим концертным синтезаторам, исключая, конечно, качество самого звука и гибкость управления им.
Каждый трекер хранит произведения в своем собственном формате, однако многие способны загружать файлы других трекеров. Ранние простые трекеры использовали формат MOD, пришедший с Amiga, более поздние ввели новые форматы (STM, S3M, ULT, XM, IT). В файл записывается вся необходимая для его воспроизведения информация - собственно партитура, описания инструментов, сами самплы и т.п., поэтому произведение будет звучать точно так же при использовании другой аппаратуры вывода цифрового звука с тем же качеством, или в совместимом трекере.
Имеется также большое количество проигрывателей (player) - программ для воспроизведения файлов, подготовленных в трекерах. Наиболее универсальный из них - Cubic Player. При наличии звуковой карты GUS или SB AWE32/SB 32 с установленным ОЗУ он использует для проигрывания инструментов аппаратный WT-синтезатор карты, загружая самплы в ОЗУ синтезатора. На AWE32/SB 32 при этом также поддерживается регулировка глубины эффектов Reverb/Chorus.
При проигрывании трекерных модулей на другой звуковой карте или через другой трекер/проигрыватель звук может отличаться - за счет различий в реализации вывода звука через карту или неточностей в отработке трекерных команд. Например, Fast Tracker II при работе с GUS использует его WT-синтезатор, с SB 16 - выводит звук через 16-разрядный цифровой канал, а на остальных картах - через 8-разрядный канал с соответствующим понижением качества звука.
Что такое MIDI?
MIDI - Musical Instrument Digital Interface (цифровой интерфейс музыкальных инструментов) - стандарт на соединение инструментов и передачи информации между ними. Каждый инструмент имеет три разъема: In (вход), Out (выход) и Thru (повторитель входного сигнала), что позволяет объединить в сеть практически любое количество инструментов.
Способ передачи - токовая петля (5 мА). Информация передается байтами, в последовательном стартстопном коде (8 битов данных, один стоповый, без четности - формат 8-N-1), со скоростью 31250 бит/с. В этом MIDI-интерфейс очень похож на последовательный интерфейс IBM PC - отличие только в скорости и способе передачи: в PC используется интерфейс V24 (RS-232) с передачей сигналов путем изменения напряжения. Частоту 31250 бит/с на стандартном интерфейсе IBM PC получить нельзя.
Поток данных, передаваемый по MIDI, состоит из сообщений (событий): нажатие/отпускание клавиш, изменение положений регуляторов (MIDI-контроллеров), смена режимов работы, синхронизация и т.п. Можно сказать, что по MIDI передается партитура музыкального произведения, однако есть и специальные виды сообщений - System Exclusive (SysEx) - в которых может содержаться любая информация для инструмента - например, оцифрованный звук для загрузки в ОЗУ, партитура ритм-блока и т.п. Обычно SysEx уникальны для каждого инструмента и не совместимы с другими инструментами.
Большинство сообщений содержит в себе номер канала (1..16) - это чаще всего условный номер инструмента в сети, для которого они предназначены. Однако один инструмент может "отзываться" и по нескольким каналам - именно так и работают звуковые карты и многие тонгенераторы (внешние модули синтеза). Прочие сообщения являются общими и воспринимаются всеми инструментами в сети.
В сообщениях о нажатиях/отпусканиях клавиш передается номер ноты - число в диапазоне 0..127, определяющее условный номер полутона: ноте До первой октавы соответствует номер 60. Отсюда происходит "компьютерная" нумерация октав, начинающаяся с нуля, в которой первой октаве соответствует номер 5, а нота До нулевой октавы имеет нулевой MIDI-номер.
При записи MIDI-потока в файл (MID, RMI) он оформляется в один из трех стандартных форматов:
0 - обычный MIDI-поток 1 - несколько параллельних потоков (дорожек) 2 - несколько независимых последовательных потоков
Разбиение на дорожки удобно для выделения партий отдельных инструментов - популярные MIDI-секвенсоры формируют файлы именно формата 1.
Какие форматы используются для представления звука и музыки?
В настоящее время стандартом де-факто стали два формата: Microsoft RIFF (Resource Interchange File Format - формат файлов передачи ресурсов) Wave (.WAV) и SMF (Standard MIDI File - стандартный MIDI-файл) (.MID). Первый содержит оцифрованный звук (моно/стерео, 8/16 разрядов, с разной частотой оцифровки), второй - "партитуру" для MIDI-инструментов (ноты, команды смены инструментов, управления и т.п.). Поэтому WAV-файл на всех картах, поддерживающих нужный формат, разрядность и частоту оцифровки звучит совершенно одинаково (с точностью до качества преобразования и усилителя), а MID-файл в общем случае - по-разному.
RAW - формат "чистой оцифровки", не содержащий заголовка. Обычно оцифровка хранится в 16-разрядном знаковом (signed) формате, хотя могут быть и исключения.
VOC и CMF - форматы представления от фирмы Creative. VOC-файлы содержат оцифрованный звук, CMF-файлы - нотные партитуры и параметры инструментов для синтезаторов OPL3.
AIFF (Audio-...) - формат звуковых файлов на Macintosh и SGI.
AU - формат звуковых файлов SUN/NeXT.
MOD - широко распространенный трекерный формат. Содержит оцифровки инструментов и партитуру для них, отчего звучит везде примерно одинаково (опять же - с точностью до способа и качества воспроизведения). В оригинале поддерживаются четыре канала, в расширениях - до восьми и более.
STM - формат Scream Tracker, примерно того же уровня, что и MOD.
S3M - формат Scream Tracker 3. Развитие STM в сторону увеличения разрядности инструментов и количества музыкальных эффектов. Сам ST3 поддерживает до 32 каналов, но не поддерживает предусмотренных в формате 16-разрядных самплов.
XM - формат Fast Tracker. Один из наиболее высокоуровневых среди трекерных форматов. Поддерживаются 16-разрядные самплы, один инструмент может содержать различные самплы на разные диапазоны нот, возможно задание амплитудных и панорамных огибающих.
IT - формат Impulse Tracker. Подобен XM, так же поддерживает 16-разрядные самплы.
Как преобразовать цифровой звук из одного формата в другой?
Существует большое количество программ преобразования форматов. Наиболее известная из них - Convert (автор - Jesus Villena). Она преобразует файлы нескольких десятков различных форматов - обычного цифрового звука (RAW, WAV, VOC), банков инструментов звуковых карт и синтезаторов (PAT, SBK, KRZ, SYW), партитур и инструментов трекеров (MOD, S3M, XM). Любые хотя бы частично совместимые форматы могут быть преобразованы один в другой в пределах общей совместимости. Недостаток программы Convert - невозможность ручного задания параметров оцифровки, что не позволяет преобразовать форматы без заголовка (RAW, SND и другие).
Другая мощная программа преобразования - SOX (SOund eXchange). Существует под UNIX, OS/2 и DOS. Позволяет задать параметры оцифровки, а также сделать преобразования - усиление/ослабление и добавление эффекта эхо.
Программа AWAVE также поддерживает множество форматов, но работает только под Windows с 32-разрядным интерфейсом (NT, 95 или Win32s).
Какие программы используются для синтеза звука?
Stomper, Rubber Duck, Orangator, Virtual Waves, Wave Craft, Synthic, Wave Gen, Rebirth, Sim Synth, Audio Architect, VAZ, Analogic, Sound Producer, Generator, Retro AS-1 и другие. Эти программы моделируют работу аддитивных, разностных и FM-синтезаторов, рассчитывая режимы работы и формируя звуковую волну. Многие из этих программ имеют встроенные секвенсоры, по командам которых сгенерированные звуки могут воспроизводиться в нужной последовательности, образуя ритмическо-басовую основу композиции.
Какие программы используются для обработки цифрового звука?
Сейчас популярны программы Cool Edit, Sound Forge, Gold Wave, Samplitude, Software Audio Workshop (SAW), WaveLab. Они дают возможность просматривать осциллограммы обоих стереоканалов, прослушивать выбранные участки, делать вырезки и вставки, амплитудные и частотные преобразования, звуковые эффекты (эхо, реверберацию, фленжер, дистошн), наложение других оцифровок, изменение частоты оцифровки, генерировать различные виды шумов, синтезировать звук по аддитивному и FM методам и т.п. Cool Edit содержит спектральный анализатор, отображающий спектр выбранного участка оцифровки. WaveLab позволяет накладывать эффекты и управлять ими в реальном времени при помощи виртуальных панелей. Cool Edit Pro позволяет сводить подготовленные оцифровки, задавая для них положение, уровень и панораму в виртуальном микшерском пульте.
Многие программы обработки звука позволяют загружать и сохранять оцифровки в различных форматах, что дает возможность преобразовывать файлы из одного формата в другой и разделять стереоканалы.
Какие программы работают с MIDI-форматом?
Это так называемые программы-секвенсоры (sequencer), аналогичные аппаратным MIDI-секвенсорам. В их функции входит запись и воспроизведение MIDI-партитур, отображение их в различных форматах, различное редактирование как нот (транспонирование (transposition), квантование (quantization), сдвиг фрагмента (sliding) и т.п.), так и управляющих событий - смены инструментов, генерации серий значений контроллеров, имитирующих движение регуляторов, вставки SysEx и т.п. Обычно профессиональные секвенсоры поддерживают три основных формата отображения:
нотный (staff). Изображается классический нотный стан, принятый в музыкальной практике. Однако в связи с тем, что MIDI-формат описывает события, а не нотную запись, многие принятые в музыке обозначения не допускаются (прежде всего это относится к лигам - некоторые секвенсоры расставляют их автоматически).
временно-высотный (piano roll). Изображается временной график включения/выключения нот (нажатий/отпусканий), на котором активная нота выглядит горизонтальной линией соответствующей длины и в соответствующем временном положении. Слева для удобства определения высоты нот изображается фортепианная клавиатура.
событийный (events). Изображается список всех MIDI-событий с указанием времени появления каждого из них.
Профессиональные секвенсоры позволяют также присоединять к партитуре WAV-файлы, которые будут воспроизводиться вместе с нею в нужные моменты времени.
Наиболее известны секвенсоры Voyetra Plus Gold - под DOS и Recording Session, Cakewalk, Cubase и Logic - под Windows. Первый и два последних относятся к профессиональным, хотя Cakewalk по некоторым своим возможностям уступает Voyetra и Cubase. Cakewalk и Cubase выпускаются в нескольких версиях: Cakewalk - Apprentice, Pro и Pro Auduo, Cubase - Lite, Score и Studio.
Как преобразовать звук (WAV) в партитуру (MID/MOD/XM/IT)?
Никак. Эта задача в общем случае принципиально нерешаема, а в частных сводится к распознаванию большого числа сложных звуковых образов и требует очень большого количества ресурсов. Для предельного случая (одноголосное исполнение тембром с выраженной звуковысотностью) возможно распознавание высоты отдельных нот и генерация партитуры (программы Baston, Sound2Midi, Recogn, AutoScore и др.).
Какие еще программы полезны при работе со и музыкой?
Audio Compositor - секвенсор, объединенный с эмулятором синтезатора. Позволяет загрузить самплы инструментов в различных форматах и составить из них композицию, записываемую потом в WAV-файл.
Cylonix Vocoder - эмулятор вокодера.
Effects Master - наложение эффектов в реальном времени на сигнал со входа карты или из WAV-файла.
Joy2Mid/Joy4Mid - передача MIDI-сообщений при помощи джойстика.
MediPlay - небольшой удобный проигрыватель для WAV/MIDI-файлов с возможностью передачи команд "GM Reset/GS Reset" между MIDI-файлами.
MIDIMon, MIDI-OX, HUBI's Loopback и HUBI's MIDI Tools - средства для организации виртуальных MIDI-кабелей под Windows, отслеживания приходящих MIDI-сообщений, приема/передачи команд и SysEx.
Virtual Audio Cable (VAC) - средство для организации виртуальных Wave-кабелей под Windows с целью прямой записи на диск или обработки в реальном времени результатов вывода звуковых программ.
MuitiMid - драйвер для Windows, организующий множественный доступ к MIDI-портам.
Spectra Lab - мощный анализатор спектра.
SweepGen, Test Tone Generator - генераторы стационарных и изменяющихся во времени тестовых сигналов.
DDClip - программа для сведения нескольких видеои звуковых дорожек с удобным интерфейсом и возможностью наложения эффектов в реальном времени.
Какие секвенсоры поддерживают средства управления GS и XG?
Управление при помощи контроллеров поддерживают все MIDI-секвенсоры, однако таблицы символических имен контроллеров (5 - Portamento Time, 71 - Harmonic Contents и т.п.) из известных секвенсоров имеют только Cubase и Cakewalk. Таблицы для инструментов и контроллеров XG были добавлены в Cakewalk 5.
Управление при помощи NRPN поддерживается последними версиями Cubase и версией Cakewalk 6. Используемые NRPN для GS и XG совпадают.
Удобное управление параметрами эффектов через SysEx универсальными секвенсорами не поддерживается. Для Yamaha XG выпущен секвенсор XG Works (Yamaha). Для работы с SysEx в обычных секвенсорах можно использовать различные программы подготовки пакетов SysEx для конкретных моделей синтезаторов - например, GS Edit для Roland GS или XGEdit для Yamaha XG. Полученные пакеты могут затем использоваться в любом секвенсоре, который поддерживает SysEx.
Почему могут неправильно переключаться банки в Cakewalk?
Не все синтезаторы используют стандартный метод переключения банков - передачу старшего байта номера банка контроллером 0 и младшего - контроллером 32. Для этого в пунктах Settings - Instruments - Configure - Define Instruments (а в CW 6.01 - и в диалоге Track Properties) есть пункт Bank Select Method - попробуйте переключение только контроллером 0 или контроллером 32.
Чем различаются разные версии Cakewalk?
Professional 3.0 - работа только с MIDI, общий план партитуры только на уровне пустых/заполненных тактов, настройка фильтров внутри операций редактирования.
Pro Audio 4.0 - поддержка звуковых дорожек, минимальная обработка звука в них, дорожки могут делиться на участки (клипы), общий план партитуры и операции drag'n'drop на уровне клипов, независимая настройка фильтров, перетаскивание групп нот в Piano Roll и Staff.
Pro Audio 5.0 - версия для Windows 95, дополнительные операции для обработки звука (reverb, chorus, эквалайзер), оптимизирована работа со звуковыми дорожками. Не работает под Windows NT.
Pro Audio 6.0 - поддержка эффектов на звуковых дорожках в реальном времени (CFX), возможность копирования ссылок на клип вместо содержимого, настраиваемые панели управления (StudioWare) вместо окна Faders, поддержка RPN/NRPN, упрощенная и более удобная панель настройки параметров инструмента, замена окна Controllers на универсальную панель Velocity/Controllers/Wheel/RPN/NRPN в окне Piano Roll, работа с ударной нотацией в окне Staff, создание и использование типовых наборов параметров (Presets) в сложных операциях редактирования. Не работает под Windows NT.
Pro Audio 6.01 - возможность смешивания звуковых дорожек на отдельную, дополнительные функции в редакторе звуковых дорожек и эффектов, экспорт звуковых дорожек в форматах RealAudio, автоматическая загрузка банков SoundFont для серии AWE. Может работать под Windows NT 4.0 и выше.
Почему при игре по MIDI "залипают" ноты, контроллеры и т.п.?
Чаще всего - из-за превышения пропускной способности самого MIDI-канала или конкретного инструмента. Например, при "рисовании" графика движения движения контроллера в секвенсоре генерируется достаточно большое количество MIDI-сообщений, которое при передаче по каналу может приводить к переполнению входного MIDI-буфера инструмента и потере идущих следом MIDI-сообщений. На некоторых инструментах это видно по миганию индикатора "MIDI Error". Чтобы этого не случалось, серии посылок контроллеров необходимо "прореживать", оставляя только ощутимые на слух изменения. В Cakewalk для этого есть специальные CAL-программы thinaft, thinctrl и thinwhl.
Подобные ошибки могут также возникать из-за ошибок в реализации MIDI-интерфейса или его драйверов. Например, MIDI-интерфейс звуковых карт SB 32 PnP моделей CT-3600 и CT-3620 спонтанно генерирует на выходе последний выведенный через интерфейс байт, нарушая правильность MIDI-сообщений, а драйверы SB 16, SB 32 и AWE32 версий 1996-1997 годов имеют обыкновение терять байты даже на быстрых машинах. Ошибку интерфейса можно частично замаскировать, включив в секвенсоре вывод синхронизирующих сообщений (MIDI Clock).
Можно ли программно сделать WT MIDI-синтезатор на карте без WT?
Это можно сделать на любой звуковой карте, способной воспроизводить цифровой звук. Наиболее известны три программных продукта, реализующих программный WT-синтез с управлением по MIDI: Cubic Player, Yamaha Soft Synthesizer (S-YG20, S-YXG50, S-YXG70), Roland Virtual Sound Canvas 55/88, Reality, GigaSampler. Кроме этого, встроенный программный синтезатор имеется в Windows 98.
Cubic Player - проигрыватель модулей большинства трекерных форматов и MIDI-файлов для DOS. Для проигрывания трекерных модулей используются их собственные инструменты и самплы, для проигрывания MIDI-файлов необходим комплект инструментов (patches) от карты GUS, состоящий из ~190 файлов *.PAT, содержащих самплы и параметры инструментов - по одному на инструмент, и файла конфигурации default.cfg, задающего соответствие номеров инструментов в MIDI и PAT-файлов. Набор можно скопировать с компьютера, на котором был установлен GUS, либо установить с дискет при помощи пункта Restore Files в инсталляторе для GUS.
В файл конфигурации Cubic Player - cp.cfg (если его нет - создать) - нужно внести строчку
-mp<полное имя каталога с набором инструментов>.
Синтезаторы S-YG20, S-YXG50 и VSC-55/88 представляют собой драйверы для Windows 3.1/95, создающие виртуальные MIDI-устройства. S-YG20 реализует подмножество стандарта XG, S-YXG50 - полный стандарт XG (требует процессора P5-166 или MMX), VSC-55 - подмножество стандарта GS, VSC-88 - полный стандарт GS. Для вывода звука используется стандартное устройство цифрового воспроизведения Windows. Из-за программной обработки самплов звук несколько отстает от MIDI-команд, из-за чего эти драйверы неудобно использовать для работы в реальном времени, однако при проигрывании MIDI-файлов отставание незаметно.
Reality и GigaSampler представляют собой мощные и сложные программные синтезаторы, пригодные для профессиональной работы. Однако объем и сложность выполняемых ими вычислений требует значительных ресурсов процессора и памяти (GigaSampler работает только на MMX-процессорах).
Что такое Drum Loop?
Дословно - "барабанная петля". Представляет собой файл-оцифровку, в котором записаны отдельные партии ударных или весь ритм целиком, сыгранные "живьем" на ударной установке. Готовые оцифровки вставляются в звуковые дорожки секвенсора и нужным образом зацикливаются, чтобы получилась цельная партия ударных. Drum Loop применяются в тех случаях, когда средствами MIDI трудно или невозможно воспроизвести нужные ударные тембры или манеру игры.
От чего зависит естественность звучания акустических тембров?
Естественность звучания акустических тембров в синтезаторах зависит в основном от двух факторов: подобия тембров (спектральные характеристики звука) и подобия динамических характеристик (так называемые исполнительские воздействия - щипок струны гитары или арфы, касание смычком струн виолончели, перегиб грифа и т.п.), причем последние психоакустические исследования показывают, что даже великолепно оцифрованный инструмент без свойственных ему исполнительских воздействий звучит неестественно, а плохая оцифровка или даже имитация тембра, имеющая характерные признаки игры на данном инструменте воспринимается слухом, как гораздо более похожая. В большинстве случаев наиболее полную информацию о характере звучания несет фаза атаки звука, на которой сильнее всего отражается применяемый при игре способ звукоизвлечения.
Когда оцифровка инструментов выполняется полностью (от начала атаки) - полученное звучание уже несет в себе примененный при записи метод звукоизвлечения. При этом отдельные MIDI-ноты звучат достаточно естественно, однако звучание всегда имеет характер однажды записанного инструмента и с трудом поддается изменению, отчего приходится иметь множество оцифровок с разным характером звукоизвлечения.
Когда оцифровка сделана в так называемой стационарной фазе звучания - после прохождения атаки - звучание отдельной MIDI-ноты уже не будет таким похожим на исходный инструмент, как бы качественно не была выполнена сама запись. Этот метод рассчитан на имитацию исполнительского воздействия средствами MIDI - параметрами инструмента и контроллерами управления громкостью, высотой (pitch bend), модуляцией, фильтрами. Такой подход более трудоемок, однако дает возможность создавать на основе имеющегося стационарного тембра множество тембров со свойствами различных инструментов. Например, для имитации игры на щипковых струнных инструментах синхронно с началом атаки вставляется небольшое быстро спадающее повышение тона, имитирующее более высокое звучание струны в момент щипка; для имитации духовых - постепенно снижающаяся по мере расходования запаса воздуха в легких громкость звучания и т.п.
Нужные исполнительские воздействия для имитации естественного звучания акустических инструментов могут вноситься как вручную при помощи MIDI-редакторов, так и автоматически - для этого служит программа Style Enhancer (NTONYX Computer Laboratory). Она позволяет не только накладывать на MIDI-партитуру воздействия, свойственные тому или иному инструменту при заданной манере игры, но и автоматически распознавать отдельные музыкальные фразы и обороты, преобразуя их в соответствии с заданным стилем исполнения. Также могут быть автоматически рассчитаны такие параметры, как амплитуда замаха перед ударом по струнам, объем воздуха в легких, скорость движения смычка в момент касания струн, и т.п. Многие MIDI-партитуры с правильно сделанной имитацией исполнительских воздействий звучат даже на синтезаторах среднего класса субъективно более естественно, чем "чистые" партитуры - на сложных профессиональных аппаратах.
Как пользоваться методами сжатия Audio MPEG?
Форматы Audio MPEG разработаны для воспроизведения сжатого звука в реальном времени при помощи аппаратного или программного декодера. Например, для воспроизведения наиболее популярного сейчас формата Audio MPEG-1 Layer 3, файлы которого обычно имеют расширение .MP3, достаточно процессора P5-75. Существует несколько программ-проигрывателей: WinPlay, WinAmp, MacAmp и другие. Для сжатия звука в реальном времени мощности современных процессоров недостаточно, однако существуют программные преобразователи, сжимающие готовые звуковые файлы формата PCM (WAV) - например, L3Enc (DOS), MP3 Compressor, XING MPEG Encoder, BladeEnc (Windows) и другие.
Другим, часто более удобным, способом работы с Audio MPEG под Windows 95 является использование ACM Codec - автоматических преобразователей форматов, работающих на уровне системы. При установке в систему такого Codec'а (например, Fraunhofer IIS) потоки сжатых кадров в формате Audio MPEG можно оформлять в виде одного из подформатов RIFF/Wave (файл WAV) и работать с ними при помощи любой программы, поддерживающей ACM (например, стандартный Media Player, Sound Recorder, а также почти любой звуковой редактор).
Для обратного преобразования файлов формата Audio MPEG в формат PCM можно воспользоваться либо декодером (L3Dec для DOS), либо "проиграть" файл с одновременной записью в WAV (WinAmp, либо другой проигрыватель MPEG вкупе с виртуальным звуковым кабелем VAC).
Надо заметить, что популярные ныне методы сравнения кодировщиков MP3 по спектру звука, АЧХ и прочим "формальным" параметрам в общем случае некорректны. Audio MPEG относится к разряду систем "кодирования воспринимаемого" (perceptual coding), ориентированных на передачу только эффективно воспринимаемой слухом части звукового сигнала. Сравнение таких кодировщиков должно проводиться только на слух, а "формальные" параметры имеет смысл принимать во внимание только в том случае, когда они откровенно плохи для самых разных видов звукового материала.
Где можно найти информацию, звуковые программы и файлы?
FIDO:
2:5010/67 (Roma Hmelevsky) - 17.00-05.00 Msk 2:5010/56 - // - 17.00-05.00 Msk 2:5010/56.2 - // - 17.00-05.00 Msk 2:5010/58 - // - 17.00-05.00 Msk
Internet:
aimnet.com archive.orst.edu audioworks.com bmsu.simbirsk.su cakewalk.com castrop-rauxel.netsurf.de/homepages/michael.banz/ cs.ruu.nl/pub/MIDI junitec.ist.utl.pt/einfo/audio.html layer3.org luth.se lycos.com lysator.liu.se midifarm.com midilink.nl/flist/206.htm mp3.com people.interconnect.com.au/~davidd/download.htm realaudio.com rolandcorp.com (Roland) www.chat.ru/~andreenk (Программа Recogn) www.ntonyx.com (Style Enhancer, VAC) sfoundry.com (Sonic Foundry) spider.nrcde.ru steinberg-us.com steinberg.de teco.quarta.msk.ru teeri.oulu.fi th-zwickau.de/~maz/ unina.it/~aminet/dirs/mus.html uwp.edu winsite.com/pub/pc winsite.com/pub/pc wuarchive.wustl.edu wustl.edu/~aminet/dirs/mus_midi.html www-ccrma.stanford.edu www.ktk.ru/~avb xgmidi.wtal.de yamaha.com, yamaha.co.jp, yamaha.co.uk
Большое спасибо всем приславшим ответы, рекомендации, замечания и советы для этого FAQ.
Текст FAQ в альтернативной кодировке доступен для FReq на 2:5000/14@FidoNet по имени SOUNDFAQ, FAQ по общим вопросам цифрового звука - DGAUDFAQ, по компьютерному звуковому оборудованию - SNDHWFAQ, текст описания MIDI-интерфейса на русском языке в этой же кодировке - по имени MIDIDESC. Полный пакет FAQ и описаний доступен на ftp://spider.nrcde.ru/pub/text/tech/emtcfaqs.zip и через страницу FAQ на http://spider.nrcde.ru. Пакет распространяется также по FIDO fileecho XHRDDOCS.