Общие сведения. Технология мультимедиа

Технология мультимедиа

Лекция №4

Мультимедиа - представляет собой интерактивную технологию. Данная технология обеспечивает работу как с неподвижными изображениями и текстом, так и с анимационной компьютерной графикой, речью, высококачественным звуком.

Известно, что все данные в компьютерах хранятся в цифровой форме.

В отличие от компьютеров теле- видео- аудиоаппаратура работает с аналоговыми сигналами.

Исходя из этого здесь возникла проблема:

• технического соединения разнообразной аппаратуры с компьютером;

• управления ими.

С целью реализации технологии мультимедиа в 1988 Джобс разработал совершенно новый тип персонального компьютера. У данного компьютера все необходимые базовые средства технологии мультимедиа были заложены частично в архитектуру, т.е. в аппаратные средства, а частично в программные средства.

При этом также следует сказать, что если раньше взаимодействие пользователя с компьютером осуществлялось с использованием интерфейса типа WIMP (окно, образ, меню, указатель), то появление компьютера NeXT обусловило появление возможности работать с интерфейсом SILK (речь, образ, язык, знание).

В компьютере NeXT использовались:

• совершенно новые мощные центральные процессоры 68030 и 68040,

• процессор обработки сигналов DSP, который отвечает за обработку звуков, изображений, синтез и распознавание речи, сжатие изображения, работу с цветом;

• были разработаны звуковые платы (Sound Blaster);

• платы мультимедиа, которые аппаратно реализовали алгоритм перевода аналогового сигнала в дискретный.

Здесь стали использоваться стираемые оптические диски, стандартно встроенные сетевые контроллеры, которые позволяют подключаться в сеть, обеспечены методы сжатия, развертки и т.д.

Следует также отметить такой технологический момент, как обеспечение методов сжатия и развертки. Что это значит.

Изображение неподвижной картинки достаточно низкого качества на экране (с разрешением 512*482 точек) потребует для ее хранения 250Кб. Исходя из этого и возникла потребность в создании программных и аппаратных методах обеспечивающих сжатие и развертывание данных. Разработанные и предложенные с этой целью средства и методы обеспечивали коэффициент сжатия 100:1 и 160:1. Благодаря использованию данной технологии на одном компакт-диске можно было разместить около часа полноценного озвученного видео.

Следует отметить, что технология мультимедиа поддерживается WINDOWS XP. WINDOWS XP содержит специально разработанную версию файловой системы для поддержки высококачественного воспроизведения звука, видео и анимации. Здесь есть следующие группы файлов:

• файлы, хранящие оцифрованное видео (AVI);

• файлы, храняшие аудиоинформацию (WAV);

• файлы, хранящие аудио в форме интерфейса MIDI (MID).

Теперь несколько слов о MIDI. MIDI (Musical Instrument Digital Interface) представляет собой программно-аппаратный стандарт, который описывает способы и последовательность соединения электронных музыкальных инструментов с ПК. Основой MIDI являются отдельные инструкции, которые заставляют принимающее устройство производить определенные действия (например, сыграть ноту или усилить звук).

Принцип работы MIDI-устройств состоит в следующем. Например, при нажатии клавиши MIDI-клавиатуры в ПК пересылается сообщение о том, какая именно клавиша была нажата, с какой силой (это влияет на громкость звука) и в течение которого времени.

В отличие от цифрового аудио, где для описания секунды звучания понадобится несколько килобайт информации, использование MIDI-стандарта опишет то же самое действие использовав всего несколько бит.

Другими словами, можно сказать, что MIDI работает не со звуком как таковым, а только с простыми, легко описываемыми событиями (например, нажатие клавиши, педали и т.д.).

Итак, чтобы использовать компьютер в качестве музыкального инструмента, необходимы такие компоненты, как:

• звуковая плата,

• акустические колонки (лучше активные),

• MIDI-клавиатура - это клавиатура, которая похожа на синтезаторную, но не способная звучать самостоятельно. Она использует в качестве синтезатора звуковую плату компьютера. Иногда на этой клавиатуре располагаются некоторые дополнительные переключатели для управления различными эффектами.

• Программа-секвенсор - ее главное предназначение - это осуществлять запись MIDI-последовательностей точно так же как обычный магнитофон записывает звук. Основное отличие данной программы от магнитофона - это то, что секвенсор записывает не сам звук, а лишь его характеристики. Полученная последовательность может быть отредактирована и дополнена различными эффектами. Это позволяет легко заменить инструменты. Следует также отметить, что в секвенсоре присутствуют дорожки. На каждую дорожку можно записать звучание различных инструментов. Например, можно выполнять следующие действия с дорожками:

• Одну из дорожек существующего MIDI-файла можно выделить для записи новой партии, и тогда ее формирование будет происходить под аккомпанемент музыки с остальных дорожек;

• Можно выделить одну дорожку, как сольную, или наоборот, временно ее отключить, чтобы соответствующая партия не воспроизводилась вообще.

Кроме понятия дорожки существует понятие канала (около 16). Чаще всего, для удобства, одному каналу соответствует одна дорожка. Каналы используются для разделения информационных потоков в MIDI-системе. (Каждому каналу соответствует свой инструмент, причем при работе с аудиоплатой - в качестве звуковоспроизводящего устройства -соответствие каналов определенным музыкальным инструментам устанавливается секвенсором. Т.е. каждое MIDI-сообщение содержит информацию и о том, на каком канале его следует воспроизводить. Это позволяет записывать все произведение на одной дорожке. (На практике такая возможность используется редко).

Дата добавления: 2014-01-05