Визуализация музыки - Music visualization

Скриншот пресета, включенного в MilkDrop, программное обеспечение для визуализации музыки на базе ПК (версия 1.04d, 2001)

Визуализация музыки или музыкальная визуализация, функция визуализаторов электронной музыки и медиа плеер программного обеспечения, генерирует анимированные образы на основе музыкального произведения. Изображения обычно генерируются и отображаются в реальном времени и синхронизируются с музыкой во время ее воспроизведения.

Методы визуализации варьируются от простых (например, моделирование осциллограф display) на более сложные, которые часто включают в себя несколько составлен эффекты. Изменения в музыкальном громкость и частотный спектр входят в число свойств, используемых в качестве входных данных для визуализации.

Эффективная музыкальная визуализация направлена ​​на достижение высокой степени визуального восприятия. корреляция между спектральными характеристиками музыкального трека, такими как частота и амплитуда и объекты или компоненты визуализируемого и отображаемого визуального изображения.

Определение

«Музыкальная визуализация» могут быть определены в отличие от ранее существовавших предварительно созданных комбинаций музыки и визуализации (например, видеоклипы ), по своей характеристике в реальном времени генерируется. Другое возможное различие видится некоторыми в способности некоторых систем визуализации музыки (таких как Geiss ' MilkDrop ) для создания разных визуализаций для каждой песни или аудио каждый раз при запуске программы, в отличие от других форм визуализации музыки (таких как видеоклипы или лазерное освещение ), которые всегда показывают одну и ту же визуализацию. Визуализация музыки может быть достигнута в 2D или 3D. система координат где можно изменить до 6 измерений, 4-е, 5-е и 6-е - это цвет, интенсивность и прозрачность.

История

В Видео Музыка Atari, выпускался в 1976 году. Аппарат так и не приобрел достаточной популярности и производился всего год.

Первым визуализатором электронной музыки был Видео Музыка Atari представлен Atari Inc. в 1976 году, и спроектирован инициатором домашней версии Понг, Роберт Браун. Идея заключалась в том, чтобы создать визуальное исследование, которое можно было бы внедрить в Hi-Fi стерео система. Это описано в США 4081829 . в объединенное Королевство музыкальная визуализация была впервые предложена Фред Джадд.

Музыкальные и аудиоплееры были доступны на ранних домашних компьютерах, Звук к генератору света (1985, Infinite Software) использовали ZX Spectrum кассетный плеер например.[1] Фильм 1984 года Электрические мечты заметно использовали один, хотя и как заранее созданный эффект, а не рассчитанный в в реальном времени.

Для ПК /ДОС одной из первых современных программ визуализации музыки была Открытый исходный код, мультиплатформенность Cthugha в 1993 году. В 1990-е годы возникающие демо и трекер музыка scene впервые применила технику визуализации музыки в реальном времени на платформе ПК; результирующие примеры Кубический игрок (1994), Инерционный игрок (1995) или вообще их генерируемые в реальном времени Демо.[2][3]

Впоследствии компьютерная визуализация музыки на ПК получила широкое распространение в середине-конце 1990-х годов в виде таких приложений, как Winamp (1997), Audion (1999), и SoundJam (2000). К 1999 году было несколько десятков бесплатное ПО нетривиальные музыкальные визуализаторы в раздаче. Особенно, MilkDrop (2001) и его предшественник "geiss-plugin" (1998) Райан Гейсс, G-Force от Энди О'Мира, и AVS (2000) автор: Нуллсофт стали популярными музыкальными визуализациями. AVS является частью Winamp и недавно был с открытым исходным кодом,[4] и G-Force был лицензирован для использования в iTunes[5] и Windows Media Center[нужна цитата ] и в настоящее время является флагманским продуктом SoundSpectrum, запускающей софтверную компанию Энди О'Мира. В 2008 году iTunes добавила визуализатор «Магнитосфера», созданный Группа варваров.[6]

С ростом популярности виртуальная реальность, несколько стартапов начали работу над визуализацией музыки, хотя прием был неоднозначным [7] Один неофициальный опрос показал, что только 33% респондентов интересовались визуализацией музыки для VR.[7]

Музыкальная визуализация для глухих

Существуют приложения визуализации электронной музыки для улучшения восприятия музыки глухими и слабослышащими. Ричард Берн, кандидат наук из Университета Бирмингема, в настоящее время исследует устройство, которое отображает подробную визуальную обратную связь от электронных инструментов. Эти визуальные эффекты предоставят информацию об особенностях того, что воспроизводится, например о высоте и гармониках звука. Это позволяет глухим музыкантам лучше понимать, какие ноты они играют, что позволяет им создавать музыку по-новому.[8]

Исследователи из Национального университета Сингапура также создали устройство, которое улучшит музыкальный опыт глухих. Эта технология сочетает в себе музыкальный дисплей и тактильное кресло, которое объединяет звуковые качества музыки с вибрациями и визуальными образами, которые соотносятся с определенными качествами музыки. Визуальный дисплей показывает различные формы, которые меняют размер, цвет и яркость в зависимости от музыки. Сочетание этого визуального дисплея с тактильным креслом, которое вибрирует вместе с музыкой, дает более всесторонний опыт прослушивания музыки для слабослышащих.[9]

Музыкальную визуализацию также можно использовать в образовании. Cooper Union в Нью-Йорке использует музыкальную визуализацию, чтобы научить глухих детей звуку. Они разработали интерактивную световую студию в Американской школе жестов и английской младшей школе в Нью-Йорке. Он состоит из интерактивного настенного дисплея, который показывает цифровой вывод, созданный звуком и музыкой. Дети могут запускать игру на инструментах своим движением, и они могут наблюдать визуальный отклик от этой музыки. Они также могут видеть стену «говорящего цветка», в которой каждый цветок может преобразовывать звук в свет на основе определенных частот звуков.[10]

Список визуализаторов электронной музыки

  • Видео Музыка Atari, разработанный инициатором домашней версии Понг, Роберт Браун, представленный Atari Inc. в 1976 г.
  • Pixelmusic 3000,[11] Музыкальный визуализатор с открытым исходным кодом на микроконтроллере, созданный Uncommon Projects в 2008 году.

Список программ для визуализации музыки

OpenCubic Player, ПК/ДОС Файл модуля игрок с в реальном времени STFT на основе музыкальной визуализации с 1994 года.

Список медиаплееров, поддерживающих визуализацию

Смотрите также

Заметки

  1. ^ "Звук в генератор света". Мир Спектра. Получено 2009-02-20.
  2. ^ Хартманн, Дорин (2010). Компьютерные демо и демосцена: художественные субкультурные инновации в реальном времени (PDF). 16-й Международный симпозиум электронного искусства. Архивировано из оригинал (PDF) на 2014-09-12. Получено 2015-05-02.
  3. ^ Борис Бургер; Ондрей Паулович; Милош Хасан (21 марта 2002 г.). «Методы визуализации в реальном времени в демосцене». CESCG-2002. Technische Universität Wien. Получено 2015-05-02.
  4. ^ AVS на Sourceforge.com
  5. ^ «Об iTunes» - iTunes 8.0.0.35 кредитов
  6. ^ «Команда Apple iTunes приобрела визуализатор магнитосферы». 9to5mac. 11 сентября 2008 г.
  7. ^ а б «Кто-нибудь действительно хочет визуализатор музыки в виртуальной реальности?». Грани. 28 декабря 2015.
  8. ^ «Музыка для глухих». ScienceDaily. Получено 2019-04-09.
  9. ^ Nanayakkara, S .; Taylor, E .; Wyse, L .; Онг, С. Х. (4 апреля 2009 г.). «Расширенный музыкальный опыт для глухих: дизайн и оценка музыкального дисплея и тактильного стула». CHI. Дои:10.1145/1518701.1518756. S2CID  3185792.
  10. ^ Варрази, Джон (25 июля 2014 г.). "Как визуальные эффекты могут помочь глухим детям слышать'". Живая наука. Получено 9 апреля 2019.
  11. ^ Pixelmusic 3000: Визуальная ностальгия из эпохи 70-х (2006-06-06). "Pixelmusic 3000: Визуальная ностальгия из эпохи 70-х | Цифровые инструменты". Digitaltools.node3000.com. Получено 2016-03-30.
  12. ^ Центр компьютерных исследований в области гуманитарных наук (1992). Вычислительная техника в музыковедении, Том 8. ISBN  978-0-936943-06-0.
  13. ^ СИГАРТ (2000). «Интеллект, новое видение искусственного интеллекта на практике». 11. Ассоциация вычислительной техники. Цитировать журнал требует | журнал = (Помогите)

внешние ссылки