Иммерсивный виртуальный музыкальный инструмент - Immersive virtual musical instrument

An захватывающий виртуальный музыкальный инструмент, или иммерсивная виртуальная среда для музыки и звука, представляет звуковые процессы и их параметры как трехмерные объекты виртуальная реальность чтобы их можно было воспринимать не только через слуховую обратную связь, но и визуально в 3D и, возможно, через тактильную, а также тактильную обратную связь, используя 3D интерфейсные метафоры состоящий из методы взаимодействия такие как навигация, выбор и манипуляция (NSM).[1] Он основан на тенденции электронные музыкальные инструменты для разработки новых способов управления звуком и исполнения музыки, например, изученных на конференциях, таких как NIME.

Уровень развития

Флоран Берто[2] создали множество реактивных трехмерных виджетов, включающих новые представления музыкальных событий и звука, для которых требовалось специальное трехмерное устройство ввода для взаимодействия с ними с использованием адаптированных методов трехмерного взаимодействия.

Джаред Ботт[3] создали среду, в которой использовались методы трехмерного пространственного управления, используемые в известных музыкальных инструментах, с символическим двухмерным визуальным представлением музыкальных событий.

Ричард Полфреман[4] создал трехмерную виртуальную среду для музыкальной композиции с визуальным представлением музыкальных и звуковых данных, аналогичных средам двухмерной композиции, но размещенным в трехмерном пространстве.

Леонель Вальбом[5] создали трехмерную иммерсивную виртуальную среду с визуальным трехмерным представлением музыкальных событий и пространственное звучание с которыми можно взаимодействовать, используя методы взаимодействия NSM.

Теему Мяки-Патола[6] исследовал метафоры взаимодействия, основанные на существующих музыкальных инструментах, как это видно в его реализациях «Виртуальный ксилофон», «Виртуальная мембрана» и «Виртуальная воздушная гитара».

Sutoolz от su-Studio Barcelona[7] использовала технологию 3D-видеоигр в реальном времени, чтобы позволить живому исполнителю создавать и воспроизводить полностью аудиовизуальную иммерсивную среду.

Аксель Малдер[8] исследовали метафору скульптурного взаимодействия, создав трехмерную виртуальную среду, которая позволяла взаимодействовать с абстрактными деформируемыми формами, такими как лист и сфера, параметры которых были сопоставлены со звуковыми эффектами инновационными способами. Работа была направлена ​​на доказательство технической возможности создания виртуальных музыкальных инструментов в 3D. Жестовое управление было основано на манипуляции с 3D-объектами, например, на подмножестве схватывания.

Ранние работы были выполнены Джарон Ланье со своей группой Chromatophoria и отдельно от Нико Болас который разработал Soundsculpt Toolkit, программный интерфейс, который позволяет миру музыки взаимодействовать с графическими элементами виртуальной реальности.

использованная литература

  1. ^ [Дуг Боуман, Эрнст Крюйфф, Джозеф ЛаВиола, Иван Попырев, Вольфганг Штюрцлингер. Пользовательские 3D-интерфейсы: дизайн, реализация, удобство использования (2010). Курсовые заметки 28-й Международной конференции по человеческому фактору в вычислительных системах. ACM, Нью-Йорк, Нью-Йорк, США.]
  2. ^ [Ф. Берто, М. Дезэнт-Катрин и М. Аше. DRILE: иммерсивная среда для иерархического зацикливания в реальном времени. В материалах Международной конференции 2010 г. по новым интерфейсам для музыкального выражения (NIME10), Сидней, Новый Южный Уэльс, Австралия, страницы 192–197, 2010 г.]
  3. ^ [Джаред Н. Ботт, Джеймс Г. Кроули и Джозеф Дж. ЛаВиола. 2009. One Man Band: 3D-интерфейс для совместного создания музыки. В материалах конференции IEEE Virtual Reality Conference 2009 (VR '09). IEEE Computer Society, Вашингтон, округ Колумбия, США, 273-274.]
  4. ^ [Р. Польфреман. Каркасы 3d: композиция в третьем измерении. страницы 226–229, Питтсбург, США, Университет Карнеги-Меллона, 2009 г.]
  5. ^ [Л. Валбом, А. Маркос (2007). Прототип иммерсивного музыкального инструмента. Компьютерная графика и приложения IEEE 27: 4. 14-18]
  6. ^ [Т. Мааки-Патола, Дж. Лайтинен, А. Канерва и Т. Такала. Эксперименты с инструментами виртуальной реальности. В материалах Международной конференции 2005 г. по новым интерфейсам для музыкального выражения (NIME05), Ванкувер, Британская Колумбия, Канада, 2005 г.]
  7. ^ [Р. Porcher, J. Wynnychuk, L. Brajovic, M. Brajovic и N. Platas. sutoolz 1.0 alpha: 3D музыкальный интерфейс программного обеспечения. В Трудах Международной конференции 2002 г. по новым интерфейсам для музыкального выражения (NIME02), Дублин, Medialab Europe, Ирландия, 2002 г.]
  8. ^ [ВОЗРАСТ. Малдер. Дизайн виртуальных трехмерных инструментов для управления звуком. Докторская диссертация, Университет Саймона Фрейзера, Канада, 1998 г.]

внешние ссылки