音乐视觉:从传统方式到现代界面

(英语).



前言: 我建议熟悉一下我大师关于射线鼓机的论文。 特别注意节奏可视化的部分. 还检查一下关于视觉和音乐教育的文献比较科学的回顾. 在这篇文章中,我讨论了电子游戏在音乐教育中的价值.

电子写作和编曲音乐的过程不仅包括听力,还包括视觉器官的作品. 在Pro Tools和Ableton Live等音频编辑器中显示数据纯粹是信息性质的,它们是波浪,网格和线性图表. 一些可视化系统具有特异性的装饰性,例如iTunes,它创造了迷幻半随机图形. 还有一些系统是介于两者之间。 我认为在这样的图形系统中有很大的潜力,我认为它们可以帮助更好地理解音乐原理,找到新的原始的构成技术. 在这篇文章中,我献给大家一些我见过的最有趣的音乐视觉系统。

西方音乐录制是一种传统百年的视觉音乐方式. 这是一个非常细腻和压缩的系统,清晰和具有象征意义,此外,它很容易掌握。 西贝利乌斯等程序可以轻松地将音乐注解翻译为MIDI数据并再次回归.

但西方音乐有一些限制,特别是在当代音乐方面. 使用缩微调是不方便的。 她表达表演细微差别的能力有限——在爵士乐的百年中,没有比简单地写出"旋律"这个单词在比分榜的首位更能表示摇摆的了. 密钥系统对主要密钥效果良好,但对于次要密钥和在使用音乐模式时效果并不那么好,而对于蓝调来说,完全没有用.

我想和大家分享一个未来如何改进音乐的想法. 这是约翰·科尔特兰(John Coltrane)在迈尔斯·戴维斯"全蓝"(英语:Miles Davis' All Blues)上由乔恩·斯尼达尔(英语:Jon Snydal)的独奏剧目(我编辑过这集片段是为了让它更容易看)的直观化.

斯尼达尔的可视化比数字化的更类似——它反映了科尔特兰性能的精确细微差别,几乎看不到投球,时机和动态的阴影.

MIDI测序器的改进超出了标准标记. 注意一个简化的电子音乐序列器,称为iNudge. 试试看,这很有趣。

以下是特洛尼乌斯·蒙克的"四进一"旋律在标准MIDI-序列模式中的样子. 矩形不仅显示哪些音符被播放以及何时播放,而且显示其确切的持续时间. 红色矩形较暗意味着音量较高,粉红色矩形较轻 — 更安静. 也可以阅读底部面板上的卷.

(英语).

MIDI系统非常实用,易于使用. 它可以捕捉键盘上的动作,可以导入分数,甚至可以直接在屏幕上绘制笔记(我最喜欢的方法).

MIDI播放器"音乐动画机"拥有一些将MIDI音轨的视觉表现与古典作品的录音相结合的精彩视频. 例如在这里,臭名昭著的托卡塔和富加·雷米诺尔·巴赫.



随着软件从今天的录音中提取数据的能力不断提高,您可以像MIDI一样轻松地开始管理它们. 这是Melodyne调调校正程序的截图,它与Auto-tune非常相似.

线条显示已经响音音符,橙色滴音显示根据程序歌手应该接受的音符. 下降的厚度显示体积水平. 你可以拖下水,重新绘制线条,随你喜欢的重新制作歌曲以适应你的心情. Melodyne程序甚至可以解析和重新录制以音乐摊和MIDI的形式演奏的旋律.

高频和低频 一般认为,较高频率应空间显示为"以上",较低频率-"以下". 这似乎非常合理,但事实上,它们可以完全任意地展示,甚至与实际表现无关。 在钢琴上,高音符位于右边,低音符位于左边. 在吉他上,“低”E弦在“顶”上方。 对于风乐器来说,演奏下音符和上音符也与其物理坐标无关.

音调的绝对高度在升空上逐渐显示,但高空级以圆形显示. 音色的空间组织最有说服力的表现是螺旋.

高低不是我们用来指快速和慢振动的唯一的比喻性定义. 如我所说,高海拔等级用圆形表示.

但事实上,圆圈只将“上下”的定义改为“顺时针/顺时针”。 还有其它方法来描绘语气. 直觉上,我们试图改变我们对待它们的方式,并想象它们会越来越近,越来越远,或者向内和向外移动. 我们还在考虑使更高的吨位更亮,降低吨位更暗。 有些演奏弦乐器的人有时会特别调谐顶端弦,比它需要产生一种被称为"滑翔"的效果要高一点.

一般协议是在标记中表示从左到右的时间. 但这不是唯一的可能方向。 我指的是舞蹈革命和吉他英雄等节奏游戏中提供的范式. 这一概念的完美实施属于一个叫做FreQuency的游戏.



游戏甚至允许您创建自己的重混游戏.



我喜欢这个“隧道”的比喻,我希望看到它在先进的制造环境中传播。

声波的声调是sinusoidal(谐振)振动,你可以用这种方式来视觉:

阴性振荡对标记作用不大. 但它们确实有助于你科学地理解 当你听到一些物理的东西时会发生什么。 在动画中,

看看维基百科上的所有动画鼓膜.

音频编辑器将音乐显示为波振动的振幅,使用随着声音增大而变宽的液滴. 以下是使用编辑器ReCycle创建的鼓敲(Funky Drummer break). 蓝滴露鼓拍. 滴滴的强度并不包含音乐参数的广泛信息,只显示持续时间和音量. 但是ReCycle是用来模拟鼓样的,为此时间和体积是唯一真正重要的信息.

这个图是我画的, 用来向大家展示你如何周期性地看待这个组成。

Rob Walker在"设计观察者"一文中将波浪波动作为音乐基准,逐渐取代已经达到目的的传统"八音"或其他录音格式. SoundCloud网站上的玩家使用捕眼波图,帮助听众跟踪歌曲的听觉位置,观察音量峰. SoundCloud有一个乐队叫"漂亮的波形".

声调波动的波形往往从纯功能转向设计. 约书亚·迪斯特勒创作了Bjork专辑封面概念,其中每首歌都作为声波代表.

我一向认为利用网络将音乐理论直观化是件好事,甚至多次尝试这样做. 以下是一个半圆形和五角形的圆形的比较,对于彼此来说都是扫荡.

这是约翰·科尔特兰(John Coltrane)的巨型台阶歌曲中的和弦序列方案.

下面是一张结构图,显示您可以使用哪种算法来判断您所听到的情绪和毒性。

拥有更抽象的三维交互式可视化,以显示和弦,音调和旋律的功能,会更酷. 伦纳德·欧勒(Leonard Euler)以托鲁斯(英语:Torus)的形式表现了将托勒斯和谐作为空间纹饰的映射方式,这表现在这部动画中. 红线表示大三角线,绿线表示小三角线,蓝线表示 qui线.

我在这方面有抱负,但是我缺乏执行这些抱负的编程技能。 其他国家正在这方面取得认真进展。 Dmitri Tymoczko在发表他的第一篇与音乐有关的论文,讲述他在科学中可视化的通体和谐的地形方法时,做了一次喷洒. 我无法完全理解他的想法, 但他们似乎吸引了我。

//player.vimeo.com/video/20301089 (英语).

这些是Aniruddh Patel在他的文章“语言、音乐、语法和大脑”中的插图。 再说一遍,我不确定这是什么意思 但我打算以后再想清楚

其他理论家曾试图使用颜色来代表谐音函数. 例如,Scriabin为此发明了“轻键盘”,尽管它从未流行过。

在写一首歌时,我喜欢使用简单的颜色编码来区分其片段. 我用黄色作为介绍和结尾,蓝色作为主题,绿色作为配乐,橙色作为乐器和分解.

Edward Tufte在他的论坛上展示了一些更复杂的歌曲结构视觉化方法:

马丁·瓦滕堡(Martin Wattenburg)的"歌曲的形状"(Song Project)以单曲音乐成分的重播为特色. 以下是他对麦当娜的歌像祈祷的视觉化.

这是Wattenberg为贝多芬的《敬爱丽丝》的视觉作品。

接下来,我将引用Niklas Roy的一段令人着迷的视频, 显示你如何用二进制账户在鼓机上创建时髦的音频序列。

//player.vimeo.com/video/1639345 (英语).

这个图形颜色系统不是很酷的标记或界面吗?

视觉复杂有很多类似的想法.

此外,约翰·克洛弗(John Clover)还跟我说了这篇文章,这强烈地呼应了我:“对音乐和学习音乐的目光化很赞。 “

我有机会演奏Biophilia专辑/项目中的一些Bjork歌曲. 其中部分作品的可视化具有很独创性和互动性,部分歌曲的可视化只是有趣,但具有传统性,部分作品的可视化不可理解,但值得关注创作. 无论如何,这是一个了不起的实验,我认为这会对音乐视觉化的原则产生影响.



资料来源:habrahabr.ru/company/audiomania/blog/2353399。