一、什么是声音可视化?
声音到图像的转换通常称为声音可视化。在探索声音可视化的过程中,我们既可以通过联觉感知的表达形式,也可以借助一些实验手段和编程技能。我们一般讨论的声音可视化,可以分为声音振动的可视化和声波的可视化。
联觉是指一种感觉刺激可以自发引起另一种感觉刺激,往往表示声音与色彩的关系。
1.声音与视觉联系的表现形式
声音的艺术(音乐、朗诵或者别的声音的艺术形式),都是在流逝着的时间中实现的,而所能看见的实物设计则是存在于空间中的艺术。它们二者一个是时间的艺术,一个是空间的艺术。
音乐符号的可视觉表现性,可以在视觉设计中以符号设计的方式将感觉呈现在人们面前。很早以前windows media player上就使用波形来表现音乐的频调与节奏,而现在也出现了更多立体化的界面与表现形式,像3D的形体,立体的波形。
二、声音可视化作品及应用
为了看见声音,触碰声音,实现声音的“虚拟现实”,艺术家们通过自己的方式给大家提供了一种答案。
他们把声音与多媒体装置、视觉艺术、水光电等内容相结合,创作出形式多样的新媒体交互作品,让声音不仅可以听,还可以看,更能触摸。
??声音生成画面
利用了声音的属性找到了对应介质,在麦克风捕捉到环境音的情况下,与人声连结再基于声音的交互形态呈现成了我们以上所看到的色彩迷幻的画面。
随着音量的大小变化,花儿生成的速度也同步快慢变化。
声音越高亢,彩色画面的色彩饱和度就越高,黑白画面的对比度就越高,反之亦然。音高还同时影响画面中小单元的走位曲直和方向。音量还兼管小单元的游走范围,如果大声的喊麦,更容易生成一朵舒展开放的花朵。
??体验声音的“形状”
SONOS、banbanbanban两家利用数字化技术合作创作出一个音频可视化装置作品,让我们直观体验声音的“形状”,享受可视化声音带来的奇妙视觉体验。
观众将置身在一个封闭的“盒子”中,声音会通过数字技术转化成动态影像,并由投影装置将影像投射到四周墙上。随着声音旋律的不断变化,动态影像也会紧抓节奏的跟着舞动,正如声音的本体一般。