新媒体艺术声音及构思

新媒体艺术是伴随着互动技术、网络技术、Flash动画技术、电子游戏技术、三维视觉技术等电子信息技术的发展而逐渐兴盛的一门新兴艺术领域。其触角很快便伸入美术、艺术设计、音乐等传统艺术的领域，还迅速拥有了以年轻人为主体的巨大的受众群体。新媒体艺术不同于成品艺术、装置艺术、身体艺术、大地艺术。新媒体艺术是一种以“光学”媒介和电子媒介为基本语言的新艺术学科门类，是建立在以数字技术为核心的基础上的，其作品包含虚拟现实、多媒体、3D电影等形式。新媒体艺术强调的是人与艺术作品的视、听、触、嗅等多感官、多维度的互动体验。比如虚拟现实技术(VirtualReality)，是计算机模拟的三维环境，用户可以走进这个环境(用鼠标控制浏览方向)并操纵场景中的对象，人们借助于计算机技术、传感器技术、仿真技术等仿造和创造的人工媒体空间，进入一种真实的环境，从而产生身临其境的感觉。这个空间是虚拟的，但又是真实的，其图形渲染是实时的，这种“实时性”导致了在虚拟场景中的人机“可交互性”。声音是人类接受外界信息的渠道之一，在新媒体艺术中声音发挥着重要的作用，对于新媒体艺术作品的艺术价值发挥着举足轻重的影响。

一、声音在新媒体艺术中的作用

新媒体艺术主要是通过视听觉、触觉等身体感官的刺激来获得身临其境的感受。其中，视觉和听觉是一个整体性的联觉，没有听觉，视觉便不完整；只有听觉信息没有视觉信息，新媒体艺术也不能全方位的模拟真实的世界。声音在新媒体艺术中的作用主要体现在以下几个方面。

（一）心理刺激

新媒体艺术通过背景音乐、声效、语声等给受众提供符合客观现实的听觉信息，缺少了这些信息大脑便不能恰如其分的“感知”现实与虚拟的世界。正是由于新媒体艺术中一些逼真的音效设置，比如，虚拟坦克训练中的爆炸燃烧音效，才使被训人员如同身临其境地处在真实的战场环境中。达到其以较小的代价，获得较高的训练价值的目的。新媒体艺术中的阶段性背景音乐还可以缓解受众的压力，增加其参加训练的兴趣和乐趣，对失败者还有一些鼓励性的音乐。

（二）结构性作用

声音在新媒体艺术中的结构作用主要借鉴了影视艺术中声音对画面的结构功能。声音的熟练运用使得新媒体作品在结构上更加的完整。比如，在当前比较流行的“坦克世界”游戏中，每一场战斗开始时，都有不同的开场白：“好戏开场了”、“开始吧”等。在任务结束后，还会有人声无奈地表示：“任务失败，我们撤吧！”在游戏中间会有：“打中了”“我们击中了他的履带”“再来一炮他们就完蛋”等诸如此类的提示性或者鼓励性的语音,都很好的把整个训练过程贯穿成一体，仿佛置身真实、客观的战场。

（三）塑造环境，创设环境感

新媒体艺术要模拟不同的现实环境，而这些不同的现实环境，又有各自的环境声音特性，这就要考虑采用设置与环境相贴切的声效，否则，便不能营造真实的环境感和现场感。声音是我们判断方位感的重要因素之一，人耳正是通过声源到达两耳时间差来判断音源的位置的，因此，良好的声音有助于新媒体艺术营造真实的空间感和环境感。（四）提高新媒体艺术的艺术表现力新媒体是艺术和技术相融合的领域，也有人称之为虚拟现实艺术。为了提高其艺术表现力需要从画面和声音两个方面入手。声音包含音乐，音乐不具有造型艺术的直观性，音乐和其他艺术手段的结合，可以直接表现具体的客体形象和概念思维。比如，在“坦克世界”的“荒漠小镇”战斗中，就运用了具有伊斯兰教风格的背景音乐，充分体现了异域文化的特点，辅助人们建立身处异域战场的先行经验，提高了游戏参与者的融入性和积极性。

二、不同层次的新媒体艺术产品对声音的要求不同

按照互动程度划分，新媒体艺术可以分为3个层次。首先是只有人机互动的新媒体艺术，这个技术实现比较简单，比如一些教育类的游戏程序，训练人们对某些知识点的掌握情况。第二个层次是能实现人机、人人低水平互动的游戏。比如坦克世界。此类虚拟现实的特点是主要依靠发送文字信息实现成员间的互动，信息传递的效率比较低，成员间的呼应较困难。第三个层次是能够实时的进行成员间的对话的高级虚拟培训系统。比如飞行员模拟飞行驾驶训练、核电站维护操作训练等。很显然，针对不同的新媒体应用系统，需要设置不同的声音。比如，寓教于乐的人机互动游戏显然比飞行员模拟飞行系统需要更加具有艺术性的音乐，但是，后者对音效的要求显然比前者更高。

三、新媒体艺术中声音设计包含的内容

新媒体艺术的最主要特征是其对现实的模拟，而要真实地模拟客观世界或者意念中的世界，最主要的是体现新媒体作品的环境感和沉浸感。不管是交互性的设计、画面的设计，还是声音的设计，都必须从这两个特征出发。新媒体艺术的声音设计不同于其画面和互动性的设计，画面的设计目标是真实的再现客观世界中的具象“物体”，比如树木、山水、沙漠等，这些可以借鉴艺术领域中的构图、色彩、明暗等被“复制”到数字世界中。而声音（尤其是音乐）则不同，我们前面说过音乐要靠与其他艺术手段的结合才能表现客体形象和概念，因为它不具备文学的描述性，也不具备造型艺术的直观性，因而它不借助其他艺术手段，很难直接表现具体的客体形象和概念思维，这就决定了音乐审美具有非具象、无语意的审美特征。因此，在新媒体艺术中，音乐的作用主要表现在辅助性的视听联觉上，比如，在高级的虚拟现实中，音乐的作用则相对小一些，现场感很强的音效（比如背景环境的声音）则发挥着更重要的作用。根据美国哈佛商学院有关研究人员的分析资料表明，人的大脑每天通过5种感官接受外部信息的比例分别为：味觉1%，触觉1.5%，嗅觉3.5%，听觉11%，视觉83%。虚拟现实的沉浸感和真实感仅仅通过视觉画面的呈现是不够的，必须通过对其中的声音进行精心的设计和安排，通过视听两方面综合性地展现虚拟场景。新媒体艺术中的声音主要通过音效、音乐、语声来表现。音乐是一门独立存在的艺术形式，是数字化声音设计的重要组成部分，音乐“是抽象的概括艺术，它的作用是表达情绪和情感关系”，新媒体艺术中的音乐使用可以借鉴影视音乐理论，主要指新媒体艺术中出现的机器提示声、互动对话声等。所谓音效，即是自然界中所存在的各种环境噪声（背景声音）和人为设计的各种音响效果。比如，发动机的声音、各种碰撞的声音、虫鸣鸟叫等，这些都会增加新媒体艺术的真实感和环境感。

四、新媒体艺术中声音设计的实施途径

声音包含音乐、音效和语声3个方面，相应的新媒体艺术声音设计也要从这3个方面来探讨。

（一）音乐的设计与选择

影视片音乐主要包含有源音乐和无源音乐两种，有源音乐即客观音乐，音乐的原始声源存在于画面中。例如，画面中有一部唱机正在播放一段交响乐，而此时的背景音乐正是这段交响乐。无源音乐即主观音乐，在画面上看不到或者感觉不到发声源的存在，是创作者根据主题需要为画面专门配置的音乐以渲染情绪和情感。对于新媒体艺术来说，音乐的创作途径主要有3种。第一，在考虑版权问题的前提下，从现存作品中选择。比如，“坦克世界”中的一个湖边战斗场景就选配了“黄河大合唱”作为背景音乐，鼓舞身处其中的玩家们的士气，感染其情绪；其他场景还会间歇性地出现中国国歌的某一段旋律：|1.35.565|，以及其他一些背景音乐。第二，在有充足的资金保证的前提下，邀请音乐制作人为新媒体作品专门创作、编配音乐。这一过程包含诸多程序，主要涉及音乐创作中的各个环节。比如，编曲、乐队（指挥、各个声部等）、现场录音、混音、合成等。这一种方法不仅资金需求量大，而且需要耗费较多的时间和精力，因为其间还包含着各个部门之间的沟通、协调等工作。所以说，对于一般的新媒体艺术创作来说，这种方式存在着一定的风险以及可行性上的问题。第三，采用数字化的制作技术。随着计算机技术，尤其是个人电脑（PC）硬件和软件技术和性能的不断提高，以及电子音乐的飞速发展，在个人计算机上组建一支像样的管弦乐队已经不再是梦想。在个人计算机上，可以完成编曲、混音、配器、录音、合成等一系列的技术过程。这就意味着，传统的音乐制作方式发生了翻天覆地的变化，在传统音乐制作中需要几个人甚至几十个人，许多部门合作去完成的一部交响乐或者流行乐，只要由一个人或者几个人组成的小团队在个人计算机、MIDI接口、键盘合成器、软件音序器等工具帮助下就可以完成。这样大大节省了时间和金钱。目前，许多大师级的音乐家都开始尝试使用电子音乐来创作，比如，于2001年获得格莱美奖的日本音乐家喜多郎（MasanoriTakahashi）在其音乐作品中大胆使用混响器等电子音乐创作工具进行作品创作。对于新媒体艺术音乐创作来说，数字化的音乐创作可以说是“小成本，大制作”，而且，数字化音乐与数字化的新媒体艺术和技术兼容性更加完美。

（二）音效的创作

生活中可以找到没有音乐的地方，但是找不到没有声效的地方。大自然的风霜雨雪、山川河流、家居环境等无处不有各种各样的声音（噪声）存在，作为对现实有所反映的新媒体艺术也必须考虑到声效对真实感的影响。声效的创作主要以传统的拟音———录音方式，在录音棚中完成。当然，在声效创作方面，还需要一些想象力，许多看似毫不相关的声音，和画面配合以后便会产生十分形象的声画效果。比如，动画片里人摔倒的声效采用的是保龄球瓶倒下的声音。声效的创作和一般的艺术创作大致相同，首先有一个创意阶段，分清楚场景的声效有哪些，需要哪些道具完成，是否有现成的素材库，声音和画面的关联等等诸如此类的问题。第二个阶段就是拟音阶段，即使用人工发声器模拟影片中所需要的音响效果，本过程主要在录音棚完成。第三阶段就是合成，运用各种软件或者硬件合成器（根据资金和个人兴趣）对声效的声速、声调、音色等进行综合调节，最终完成音效创作。

（三）语声的创作问题

语声主要包括机器的提示声、人机对话声、用户间的对话等，这些主要通过数字化的录音、混音、合成来实现，涉及到的具体技术包括：数字录音技术、混音技艺、合成技术、软音源等。综上所述，我们可以看出，声音———作为人类获取信息的重要通道，在新媒体艺术中亦发挥着重要的作用。然而，在目前市场上所见到的新媒体艺术作品中，其声音的运用技术和艺术水平还有待提高。在今后的新媒体艺术创作中，必须注重发挥声音设计在其沉浸感和环境感设计等方面的重要作用。