编者按:苏格兰盲人画家在微软的研究项目 The Oregon Project 帮助下重拾信心,继续绘画创作。然而 The Oregon Project 的意义不仅于此,它通过建立一个 3D 声音场景使失明、弱视患者能通过配音欣赏绘画作品内容。本文原文发表于 Microsoft Research Blog,原文题目是“Interpreting visual art with sound for a more inclusive experience”。由雷锋网独家编译,未经许可,谢绝转载。 苏格兰有一位颇有名气的风景画家 Keith Salmon。 他从古老崎岖的苏格兰高地获得灵感,将山和天际线用缥缈且富有感情的抽象手法表现出来。不幸的是,Salmon 很多年来受到视力下降的困扰,这对于一个风景画家是致命的。受过美术和雕塑训练的 Salmon 通过丰富自己的创作技巧来克服感官的不足。他不得不减少画中的风景写实,而更着重于对原野气息抽象、繁妙的表达。 “ Arran 岛的冬天”,Keith Salmon 由于糖尿病视网膜病变,Salmon 从 1980 年代就开始视力下降。在很多年里,他只有一只眼睛有微弱的视力。但他适应了过来,继续绘画并由爱人 Anita Groves 陪伴他登山。 上个月,j2直播,已被鉴定为盲人的 Salmon,对微软的一项创新研究进行了一场发布会。这项研究旨在用三维立体的声音来表现二维的绘画,帮助 Salmon 在失去了大部分视觉的情况下丰富他的绘画艺术。它通过四台 Kinect(微软的体感摄影机),15 只装在高处的扬声器和 54 段配音对 Salmon 的三幅绘画作品从听觉和空间维度进行表达。这三幅作品画的是俄勒冈的地狱谷,因此,该项目被命名为 The Oregon Project (“俄勒冈项目”)。 Keith Salmon (左),Neel Joshi (右);背后是Keith Salmon 的三幅地狱谷风景画 这套系统在主题为“艺术与科技”的西雅图 9e2 展览上首次展出,它的意义有两点:1.为 Salmon 这样的艺术家提供继续创作的途径。2. 为有视觉缺憾的观众提供欣赏美术作品的机会。 Salmon 说:”如果在几年内,当你去国家博物馆或者美术馆,这项技术已经成为了参观体验的一部分,那想必是极好的。” 在这套系统中,每幅绘画的面前是包含了 18 段声带的 3D 空间。Kinect 摄像头追踪参观者在该空间内的动作来播放不同的声带。不管参观者是盲人还是普通人,该系统都能让作品更生动并更有交互性。在稍远些的位置,参观者能听到鸟叫声,水流声和风吹青草的声音。而这些声音是 Salmon 和他的合作者在地狱谷实地录制的。 当参观者靠近一些,atv,会听到与 Salmon 画中蓝色、绿色、棕色和赭色绘画颜料相呼应的数码配乐。站得再近一些,参观者甚至能听到 Salmon 在画室创作、颜料棒在画纸上擦涂的声音。这是为了模仿有视力的人观察美术作品细节(细微处画笔的勾勒)时的体验。Kinect 摄像头会追踪参观者手臂的挥动,根据它来改变播放的音乐。这能帮助参观者成为艺术创作过程的一部分,并用身体、手臂的移动来创作属于他们的音乐体验。在展览上,成年人主要是靠行走来创作不同音乐的合辑,而孩子们则跳来跳去并挥舞双手。 Salmon 解释说:”从 3D 空间的外围走向内围,自然声音与人造声音的过渡十分和谐自然。这是一种奇妙的、有氛围感的、空间的、山水景色的感觉,它把整个艺术串联在一起。” 这个声音系统源自于微软研究员Neel Joshi, Meredith Ringel Morris 和前实习生 Kyle Rector 创作的试验项目 Eyes-Free Art (“不需要眼睛的美术”) 。该项目旨在帮助弱视力的观众欣赏视觉艺术(比如绘画)。 (责任编辑:本港台直播) |