伦斯勒理工学院和IBM研究院合作建立的认知和沉浸系统实验室（the Cognitive and Immersive Systems Laboratory，CISL）已经达到了新水准，并且有望推进认知和沉浸式环境，用于解决像董事会议、教室、诊疗室，以及设计工作室这样的空间协作问题。

　　素材整理自伦斯勒理工学院

　　请大家想象这样一个场景：

　　四个人共同走进一间房，领导说：“Waston，把最近一次的工作会议纪要给我。”计算机识别出来并和小组成员打招呼，然后检索出上次会议中使用的材料， 并将其显示在三个大屏幕上。然后，领导走向其中一个屏幕，用手滑动、放大阅读信息。能够理解参与者们语音的计算机，同样也能检测到他们的位置、记录他们的角色，并通过传感器观察他们的注意力以及与房间交互，当讨论主题从一个屏幕转换到另一个屏幕时，其中的一个参与者仍关注前一件事时，计算机便会提出问题：“你在想什么呢？”

　　这是一个很简单的场景，它说明开发允许人类与机器自然交互的环境达到了一个新的里程碑。在伦斯勒理工学院和IBM研究院的合作中，认知和沉浸系统实验室（the Cognitive and Immersive Systems Laboratory，CISL）已经达到了新水准，并且有望推进认知和沉浸式环境，用于解决协作问题，如董事会议、教室、诊疗室，以及设计工作室。

　　CISL主任苏慧（音译）说：“这个新的原型是一个始发点——人类可以开始与计算机自然交互的功能空间。”其核心是IBM Watson研究中心创建的，用于将人类经验与技术相关联的认知环境的多机构体系结构。在CISL中，我们创建了这种体系结构，以便将不同的技术整合在一起，这些技术由传感器捕获不同类型的人类行为，atv，记录为单独事件，并将它们传递给背后的认知机构进行译码。增强这种架构将使得我们能够将新的传感技术和计算机视觉连接到系统中，并在这些技术之上建立协作决策工具。

　　与人类的理解能力相比，当前“房间”的空间能力是非常初级的。这个房间可以理解和记录语音、三种特定手势、房间的物体的位置、他们所扮演的角色、以及那些物体的空间方向，同时，该房间还可以触发正确的认知计算机构采取行动，并将实时把与小组讨论相关的数据和信息传输给该房间。

　　“从这一点上，我们可以构建更好地解释房间发生了什么的能力，”苏说。“我们的架构提供了一个框架，用于引入新的技术，比如更多的解释人类行为的认知计算能力，这使我们能够真正挖掘到人们在讨论中的意图，触发认知计算机构，给讨论带来更有价值的分析和见解。在解释行为方面，我们才刚刚开始，但从现在开始，形式会变得非常有趣。”

　　CISL正在伦斯勒理工学院的Curtis R. Priem实验与表演艺术中心（EMPAC）使用Studio 2开发其原型——“情境室”。Studio 2被设计成“集成数字技术与人类表达和感知的多功能空间”，而且它很容易与CISL正在研究的技术相结合。该原型是基于由伦斯勒理工学院和IBM开发的几种认知技术，以及由CISL搭建的传感器，例如麦克风、摄像机和Kinnect运动传感器。

　　在Studio 2内，j2直播，传感器检测人类行为，例如房间内人的位置的变化、语音、手势和头部运动。排除CISL架构的，每种认知技术都是相互独立的，对由单一类型的传感器检测到的特定行为产生响应，并提供给计算机进行译码。传感器提供输入，而计算机提供输出，人与机器之间则基于具有有限连续时间的单个动作相互作用。

　　CISL的架构使得计算机可以通过报文队列来记录并跟踪来自多个传感器的行为，以便通过多种认知技术进行译码。传感器和认知技术协同工作，通过在长时间内的多种行为，记录并解释“多模式”人类行为。当有人进入环境时，传感器会捕捉不同类型的行为，通过CISL架构，计算机将每一个行为，记录为特定的事件，并将其传送给认知技术，以便译码并响应。