在国内，以科大讯飞为例，这家公司已经针对强化学习在多个方向展开了研究和应用，包括人机对话系统、智能客服系统、机器辅助驾驶、机器人控制等方向，都已有了应用研究。以对话系统这样一个多轮人机交互系统为例，它就是一个非常典型的强化学习应用案例。

　　传统的任务完成型对话系统，用户需要在一次交互过程中把自己的需求描述清楚，这样的交互不是自然的。在讯飞的AIUI交互系统框架中，引入了多轮交互的思想，由一个深度强化学习（马尔库夫决策过程）模型来引导用户输入需求，从而快速、自然流畅地完成用户任务。

　　同时，许多工业机器人制造商也将目光投向了强化学习技术，测试该技术在无手工编程情况下训练机器执行新任务的效果。此外， Google公司的研究人员也正与DeepMind合作，试图利用深度强化学习（deep reinforcement learning）技术使其数据中心更加节能。

　　通常，找出数据中心各个单元如何影响系统总能耗是十分困难的，但是强化学习算法能够从收集的数据以及模拟实验中学习经验并提出优化建议，比如说，如何以及何时启动冷却系统。

　　360°自拍

　　The 360-Degree Selfie

　　突破技术：消费级360°全景相机，能够更真实的还原事件和场景。

　　重要意义：能提供360°全景拍摄的廉价相机将开启摄影的新篇章，也将改变人们分享故事的方式。

　　主要研究者：

　　- 日本理光（Ricoh）

　　- 360fly

　　- 三星

　　- JK Imaging （柯达Pixpro相机的制造厂商）

　　- IC Real Tech（ALLie相机的制造厂商）

　　- Humaneyes Technologies（全景相机Vuze的制造厂商）

　　成熟期：现在

　　360°全景拍摄的热潮最早是由一位哈佛大学的生态学者柯恩·霍夫肯斯（Koen Hufkens）掀起的。去年秋天他前往马萨诸塞州的一片丛林中探险，并在网站上实时直播了探险的过程。

　　当时，他使用的就是一台价值350美元的名为“theRicoh Theta S camera”的360°全景相机。在这一过程中，观众可以通过使用鼠标或者点击移动设备的屏幕将直播图像区域放大，借此看到森林的全貌。

　　按道理说，我们所生活的世界就是一个充斥着声光的三维世界，360°的场景随处可见。但迄今为止，已有的两种主流全景拍摄技术：拼接多个相机拍摄或者是采用价值不菲的（10000美金）特种相机都有很大的缺陷。使用这两种方法操作的图像处理过程都是十分繁琐，且很耗时。

　　好在现在大多数人都能买得起更方便好用的360°全景相机了，500美金的售价就相当于入门级的单反。

　　现在，纽约时报（New YorkTimes）以及路透社（Reuters）的记者在采访海地飓风灾情以及加沙难民营时都使用了三星的Gear360全景相机（价值350美金）。

Gear360拍摄的画面

　　在学术圈，这样的全景相机也大有用处，一家位于洛杉矶的初创公司Giblib就开发了专供医用的4k全景相机，医学院的学生已经可以通过它传来的影像学习外科手术了。

　　此外，类似柯达PixproSP360-4K的全景相机也应用在了体育直播以及体育训练上，例如篮球、足球以及冰球，有价值的360°全景回放都可以被保存下来。

柯达PixproSP360-4K全景相机

　　元器件的革新