探长去采访了Polarr的CEO Borui Wang,他给我们展示了他们基于Metal的API做的一个相册应用Picky Album,中文叫“霹雳相册”。(App Store中搜索“霹雳相册”即可下载) 请点击此处输入图片描述 这个APP可以智能图片聚类,挑选最好的照片,并且能智能修图。 请点击此处输入图片描述 在霹雳相册里输入"cat",相册里所有猫的图片就出来了!(下次更新的时候会推出此功能) 请点击此处输入图片描述 输入"church",相册里所有教堂的图片都出来了! 请点击此处输入图片描述 对iOS开发者的意义 Borui Wang在采访中表示,Metal这个框架对于iOS开发者而言意义重大,苹果开发者等于拥有了直接在本地做深度学习的能力。 可以在本地做图像识别、语音识别、自然语言处理、图像聚类等各种功能,效率上会有极大的提升。 目前霹雳相册在iPhone本地用10分钟左右就能为几千张图片做索引,接近1秒处理10张图片,而传统的深度学习需要在云端计算,上传一张图片最快也要接近1秒钟,这已经是10倍以上的效率的提升。此外,Metal还在开发一个批处理功能,在未来几个月内,批处理的预计能提升5-10倍的效率。 霹雳相册除了使用深度学习进行图像处理,也利用深度学习做智能挑图,通过记录用户挑选最佳照片的行为,优化智能推荐引擎。 请点击此处输入图片描述 Metal这个框架对电商类应用,以及涉及到人脸识别、图像识别、自然语言处理的应用都会有量级的提升,此外,在iPhone上做深度学习,将摆脱对网络的依赖,解决了网络延迟的问题,也为用户节省了流量。 目前苹果官方还在改进Metal的性能,提高并发能力,预计明年一二月份会有最新的版本。 苹果的“Apple Brain”战略 Metal框架的推出,暗合了苹果“Apple Brain”的战略,是的,传说中的“Apple Brain”已经内置于你的iPhone中。 在这个战略下,Apple在2015年收购了人工智能初创公司Perceptio,后者主要是在手机本地做深度学习,同时与之配合的是硬件层面上iPhone 7采用了苹果自己设计的搭载6核GPU的A10 Fusion,计算能力大幅提升。 请点击此处输入图片描述 区别于谷歌等Google Brain都是在云端,苹果选择了把苹果大脑放在你的手机上! 苹果选择在本地做计算也有保护隐私的考量,这缓解了云端数据的安全隐患,也发挥了自己最大的优势,自己的设备大量被装在了用户的口袋里。 这个策略的选择一方面也是无奈之举,虽然4G网络不断发展,但是网络带宽和速度的问题一直没有得到解决。计算机科学家想象中的那种只需要一个客户端来访问,然后把计算都放到云端的美好想法一直举步维艰,网络基础设施依然步履缓慢,比如Google Fiber计划就困难重重。 请点击此处输入图片描述 Metal这套框架如果成功,以后很有可能Siri不需要网络也能运行,而当前Google Assistant和Amazon Echo等都是在云端运行。除了可以本地跑Siri,同样可用于识别陌生来电,自动显示附近标记的酒店等功能都可以做。 那么苹果手机也不再是一个简单的智能手机,而是一个无所不能的传感器,能感知你的位置你的温度你的环境,简直成了你大脑的自然延伸。 当然,Metal更重要的意义在广大开发者都拥有了深度学习的武器! 福利 此外,我们还提供两个价值百万的idea: (责任编辑:本港台直播) |