爱吧机器人网 » 专题 > 应用 > 正文

手机摄影已经进入深水区 AI将为我们重塑摄像头

AI人工智能除了会与机器人结合,除了会衍生出一系列的新产品之外,它也会与我们传统的手机相结合,而移动AI芯片,便是手机与人工智能结合衍生出来的新事物,而当两种技术发生碰撞,它会带来怎样的变化呢?无可厚非,摄像头成为最受瞩目的焦点!

手机摄像头
 

从技术逻辑上讲,搭载AI运算处理单元后的手机,结合本身GPU的图像处理能力,最显著的能力提高就是在图像内容生成、识别和处理上。无论是美颜、美景还是美视频,算法都能给你美出来。

但事实上,高端机们不得不齐齐拥抱AI背后,或许还有更深层次的产业矛盾和现实问题。手机AI也不止带来了“拍照更好看”的简单提升。

本文中,我们将引用华为Mate 10、iPhone X和谷歌Pixel 2三款加入了AI能力与运算单元的智能手机,来讨论AI带给手机摄像头与拍摄功能的改变。

曾经我们认为手机只能打电话发短信,之后buang的一声,手机被炸成了今天“无所不能”的智能机。随着AI的到来,摄像头可能也在经历一场类似的爆炸。

手机摄影已经进入深水区,创造差异只能用AI

为什么在短短几个月之间,苹果、谷歌、华为的主流旗舰机都宣布进入了AI时代?

最直接的原因,显然在于高端机之间不可避免年年上演的拍照能力大战,打到如今已经进入了无比惨烈的拼刺刀阶段。

曾经跟一个爱写手机拍照评测的摄影师朋友聊天,他认为这两年写手机拍照评测真的是很痛苦的一件事。因为近似价位的手机之间,拍照能力实在太接近了。拍了各个场景的对比图,一会这家强,一会那家强,根本归纳不出结果来。即使严格按照DxOMARK这种专业机构的评测标准来做,结果还是五花八门。

也有人觉得,在手机光学硬件和摄像单元上,摩尔定律已经接近失效了。随着双镜头、大光圈、千万以上像素摄像头成为标配,摄像头的核心单元群落似乎已经被固化。但手机还是要年年出,年年有改进。更要命的是对于高端机来说,摄像部分是绝对的血海厮杀,绝不能落人一头——想想手机背后的研发者和产品经理们,也是够头疼的。

即使领军的苹果,这几年在摄像头也是前进的举步维艰。甚至打开一些专业评测网站的照片,普通用户很可能分辨不清两代机型,以及竞品机型拍摄照片之间到底有什么差别。

毕竟不是每个人都是摄影师和艺术家,有那么细致的分辨能力。所以为了让消费者继续感知拍照能力在变化,必须在摄像单元之外想办法——于是AI似乎成了最好的选择。

人工智能技术的引入,或许意味着手机可以凭借基础硬件的改变和大量算法助阵,来提升手机在拍摄、录制时的体验。创造更多的玩法、更简单的体验,摆脱在光圈、像素等少数几个领域的无尽纠缠。对于渴望新消费增长点的手机厂商来说绝对是一场惊喜。

更重要的是,AI算力与算法在手机拍摄中的应用,可以有多种模式和方法。很难想象秘密研发的旗舰机会在AI应用细节上撞车。这点在华为Mate 10和iPhone 8/X之间的差异化中已经可见一斑,而这只是个开始,更多技术与开发生态成熟后,两款旗舰机之间的差距只会越来越大。这是手机厂商们求之不得的。

脱离同质化竞争的苦海,恐怕只能靠AI。所以,AI来了......

最后的战役:算法和硬件能力填补特殊场景

当然,AI可能改变手机的拍摄战争,绝不是说这场战役就不继续下去了。

事实上,在开创新玩法之前,AI帮助手机拍摄完成的最后一场战役,还是会聚焦在主流手机攻坚了许多年的战场:特殊场景拍摄。

这里所谓的特殊场景,包括夜景、强光、暗光、动态捕捉几个方面,具体应用的例子更是花样繁多。因为手机的摄像头注定没有纵深,所以无法像单反摄像头一样来处理极限光环境下的成像效果。因此暗光、强光环境下的拍摄,也逐渐成为评价一款手机摄像能力好坏的基本要素。

看一下DxOMARK的手机拍摄评分排名,会发现前五已经基本被AI手机所占据。而这些手机拍照能力的重要加分项,就来自算法对光线环境的捕捉和平衡推导。比如谷歌谷歌Pixel 2会采用复杂的算法,比如对摄像头收集信息进行拆分和模块深度学习,来达成精神效果和光源重绘。因此在白光处理上获得了高分。

DxOMARK评测图
 

在DxOMARK的这张评测图中,可以看出应用了AI算法帮忙之后,各家旗舰机在处理光影关系时都较以前的纯光学模式有了显著改善,尤其是在匹配阴影与光亮的结构关系上。

算法捕捉技术不仅作用于静态拍照中,更多体现在高速运动环境下通过算法来实现超高速对焦,以及在暗光环境下完成的识别+拍摄。

AI+手机拍摄,还能在比较复杂的动作和特殊光线下实现动态美颜与视频美化。利用底层硬件+算法,智能机可以实现了单靠摄像头无法达成的很多功能。

但这只是提升,AI到来的真正意义在于让很多所谓“常识”发生改变…..

直男救星:用AI的识别能力解放人类拍照

请假设你是一位不热爱拍照,但热爱女朋友的直男……当你使用昂贵手机给女友拍照的时候,第一感觉是什么?

开心?忐忑?NO,你的第一感觉是复杂到心累。你会发现手机上一大堆功能,一会要HDR,一会要美颜美肤,一会要大光圈背景虚化,一会要景深模式......这要是赶上个暴脾气,不是扔手机就是扔女朋友。

事实上,会产生如此复杂的操作和专有名词。是因为为了处理不同的拍摄对象和场景,手机必须模仿相机的模式,给出不同的曝光、白平衡和对焦策略。但更多的功能意味着更复杂的操作,世界上还是手残党多一点,是否能免去这一步呢?

对于AI加入手机这件事,或许一个十分值得兴奋的点在于,AI的主要能力之一在于识别和理解图像。换言之,通过识别后的图像信息自动触发功能对应,或许意味着可以把无知的直男们解放出来。

比如谷歌的Pixel 2就很大程度上利用了AI的识别能力来拍照。在它的摄像单元里,隐藏着一个神经网络算法,专门用来分辨拍摄中的人物信息。然后传输到后端进行不同阶段的对应图片处理。

当然,谷歌的这个技术主要目的是让但摄像头来获取双摄的美颜拍照背景虚化能力。而华为Mate 10的识别+拍摄,也即其宣传的“智慧摄影”模式似乎是更激进的方案。Mate 10的处理方式,是通过NPU来先期学习图片的信息特征,从而获得给拍照对象分类的能力。然后组织成13种拍照模式。

当摄像头在拍摄时触发了这种模式,手机将自动调到对应的模式。

事实上,这种先识别后拍摄的模式很可能在短期内成为通行的标配,甚至取代一部分常用功能。毕竟在我们日常生活和社交中,拍摄照片的目的和期望效果是有高度一致性的。通过AI带来的深度学习能力归纳这些特性,智能化完成用户期许,或许才是未来摄影的常态。

也许不久的将来,你到了海边结果下雨,到了景区遇上雾霾,到了好莱坞没有大明星,就可以用AI来造蓝天白云青山绿水,甚至弄出来几个偶尔路过的明星侧影.....

当然,AI的识别+拍摄能力,真正应该解放的是老人、孩子以及大多数只是偶尔采用手机拍照的普通人。毕竟我们大多数人无暇学习复杂的教程,锤炼高超的审美,但我们还是希望让精心准备的一刻留下更漂亮的记忆。

AI让世界更公平,也许正是如此。

已经发生的大爆炸:摄像头不只用来拍照

上面介绍了两种可见的AI+摄像头模式:AI提升拍摄和AI改变拍摄。而AI还带给摄像头另一种赋能:不只用来拍摄。

目前所见,这重功能已经有两种思路:第一种iPhone X为代表的,在感知能力上做文章,将摄像头与传感部件结合生成新的体验与功能。

iPhone X摄像头在结合了新的感光元件以外,更重要的是加入了相当复杂的传感器系统。尤其是在前置摄像头上,用“刘海”里原深感摄像头实现了生物识别和动态捕捉,达成了Animoji和人像光效等特色功能。

另外Face ID也是通过类似功能来实现的结构光识别。泛光感应元件还能在暗光状态下帮助用户解锁手机。这种思路或许意味着,摄像头以后不仅仅是“看见”,而更多可以“感知”外在。目前作用仅仅是人脸识别和一些特色功能,但距离运用硬件和算法基础开发更多功能应该已经不远了。

而另一种模式,是通过摄像头本身的机器视觉能力来获得数据学习和智能体成长能力。加入记忆和学习能力的AI摄像头不仅是记录影像信息,并且还会在本地完成对这些信息的学习和理解。从而适应用户习惯,达成更好的拍摄体验。

这两种方式都意味着,手机AI带来的不仅是摄像能力本身的提升。而是将摄像头作为信息采集方式之一,纳入更庞大的能力体系里。以此培养出手机的精准识别能力、多元数据处理能力、内容输出能力,这对于未来才是至关重要的。

或许等到开发者开始集体思考这些能力意味着什么,移动AI带给影像世界的真正价值才会浮现出来。

AI可以改变手机的很多方面,但从根本上说,它想改变的是被看做常识的人机交互方式。


上一篇:人工智能的到来到底为学生教育带来了怎样的改变
下一篇:有趣的AI 它能为你设计更受欢迎的万圣节套装
精选推荐
哈佛大学《自然》发表新驱动技术,让飞行机器人悬停且不受损伤
哈佛大学《自然》发表新驱动技术,让飞行机器人悬停且不受损伤

[2019-11-06]  哈佛大学研究人员发表在《自然》杂志上的一项最新研究,他们开发了一种由柔软的人造肌肉驱动的机器人蜜蜂(RoboBee),这种机器人在撞墙、 ...

什么是机器人学?机器人学简介
什么是机器人学?机器人学简介

[2017-12-14]  机器人学是工程学与科学的交叉学科,包括机械工程,电气工程,计算机科学等。机器人技术涉及机器人的设计、制造、操作和应用,以及用于控制、感官反馈和信息处理的计算机系统。...

智能农业:种地的事儿未来全交给这些机器人吧
智能农业:种地的事儿未来全交给这些机器人吧

[2019-12-07]  SRC公司创始人Sam与温波尔庄园农场经理Callum Weir以及监控机器人Tom总部位于英国的农业科技初创公司SRC(Small Robot Company),正在 ...

美国人工智能公司Skymind进入福建全面开展业务
美国人工智能公司Skymind进入福建全面开展业务

[2017-12-11]  人工智能在当今这个时代对大家来说想必是非常熟悉的,这也是我国近十几年来一直追求的目标,未来的时间里这也将是全人类追求的目标。就目前来看,近年来,人工智能或在我国迎......

瑞士研发出微型机器人集群 可像蚂蚁一样互相交流并协同工作
瑞士研发出微型机器人集群 可像蚂蚁一样互相交流并协同工作

[2019-07-12]  EPFL(瑞士联邦理工学院)的研究人员受到了蚂蚁的启发,开发了一款仅有10克重的小型机器人:他们可以相互交流,分配角色并完成复杂的任务。 ...

2018年企业数字化转型的五大趋势
2018年企业数字化转型的五大趋势

[2017-12-16]  据2016年哈佛商学院研究表明,选择进行数字化转型的企业在3年内表现出了55%的平均毛利润提升,相比之下其他企业毛利润同期降低了37%。数字化转型企业的领头羊,也曾是收入处于......

谷歌宣布搜索算法重大升级,用BERT模型理解用户搜索意图
谷歌宣布搜索算法重大升级,用BERT模型理解用户搜索意图

[2019-10-26]  谷歌刚刚宣布,其搜索引擎的核心算法正在进行一项重大升级,这项升级可能会改变10%的搜索结果排序。此项升级应用了自然语言处理技术(BERT ...

通过对抗性图像黑入大脑
通过对抗性图像黑入大脑

[2018-03-02]  在上面的图片中,左边是一张猫的照片。在右边,你能分辨出它是同一只猫的图片,还是一张看起来相似的狗的图片?这两张图片之间的区别在于, ...

本周栏目热点

可以看透豆腐渣工程的爬壁智能机器人 微型旋翼机器人不靠GPS也能导航

[2017-11-05]  说起纽约的大学,国人可能首先想到哥伦比亚大学。但在曼哈顿,有一所不为国人熟知的纽约城市大学,这里曾先后培养出13位诺贝尔奖获得者。在挂满名人肖像的学校荣誉墙上,一位......

人工智能准确预测患者一年内的死亡风险,原理却无法解释

[2019-11-13]  图片来自BURGER PHANIE SCIENCE PHOTO LIBRARY美国最新研究显示,人工智能通过查看心脏测试结果,以高达85%以上的准确率预测了一个人在一 ...

谷歌DeepMind:利用机器学习预防急性肾损伤

[2018-03-08]  随着人工智能的飞速发展,机器学习已经显示出其在医学领域的应用前景。例如,谷歌大脑研究小组(Google Brain team)近日发布了一项研究 ...

[2018-02-02]  山东的肿瘤患者有了更多的治病门道,疑难杂症就医可享人工智能——沃森联合诊疗中心的精准治疗。近日,山东大学齐鲁医院宣布与杭州认知网络 ...

[2015-12-23]     你能单凭自身力量跳出60倍于自己身高的距离吗?即便能,你觉得能安全着地吗?要是你能变成一只蟋蟀你就能。   科学家早就知道蟋蟀是个 ...