以下文章来源于烨涣 ,作者FergusNie
一个热爱生活绝不秃头的THU电机系研究僧,一个喜欢拍照想做UP主的未来产品经理
作者:清华大学硕士-聂欢欢
AI与摄影相结合已经不是新鲜事,新鲜的是二者结合的方式。对于很多小伙伴来说,拍照时最大的困扰就是不知道该如何构图,如今AI构图已经出现了,手机会在你拍照的时候针对情况做出指导。这到底是如何做到的呢?本文将为你详细解答!
关注TechBeat社区(www.techbeat.net),还有更多干货文章、技术Talk与你分享~
不知何时起,拍照成了各大手机厂商发布新机时的主要卖点之一。
一方面,手机镜头的硬件配置愈发强大。超广角、三摄四摄、一亿像素、50倍变焦等各种说法层出不穷,各大厂商在硬件配置上你追我赶、唯恐落后。
另一方面,伴随着硬件配置的提高,手机摄影软件的竞争也越发激烈。人工智能的出现更是掀起了手机摄影 AI 化的浪潮。
之前曾被吐槽的iPhone11 浴霸摄像头
当前的多数AI摄影,会在用户拍摄照片时,自动识别出有着鲜明特色的拍摄场景,如风景、动物、美食、弱光、逆光等等,AI算法会根据场景的特点对照片的参数做出一系列调整。
在拍摄者按下快门的瞬间,一张已经调节好照片参数(如亮度、饱和度、色彩等)的照片就此诞生。对于一些对拍照不敏感的用户,这无疑是一个简单又好用的功能。
然而纵观各大手机厂商,其AI摄影几乎都是“识别拍摄场景,并进行相应场景下的拍摄及后期调校”,仿佛给人一种AI摄影等于AI滤镜的错觉。
滤镜固然很好,然而当滤镜逐渐抹平了照片色彩的差异,手机摄影的水平的高低往往落在了“构图”这项技能上。
当AI摄影在滤镜上的竞争愈发饱和,AI构图又能否成为AI摄影的新未来呢?
一张照片较为完整的诞生之旅,大概会经历以下几个步骤:
当前的AI摄影多聚焦于“参数调节与拍摄”与“后期处理”两个方面,而同样重要的前期构图和二次构图却鲜少涉及。
未来AI构图是否会成为AI摄影的新方向?我们不妨先来看一看市面上已有的AI构图产品。
原泼辣构图页面,多种剪裁方式后的图片堆叠在一起,图片来源:https://sspai.com/post/47220
但据笔者体验,现在的泼辣回忆(原泼辣构图)用户体验并不友好。
首先,二次构图仅限于图片剪裁,基本的畸变修复与透视调整功能暂时没有。
其次,目前的构图方式貌似是事先设定好的几种固定的剪裁方式,针对不同的照片,APP是否会有不同的剪裁方式,笔者暂持怀疑态度。
其三,软件的定位问题。不知什么原因,原来的AI构图类应用“泼辣构图”变为了如今的回忆类应用“泼辣回忆”。定位的变更、软件的更名,甚至让笔者一时间在APP Store中不愿相信这就是原来的泼辣构图。
APP Store上关于泼辣回忆APP的评论
从APP Store的评论中也可以看到,此款APP还有不少的提升空间。
据泼辣回忆称,目前软件仅支持二次构图,前期构图功能还在开发当中。期待泼辣团队在将来能为用户带来更好的产品与服务。
案例2:Vivo & Samsung 的智能构图
在多家手机厂商中,Vivo和三星率先推出了自己的AI构图产品。
早在2018年,Vivo推出的AI人像构图可以帮助检测照片的构图,当检测到拍摄构图不正确的时候,其AI人像构图功能就会提示并且引导用户往正确的方向移动。
Vivo AI构图的广告片
同样,2019年三星发布的Galaxy S10也推出了自己的智能构图产品。三星官网称,其推出的拍照建议功能,依据专业人士提供的摄影规则,基于机器学习分析2亿张高质量理想照片的成果,为照片拍摄提供构图建议。
三星S10的智能构图宣传片
不论是Vivo的AI人像构图,还是三星的拍照建议,两家厂商都将拍照建议和引导操作直观地展示在了拍摄的界面上,用户只需按照界面上的提示进行操作,便可拍摄出效果不错的照片。
但用户对于构图的偏好哪能一致?有人偏爱横幅,有人青睐竖幅;有人喜欢三分构图,有人就爱居中构图;构图其实是一件众口难调的事情。
AI给出的标准构图方式并不一定会得到所有人的认同,给图片一个构图打分,或者给出多组构图建议,在某种程度上可以帮助此问题的解决。
另外,当前的智能构图是否可以适用于人像以外的多种拍摄场景,如风光、美食、静物等,仍是一个值得考究的问题。
2019年ACM CHI上的一篇文章SmartEye: Assisting Instant Photo Taking via Integrating User Preference with Deep View Proposal Network获得了最佳论文提名奖。
该文章提出了一个实时的构图推荐网络,利用一个基于百万级图片训练出来的深度学习模型 View Proposal Network (VPN)来帮助构图。
ACM CHI上SmartEye的论文
输入一张照片,SmartEye会基于图片裁剪的方式生成一系列构图候选,并且对每一个构图候选进行打分,按照从高到低的顺序输出。
同时SmartEye会记录下用户对推荐构图方式的选择,用户对于构图的偏好会被SmartEye记录下来,从而为用户推荐更符合其喜好的构图方式。
输入照片,SmartEye给出构图推荐,并根据用户的选择调整其推荐结果
能实时地记录相机画面,给出构图建议并打分,同时又考虑了用户的偏好,SmartEye确实是一个令人眼前一亮的工作。
但正如论文中的未来工作所说,SmartEye并没有移动方向推荐的功能,引导用户往更高构图评分的方向或角度移动,还需要一些新的技术问题的解决。
文章在哪儿?