[情报] Google Pixel 2动态照片背后的技术,利用光学稳定器与算法

楼主: gaiaesque (請不要叫偶解釋偶der暱稱)   2018-03-17 08:00:08
https://tinyurl.com/ycvye9wk
Google Pixel 2动态照片背后的技术,利用光学稳定器与算法让影像不晃动
随着智慧型手机的相机功能与摄影品质越来越精进,虽然在品质部分可能还无法完全取代
数位相机,但是因为方便考量,许多使用者已经舍弃数位相机,全以智慧型手机记录生活
大小事。厂商也无不致力于强化智慧型手机的拍照功能,不但搭载更强悍的光学元件,也
透过算法强化防手震效果。
透过极短片记录生活
有许多智慧型手机搭载动态照片功能(Motion Photo),可以拍摄长度为3秒的短片,如
此一来使用者就不必在要拍摄照片或影片之间抉择。然而影片与照片之间的差异除了动态
与静态之外,另一个问题在于拍摄影片时若是一面走动,或是没有将手机拿稳,就会发生
画面晃动的状况。
为了改善这个情况,Google开发了Android平台Motion Stills技术与App,强化防手震效
果。它是透过分析影片的每个画格,计算每个物件的动态向量,并分辨这些向量属于前景
或背景物件。这种以纯软件运作的方式,虽然能适用于多数Android装置,但是整体效果
还是有所限制。
结合软、硬件功能降低晃动
在Pixel 2智慧型手机上,Google的研发团队结合了以软件为基础的影像辨识追踪,以及
以硬件为基础的动态感应侦测,开发了新的动态预估以及混合式影像稳定技术,有助于提
供比Motion Stills或是纯硬件技术更稳定的拍摄成果。
每当使用者按下快门的时候,系统就会撷取1张静态照片以及3秒的动态影片,而在拍下的
影片时,也会将拍摄当时陀螺仪以及光学影片稳定器记录的动态资讯(手机移动、晃动的
情况)一并保留下来,做为影像调整与稳定化的参考数据。
由于Motion Stills只能透过影像辨识来判断晃动情况,难免会发生误判的情况,而混合
式影像稳定技术则可在影像辨识过成中纳入动态资讯,提升判断的精准度。
在系统能够准确预估影片中背景晃动状态后,就能透过影像处理的方式,将背景“贴齐”
在固定位置,受益于混合式影像稳定技术,即便影片的场景很复杂、有多种不同距离的景
物,或是前景的物件占据大半画面,都能有效降低晃动的情况,
使用Pixel 2拍摄动态短片时,系统只会储存原始影片以及容量很小的附加资讯,并在播
放影片的当下,透过绘图处理器的着色器(GPU Shader)即时处理影像。如果使用者想要
分享稳定的影像也不是问题,只要透过Google Photos,就能将原始影片转换成稳定的影
片或Gif动态图档,并上传至社群网站或传送给朋友,如此一来其他装置也能看到稳定处
理后的影片。

Links booklink

Contact Us: admin [ a t ] ucptt.com