相關文章

0c32855d803c22e65f4a975a0df7dd4a Google推出了iOS專用的Motion Stills攝影App,它可以利用Google自行研發的影像穩定技術,強化Apple Live Photos的穩定度,並降低畫面晃動的情況。其中使用的關鍵技術,就是它會自動偵測前景與背景,並讓背景成為靜止畫面,以降低觀看動態照片時所感受到的晃動感,並提升動態照片的品質。

Live Photos讓照片動起來

Live Photos是Apple在iPhone 6S、iPhone 6S Plus與iPhone SE等智慧型手機中新加入的攝影功能,它能夠在拍攝照片的瞬間,同時記錄拍攝前後的動態與聲音,將靜態照片轉變為長度為3秒的小短片,讓瞬間精彩化為難忘的生動回憶。

相較於傳統靜態照片,Live Photos除了會儲存1200萬畫素的靜態影像之外,還會額外儲存按下快門前後各1.5秒的動態影片,讓Live Photos成為有如哈利波特故事中會動的畫一般,更加充滿樂趣。

不過使用Live Photos除了要額外花費手機儲存空間存放動態影片,會加快把手機儲存容量耗盡的速度之外,另一個問題就是拍攝Live Photos時,可能會因會持握手機不穩定,而造成影片晃動,進而影響觀看品質,Google推出的Motion Stills攝影App就能夠改善這個問題。

▲Live Photos是Apple在新款智慧型手機中加入的攝影功能,能夠以動態短片取代靜態照片。

Motion Stills讓影像更加穩定

Motion Stills不但能夠讓使用者在離線狀態創造生動的視覺體驗,或是透過多組短片串聯出屬於自己的動態回憶,還能夠在Google影像處理技術的協助下,拍攝更穩定的動態影像。

Google有著為百萬部以上影片降低晃動的處理經驗,Motion Stills採用線性規劃(Linear Programming)的方式來計算攝影鏡頭移動的路徑,讓畫面中的影像看起來有如使用穩定器一般沒有晃動,並透過產生靜止背景的方式,進一步降低畫面晃動。

Motion Stills的一大挑戰就是要用使用者手上的智慧型手機,完成原本透過大行伺服器所進行的影片處理工作。Google採用時序性子取樣(temporal subsampling)、動態參數去耦(decoupling of motion parameters),以及使用Glop線性規劃最佳化系統、降低畫面解析度等方式,來將提升處理速度達原本的40倍,讓使用者手上的智慧型手機上能夠應付複雜的影像處理工作。

由於短片很適合轉換為重複播放的Gif圖檔,因此Motion Stills也應用了背景靜止技術,系統會自動分辨畫面中的背景與其他景物,讓來背景靜止不動以提升觀賞舒適度。不過在影片處理過程中,遇到的難題就是畫面中的前景會擋到背景,開發團隊利用在時序上相同的方式,分析前景與背景物件的動態向量,來計算出物件移動的模式,以便透過運算與處理後,讓前景維持原本的動態,而背景則是靜止不動。

Motion Stills是款iOS專用的App,僅相容與iOS 9.0以上版本,不過可以相容於各式iPhone、iPad以及iPod touch等裝置。讀者可至這邊下載App。

▲Motion Stills可以協助使用者拍出穩定、無晃動的動態短片。

▲在交叉比對中,可以看到開啟Motion Stills後(圖示2個半圓交錯疊放),畫面背景的晃動明顯較未開啟Motion Stills(圖示2個半圓疊成1個圓刑)明顯。

▲在快速移動的情況下,Motion Stills也能有效讓畫面更加穩定。

▲此圖為背景靜止技術的展示。左側為原始短片,其中紅色方框為攝影鏡頭移動路徑,紅點與綠點則分別為前景、背景物件的動態。右側則為經處理後的短片。

▲有了Motion Stills之後,使用者就能拍攝更佳穩定的動態短片了。

延伸閱讀:

Google讓電腦看了10000部影片,打算用深度學習技術改善YouTube影片畫質

Google新通訊工具Allo:深度學習的功能看似很炫,但你會想用來跟人聊天嗎?

【iPhone 6S基本技】Live Photos到底怎麼玩?

使用 Facebook 留言

發表回應

謹慎發言,尊重彼此。按此展開留言規則