手機照片邊緣變形有解!新功能竟是Google - 工程師

Agatha avatar
By Agatha
at 2019-06-25T14:10

Table of Contents

手機照片邊緣變形有解!新功能竟是Google台灣工程師打造
https://udn.com/news/story/7098/3890834


先前由帶領Google Camera功能研發的Marc Lavoy說明,Google如何在Pixel 3手機相機功
能實現極端夜間拍攝,以及透過單顆鏡頭達成高解析度變焦效果之後,Google稍早更釋出
預計在7月底於SIGGRAPH 2019具體說明的廣角修正技術,藉此說明如何讓時下手機流行採
用廣角鏡頭實現更好的邊緣變形修正效果。


值得說明的是,此項技術是由三名台灣出身的工程師打造,分別是施易昌 (YiChang
Shih)、賴威昇 (Wei-Sheng Lai),以及梁家愷 (Chia-Kai Liang),三人均從台灣大學畢
業,而施易昌更進一步在麻省理工學院獲得碩士、博士學位,並且曾在Adobe、Google、
微軟等公司實習,賴威昇則分別在Adobe、NVIDIA與Google實習,目前在加州大學美熹德
分校進修博士學位,至於梁家愷與施易昌目前則是Google資深軟體工程師。

依照三人提出論文內容,簡略描述當前多數針對廣角鏡頭進行修正的軟體演算法,主要是
以梯形修正為基礎,針對邊緣產生變形部分進行修正,在處理一般景象時候可能不會有太
大問題,但是如果用在人像拍攝 (例如多人合影、多人自拍)等情況,很可能就會面臨人
臉變形部分被修正,背後影像卻無法被正常修正,或是背景被正常修正,人臉卻維持扭曲
情況。

因此在論文中提出技術便採用人工智慧進行影像分析,藉由將人臉,甚至身體涵蓋部分自
影像中抽離,並且進梯度修正,相同情況也針對抽離人像之後的背景進行修正,後續再將
兩組影像合併,成為背景歪曲被修正、人像部分也被修正的影像結果。



依照說明,這樣的演算法可以對應70°至120°廣角範圍內的影像拍攝修正,而對於手機
拍照使用廣角設計,其實也已經相當足夠。配合Pixel相機原本已經整合夜間拍攝、人臉
識別 (包含側臉、長髮遮蔽、配戴眼鏡等情況),加上此項廣角拍攝修正技術,預期將能
使手機拍攝功能更加「完美」。

不過,此項演算法依然有其限制,就是目前修正範圍依然是以臉部為主,身體部份仍有可
能受限演算法,導致修正後變得「修長」,或是呈現些微扭曲,但預期日後加入更多演算
法修正,將能讓廣角拍攝應用更加完善。

除了應用在手機拍攝,此項技術預期也能應用在監控攝影機,或是自駕車、電腦視覺在內
的影像識別判斷等領域,藉此降低識別判斷錯誤機率,另外也可能應用在Google Maps街
景、360度環景影像或VR全息影像拍攝,藉此讓影像呈現效果更加擬真。

而此項演算法,日後應該將會陸續開放Pixel系列機種更新使用,預期也會應用在即將推
出的Pixel 4。


《原文刊登於合作媒體mashdigi,聯合新聞網獲授權轉載。》

--

All Comments

Emily avatar
By Emily
at 2019-06-30T12:23
這跟opencv裡面修正distortion有什麼不一樣?
Steve avatar
By Steve
at 2019-07-04T17:20
內文有講啦 就是梯度修正 不過有AI 影像識別的技術
John avatar
By John
at 2019-07-06T03:12
UCMerced那個台灣人教授實驗室出來的吧
Quanna avatar
By Quanna
at 2019-07-07T21:33
不同物距幾何失真不同,所以臉(近距)跟背景(遠距)要分開修
Edith avatar
By Edith
at 2019-07-12T03:07
臉跟頭髮比較容易從影像抽出,但是衣服就難了
Yuri avatar
By Yuri
at 2019-07-16T15:26
真強者 之前有在台灣找人 不曉得找滿了沒
Jessica avatar
By Jessica
at 2019-07-19T11:14
神歪
Xanthe avatar
By Xanthe
at 2019-07-20T15:02
這功能之前影像處理不就早有了
Valerie avatar
By Valerie
at 2019-07-23T02:51
跟我想的一樣 只是我太忙沒時間實做
Sandy avatar
By Sandy
at 2019-07-27T19:42
美圖: 不是把皮膚變白,身體拉長就一堆瞎妹會來買了嗎?
Audriana avatar
By Audriana
at 2019-08-01T07:59
這需要AI嗎?記者是不是亂寫
Quanna avatar
By Quanna
at 2019-08-04T09:15
影像中找出人當前景其他當背景 分別校正再重組影像 這
到底哪裡需要AI
Lydia avatar
By Lydia
at 2019-08-07T07:09
跟我想的一樣
Madame avatar
By Madame
at 2019-08-07T18:50
Semantic Segmentation不用AI哪個技術夠穩定?
Belly avatar
By Belly
at 2019-08-08T09:13
臉大可能是臉很大或很近 應該說沒ai可能可以但有ai可
以做的更好
Todd Johnson avatar
By Todd Johnson
at 2019-08-10T09:40
現在 state of the art 的 synthetic depth 都馬是 CNN
Damian avatar
By Damian
at 2019-08-11T16:35
跟我想的一樣
Victoria avatar
By Victoria
at 2019-08-14T04:22
就Network記住了臉的prior,硬尻還原
Xanthe avatar
By Xanthe
at 2019-08-14T13:21
推一個
Jake avatar
By Jake
at 2019-08-17T13:09
阿不就好棒棒,名師出高徒咩~更!
Elvira avatar
By Elvira
at 2019-08-18T01:30
好猛 人體不變形達成超廣角拍攝
Andrew avatar
By Andrew
at 2019-08-23T00:15
設備一躍進,這些都沒用了
Blanche avatar
By Blanche
at 2019-08-25T16:14
手機相機模組的物理限制就是擺在那邊,硬體端能改善的
空間越來越小,當然是走CI的路線來突破啊
Carol avatar
By Carol
at 2019-08-27T17:46
噓的人真的很可憐
Edward Lewis avatar
By Edward Lewis
at 2019-08-27T18:48
噓的人是不是只會代工?以為科技進步不用過程
Gary avatar
By Gary
at 2019-08-28T08:21
Mia avatar
By Mia
at 2019-08-29T21:11
Google是真強者
Bethany avatar
By Bethany
at 2019-08-30T02:56
硬體端能改善的空間越來越小?哈哈哈
Cara avatar
By Cara
at 2019-09-01T19:52
Google是真強者,但某師不是強者,沾光開心嗎?
Megan avatar
By Megan
at 2019-09-03T14:03
噓的人真的有病,台灣之光推~
Caitlin avatar
By Caitlin
at 2019-09-05T14:08
看他ID不就知道
Quanna avatar
By Quanna
at 2019-09-09T23:44
說人有病的才是有病~
Joseph avatar
By Joseph
at 2019-09-12T22:37
某R有夠可撥 只能耍嘴皮子了 真強者給推
Tracy avatar
By Tracy
at 2019-09-14T19:38
某r真能嘴,這麼會嘴去做一個完全沒有畸變的硬體模組來給大
家開開眼界啊
Eden avatar
By Eden
at 2019-09-19T17:08
梯形失真用移軸鏡可以修正,看誰有辦法做到手機鏡頭上
Anthony avatar
By Anthony
at 2019-09-23T03:51
為什麼要用「竟是」,瞧不起台灣嗎...
Yuri avatar
By Yuri
at 2019-09-25T22:39
ZF6也有喔
Adele avatar
By Adele
at 2019-09-26T20:13
文章看不出來有誰沾光啊

5000大企業 台積電蟬聯獲利王

Liam avatar
By Liam
at 2019-06-25T12:53
https://www.chinatimes.com/realtimenews/20190625001966-260410?chdtv 5000大企業 台積電蟬聯獲利王 12:35 2019/06/25 工商 陳碧芬 台灣企業永遠的隊長台積電,再度展現冠軍的氣勢!CRIF中華徵信所最新公布的「台灣地 ...

多家面試心得(下)

Enid avatar
By Enid
at 2019-06-25T11:40
這是繼上一篇之後的面試心得,排序依面試時間。文章寫完後貼入APP,若排版不佳請見諒 。 其實我覺得寫大公司的面試心得,參考性有點低?大公司部門跟Team影響很大,又切比較細 ,所以我的面試經驗不一定有用。 此篇包括: #QNAP(新生)軟體研發工程師 Cluster #QNAP(汐止)軟韌研發工程師 ...

《在職訓練》AIoT感測控制與機電整合技術

Lucy avatar
By Lucy
at 2019-06-25T10:31
※適合上班族、待轉業者及欲增加第二專長者※ 一、《在職訓練》智慧電子學院*周六班* (一)招生課程: 1.AIoT感測控制與機電整合技術(60小時) 訓練日期:108/07/13-108/09/07(每周六) 課程內容:(1)電磁波的頻率、頻寬與資料傳輸率(2)基 ...

我半導體首座研發專廠!台積電將建雙子星

Dinah avatar
By Dinah
at 2019-06-25T08:21
我半導體首座研發專廠!台積電將建雙子星晶圓廠 〔記者洪友芳/新竹報導〕晶圓代工龍頭廠台積電(2330)砸重金投資研發,以保持製程 技術領先地位,今年研發經費上看千億元規模,研發人力超過6000人,為了避免與生產搶 用晶圓廠,竹科管理局正快馬加鞭協助研發中心能早日動工,台積電預計明年初展開建廠 ,一年 ...

比特幣再飆高 台供應鏈不敢輕舉妄動

Genevieve avatar
By Genevieve
at 2019-06-25T08:16
原文連結: 比特幣再飆高 台供應鏈不敢輕舉妄動 http://bit.ly/2J7Y7xK 原文內容: 2017年快速飆漲的比特幣,在2018年12月摔落至3,100美元低點後,2019年4月開始緩步回 升,5、6月漲勢驚人,近日在Facebook宣布數位貨幣「Libra」計畫後,24日價格更衝上 近1. ...