我的電子情人夢(25):- 當代手機的攝影能力怎麼會這麼厲害

更新 發佈閱讀 12 分鐘

以前始終認為智慧型手機即使畫素再怎麼高,也難以取代”可換鏡頭”相機。除非手機的鏡頭甚至是快門,有了革命性的翻轉,那就有故事了;偏偏這是現在進行式也是未來進行式。

喜歡拍照的人,相信都很在意”鏡頭”。偏偏光學技術上有它的”know-how”門檻與名牌迷戀神祇,於是乎手機廠與知名光學鏡頭廠商(比如徠卡蔡司等)合作就很常見。

vocus|新世代的創作平台

手機的武功內力與外力,年年在神速進步。內力指的是應用處理器的”運算效能”,還在百米賽跑的飛奔;運算效能才能徹底發揮”深度學習”的複雜演算式。比如說,Apple於2020發表的A14處理器。近年來,深度學習在影像辨識以及聲音辨識等應運的演算上有了突破性進展。

外力,當然指的是”多鏡頭”的導入;AI技術(說深度學習似乎比較精確)喊的很響亮;也就是影像技術再升級。

畢竟,數位時代的攝影,終究核心是一句話:“數位式影像處理”(Digital Image Processing)

說白話就是數學演算式的運算。越有驚奇的演算式出現,越是能產生異想不到的效果。

記得2018年,華為發表三鏡頭手機;而Apple卻早在2013就取得了三鏡頭的專利(美國專利編號No. 8,497,897;標題為“Image capture using luminance and chrominance sensors”)。

其實,早在2014年,HTC就推出雙鏡頭的M8;結果卻是無功而過。而後來者華為、Apple等卻掀起了風潮。

多鏡頭技術,有它的技術內涵;各家的”設計思想暨理念”也有所差異,因此可見到多種實踐方式,比如說2鏡頭的方式可以有:

. 廣角/標準 + 遠距。

. 廣角/標準 + 超廣角。

. 彩色 + 黑白鏡頭。

以谷歌的Pixel 4為例,係”廣角 + 望遠”的構成;而Pixel 5(包含Pixel 4a 5G)則是廣角(77度) + 超廣角(107度)的結構。

雙鏡頭技術,依照各自技術可以喧囂之處,比如對焦速度散景(bokeh)、倍焦透視(Zoom & Perspective)等;其內在的技術學問都很有得瞧,好比說,兩者感應器畫素的不同、光圈的差異、光學穩定度、影像融合的演算式等等,處處皆是文章。

智慧型手機內部的影像感應器尺寸比起相機小很多,然而在畫素上的跳躍卻是非常地驚人;比如說,華為的「P20 Pro」標榜著4,000萬畫素、 ISO102400超高感應度等高規格。小米與三星都喊出超過一億畫素的機款。

請注意一件事,智慧型手機的相機模組與傳統相機有些地方的設計是有很大差異的。相信有很多的內行人多有注意到為什麼手機都在標榜著”大光圈”呢?打著大光圈f1.8(比如iPhone 7 Plus)、f1.7(比如Samsung Galaxy S8)、f1.6(比如LG V30)、f1.5甚至有機會再突破一城。如此大光圈的鏡頭若是在傳統相機與數位相機中,其鏡頭價格可是非比尋常,很昂貴的。手機之所以會如此幹法,是完全有脈絡可以追尋的。

首先,”光圈(Aperture)”,係由光線可以進入相機的開口大小來定義。一般常見到的標示有ƒ/2到ƒ/2.8、ƒ/4到ƒ/5.8等。當光圈之數值越小時,代表進光量越多,當用於夜拍時相當有利。當光圈數值越大時,代表進光量越少,可以得到景深的效果。光圈數值越小,光圈越大的意思。

vocus|新世代的創作平台

有在攝影的朋友該知道大光圈的鏡頭會有”散景(bokeh)”的效果。但是,對於智慧型手機來說,使用固定光圈,鏡頭靠近小型化影像感應器,以及一個合理的廣泛的視野。所以,手機相機的景深幾乎不會那麼淺。f / 2.2的智慧型手機相機實際上僅提供相當於全畫幅相機上的f / 13或是f / 14光圈的景深,該焦段只會產生少量的模糊。現代手機具有增強的散景效果,實際上多是仰賴軟體的功力手段來獲得更具戲劇性的外觀。

雖然大光圈不能夠保證相機的照相品質,較小的光圈值卻可以讓更多的光線到影像感應器,這可以降低快門的速度以減少模糊的現象,並降低感應器的雜訊。

手機相機的光圈值應該與像素大小合併一起來考慮,因為較大的像素不一定需要大的光圈來捕捉足夠的光線。然而,小像素和小光圈的確是會造成低光性能的問題。因此,手機相機的”光圈 - 鏡頭”品質;會是相當重要的設計環節。特別是如何來避免”像差失真”(aberration distortion)和”鏡頭眩光”(lens-flare)等效應問題。

像差失真』,是光學上的一門深學問,像差失真有多種的效應。比較為人所孰知的包括有:球面像差(降低清晰度和尖銳度)、Comatic像差(模糊或拖尾)、場曲(Field curvature - 在邊緣失去焦點)、以及引起未聚焦的顏色和分裂白光的色像差(chromatic aberration)等。

vocus|新世代的創作平台
vocus|新世代的創作平台
vocus|新世代的創作平台

無論是相機還是手機的鏡頭,係由多數個“校正群組”所構建的,旨在能夠正確聚焦光線並減少這些像差。便宜的鏡頭模組傾向於使用較少的群組,因此更容易發生問題。還有,透鏡所使用的材料,也扮演著非常重要的角色,更高品質的玻璃以及多種塗層的方式,能夠提供更好的校正效能和更少的失真。光學鏡頭素質的重要性,無庸置疑。

棱鏡(prism)以及透鏡陣列,係具有光學的穩定性,也就是說它們以微小的步幅移動以抵消任何可能的相機震動。

當在手機相機上使用變焦拍攝時,”穩定性”就相當重要。因為在這些情況下,即使是微小的振動和晃動都會導致了模糊的照片。因此,”OIS(Optical Image Stabilization)”的技術將是決定勝負的關鍵。一般是在廣角鏡頭上使用光學防震的技巧,OPPO採用了新方法,並將光學防手震OIS直接應用於長焦鏡頭。事實上,該項技術是源自於以色列新創公司Corephotonics。也就是一狀告Apple的iPhone 7 Plus 及iPhone 8 Plus使用雙鏡頭相機侵犯其專利技術的公司。

常用手機防手震的技術有”電子防手震EIS”與”光學防手震OIS”之區分,前者需要龐大記憶體容量與耗費處理器效能。

手機雙鏡頭的設計,於倍焦上的應用,有著重要的地位。畢竟,手機的拍照訴求已經是目前競爭廠商產品差異化的路途。設計上一般約是等效如27mm焦距,來取得影像。這些鏡頭(往往是安裝在鏡筒中的五個或六個鏡頭元件的堆疊)具有嚴格的製造限制,以確保能夠大量生產。這種設計上的約束導致於表示鏡頭全長的TTL(Total Track Length) 大於鏡頭組件的有效焦距EFL(effective focal length)。

TTL是決定相機高度以及手機厚度的關鍵性參數 !

因此,盡量減少該數值是非常重要的。儘管如此,典型的廣角鏡頭組件的有效焦距為4.2mm和大光圈(比如說F / 1.8),導致了約5mm的TTL和5.8mm的模組高度。

以2倍變焦的雙鏡頭來說,廣角和遠距模組具有相同的畫素數量,遠距需要有較窄視角(比如說54mm),就需要一個具有較大有效焦距的鏡頭組件,來滿足:

EFLτ =2×EFLω×(畫素大小τ)/( 畫素大小ω)

假設EFL = 4.4mm,畫素大小 = 1.4um 以及畫素大小 = 1.0um;遠距相機的EFL就為6.3mm。一般的鏡頭設計有此EFL會導致模組的設計超過了8mm。

vocus|新世代的創作平台

透鏡的尺寸主要由透鏡的焦距(f)以及所需要的視野FoV(field of view)來決定的,這些屬性往往牽連在一起,比如說,影像感應器尺寸與FoV * f成正比。較大的焦距會導致較高的變焦倍數和較長的鏡頭,使得相機更厚。

而從2014年才開始竄出的”Corephotonics”為什麼會這麼火紅,原因之一就在於其傲人的專利技術;比如說,”TTL/EFL的比例小於1”的設計技術(專利 US 9,402,032- 2014)。請參考下圖:

vocus|新世代的創作平台

典型鏡頭的TTL / EFL比率約為1.3。在1/3“感應器的單光圈智慧型手機相機中,EFL通常在3.5mm和4.0mm之間,導致70-80°的FoV。假設希望使用雙光圈相機實現2倍光學變焦,自然會使用EFL為3.5mm的廣角鏡頭和EFL為7mm的長焦鏡頭。若沒有應用特殊技術,廣角的TTL約為4.55mm(3.5mm x 1.3),而長焦鏡頭的TTL約為9.1mm(7mm x 1.3)。將9.1mm鏡頭整合到手機可能就要10mm了,廠商怎麼可能會接受此方案呢?

影像感應器,是設計雙鏡頭變焦要慎重考慮的重要因素;廣角感應器的畫素尺寸與遠距感應器的畫素尺寸之間的差異,也決定了變焦倍率(zoom factor)。如果兩者感應器的畫素大小是一樣的,變焦倍率就會基於EFL的比率來決定。比如說,廣角EFL為3.8、遠距EFL為6.8,變焦倍率就是6.8mm/3.8mm = 1.8。如果廣角畫素大小為1.25um、遠距畫素大小為為1.12µm,那麼變焦倍率就可以變成2x了。計算方式如下:

(6.8mm/3.8mm) x (1.25µm/1.12µm) = 2x

接著來談雙鏡頭設計的” 影像融合(Image Fusion)”。

影像融合這門技術的演進也不過約是1970年代末之後開始的事情,它係結合了感應器影像處理電腦運算人工智慧理論的交叉型研究領域,加上小波轉換的運算方式之崛起;應用領泛極為廣泛。

影像融合,簡單說就是將不同感應器取得的同一場景影像,或是同一感應器以不同運作模式或是在不同取像時間下所得到的同一場景影像,融合/合併成一幅影像;優點就是影像的內容會更為豐富。

底下就舉幾個雙鏡頭的應用案例,供您參考。

案例1:”彩色 + 黑白” 雙鏡頭

vocus|新世代的創作平台

由於黑白感應器取得更多倍(2.5)的光量,有更佳的解析度與信號雜訊比。影像融合之後,對於”低光”的環境能提供更好的影像品質。

案例2:”廣角 + 遠距” 雙鏡頭

vocus|新世代的創作平台

這是模擬一般單眼相機的連續光學倍焦效果。融合的影像將改善沒有遠距的影像到遠距相機的視野FOV (field of view )。視野是指從透鏡看出到物體的角度,更大的影像感應器(或軟片)就有更寬的視野,且能補捉到更多的畫面。

理所當然地,影像融合需要一套好的演算式(algorithm);當然,會存在多種的方式。

影像融合技術也有它面臨的技術挑戰,比如說,演算式為了融合兩個影像,就需要使用相匹配的像素。畢竟難免會出現” 遮蔽(occlusions)”的現象,比如下圖所示:

vocus|新世代的創作平台

還有鏡頭的”缺陷(imperfection)”也是一個大問題,例如景深差異的部分,一個鏡頭對焦、另一個鏡頭失焦;就很難找到相匹配的像素。

Olympus於2020/9/30正式與JIP簽約,讓渡相機事業。新設立『OM Digital Solution』公司,JIP持股95%,Olympus持股5%。Olympus這個品牌名,珍重再見 !









留言
avatar-img
陳乃塘 (NT)的沙龍
12會員
56內容數
2024/10/31
最近看了一部黛咪摩爾主演的驚悚電影 - 懼裂(The Substance),很難說它是恐怖片,而是對世俗的價值觀以及人性上天生愛美愛年輕存在意識的一種物體性批判吧;片中的啟示,太過度在乎別人對自己的看法,甚至自己的價值建築在別人身上,肯定不會是好事。走火入魔的可怕就是懼裂將之放至無限大的詭異劇情。
Thumbnail
2024/10/31
最近看了一部黛咪摩爾主演的驚悚電影 - 懼裂(The Substance),很難說它是恐怖片,而是對世俗的價值觀以及人性上天生愛美愛年輕存在意識的一種物體性批判吧;片中的啟示,太過度在乎別人對自己的看法,甚至自己的價值建築在別人身上,肯定不會是好事。走火入魔的可怕就是懼裂將之放至無限大的詭異劇情。
Thumbnail
2024/10/28
上了年紀才了解,有些人隨著年齡增長,不只邁向年老之路,而且還更為無知愚蠢。從健身館四處林立的場景來看,當前”運動”與”健身”意識高昂,無論是運動中心還是所謂運動俱樂部等多多少少會兼有烤箱三溫暖或是蒸氣浴等設施。多年以來在烤箱就看見了不少江湖奇人,喜歡在感應器(Sensor)上澆冰水將溫度拉升到不可思
Thumbnail
2024/10/28
上了年紀才了解,有些人隨著年齡增長,不只邁向年老之路,而且還更為無知愚蠢。從健身館四處林立的場景來看,當前”運動”與”健身”意識高昂,無論是運動中心還是所謂運動俱樂部等多多少少會兼有烤箱三溫暖或是蒸氣浴等設施。多年以來在烤箱就看見了不少江湖奇人,喜歡在感應器(Sensor)上澆冰水將溫度拉升到不可思
Thumbnail
2023/08/14
有個英文單詞『White Noise』,有人說是白雜訊,也有人說是白噪音。那麼,哪一種說法會是比較貼切呢?我想皆對,要看前後文場合而定吧。  話說在電子和通信工程中的確有一個名詞”White Noise”,是指在所有頻率上具有恆定功率頻譜密度的一種隨機信號。意思也就是說,它在不同頻率下具有相同的強
Thumbnail
2023/08/14
有個英文單詞『White Noise』,有人說是白雜訊,也有人說是白噪音。那麼,哪一種說法會是比較貼切呢?我想皆對,要看前後文場合而定吧。  話說在電子和通信工程中的確有一個名詞”White Noise”,是指在所有頻率上具有恆定功率頻譜密度的一種隨機信號。意思也就是說,它在不同頻率下具有相同的強
Thumbnail
看更多
你可能也想看
Thumbnail
Apple 最新的系統系列,在今天台灣時間 11 日凌晨正式亮相了,只能說這波 AI 操作真的有點厲害啊。
Thumbnail
Apple 最新的系統系列,在今天台灣時間 11 日凌晨正式亮相了,只能說這波 AI 操作真的有點厲害啊。
Thumbnail
《轉轉生》(Re:INCARNATION)為奈及利亞編舞家庫德斯.奧尼奎庫與 Q 舞團創作的當代舞蹈作品,結合拉各斯街頭節奏、Afrobeat/Afrobeats、以及約魯巴宇宙觀的非線性時間,建構出關於輪迴的「誕生—死亡—重生」儀式結構。本文將從約魯巴哲學概念出發,解析其去殖民的身體政治。
Thumbnail
《轉轉生》(Re:INCARNATION)為奈及利亞編舞家庫德斯.奧尼奎庫與 Q 舞團創作的當代舞蹈作品,結合拉各斯街頭節奏、Afrobeat/Afrobeats、以及約魯巴宇宙觀的非線性時間,建構出關於輪迴的「誕生—死亡—重生」儀式結構。本文將從約魯巴哲學概念出發,解析其去殖民的身體政治。
Thumbnail
這是一場修復文化與重建精神的儀式,觀眾不需要完全看懂《遊林驚夢:巧遇Hagay》,但你能感受心與土地團聚的渴望,也不急著在此處釐清或定義什麼,但你的在場感受,就是一條線索,關於如何找著自己的路徑、自己的聲音。
Thumbnail
這是一場修復文化與重建精神的儀式,觀眾不需要完全看懂《遊林驚夢:巧遇Hagay》,但你能感受心與土地團聚的渴望,也不急著在此處釐清或定義什麼,但你的在場感受,就是一條線索,關於如何找著自己的路徑、自己的聲音。
Thumbnail
對我而言,這類頭戴式裝置,無論眼鏡還是頭盔,AR、VR 或 MR,其實最關注的部分是...
Thumbnail
對我而言,這類頭戴式裝置,無論眼鏡還是頭盔,AR、VR 或 MR,其實最關注的部分是...
Thumbnail
毫無疑問的,智慧手機是過去15年的產業巨星;那麼,下一顆巨星又在哪裡?每個世代的巨星都會開啟一個龐大的全新市場;但今天已經有40億人拿著智慧手機,所以要開啟一個「更大、而且大很多」的市場將會越來越困難。讓我們從幾個不同的角度,來尋找這個問題的可能答案。
Thumbnail
毫無疑問的,智慧手機是過去15年的產業巨星;那麼,下一顆巨星又在哪裡?每個世代的巨星都會開啟一個龐大的全新市場;但今天已經有40億人拿著智慧手機,所以要開啟一個「更大、而且大很多」的市場將會越來越困難。讓我們從幾個不同的角度,來尋找這個問題的可能答案。
Thumbnail
先前消息指出,Google 2025 年發表的第十代 Pixel 智慧手機迎接重大變革,Tensor G5 處理器可望成為台積電生產的首款 Pixel 處理器。最新消息,Tensor G5 處理器流程順利,即將進入「流片」階段。
Thumbnail
先前消息指出,Google 2025 年發表的第十代 Pixel 智慧手機迎接重大變革,Tensor G5 處理器可望成為台積電生產的首款 Pixel 處理器。最新消息,Tensor G5 處理器流程順利,即將進入「流片」階段。
Thumbnail
上週特斯拉股價終於突破新高,往900大關邁進,恭喜所有大股東小股東奈米股東們,但我們也不能因為特斯拉目前的成功而自滿,在自動駕駛道路上有許多競爭對手相繼出爐,這一系列的文章主要是針對特斯拉自動駕駛技術的科普,我們根據特斯拉2021 AI day的介紹了解特斯拉如何完成自動駕駛~
Thumbnail
上週特斯拉股價終於突破新高,往900大關邁進,恭喜所有大股東小股東奈米股東們,但我們也不能因為特斯拉目前的成功而自滿,在自動駕駛道路上有許多競爭對手相繼出爐,這一系列的文章主要是針對特斯拉自動駕駛技術的科普,我們根據特斯拉2021 AI day的介紹了解特斯拉如何完成自動駕駛~
Thumbnail
背景:從冷門配角到市場主線,算力與電力被重新定價   小P從2008進入股市,每一個時期的投資亮點都不同,記得2009蘋果手機剛上市,當時蘋果只要在媒體上提到哪一間供應鏈,隔天股價就有驚人的表現,當時光學鏡頭非常熱門,因為手機第一次搭上鏡頭可以拍照,也造就傳統相機廠的殞落,如今手機已經全面普及,題
Thumbnail
背景:從冷門配角到市場主線,算力與電力被重新定價   小P從2008進入股市,每一個時期的投資亮點都不同,記得2009蘋果手機剛上市,當時蘋果只要在媒體上提到哪一間供應鏈,隔天股價就有驚人的表現,當時光學鏡頭非常熱門,因為手機第一次搭上鏡頭可以拍照,也造就傳統相機廠的殞落,如今手機已經全面普及,題
Thumbnail
蘋果自行研發的5奈米製程M1晶片是Intel(英特爾)架構改為ARM(安謀)架構的「飛躍」,突破了英特爾x86架構電腦的長年壟斷,讓高通、聯發科、NVIDIA與三星電子等ARM架構筆電起死回生。而類似蘋果M1晶片的AI(人工智慧)晶片,已成為全球科技大廠的研發的趨勢,AI晶片的爭霸戰正方興未艾。
Thumbnail
蘋果自行研發的5奈米製程M1晶片是Intel(英特爾)架構改為ARM(安謀)架構的「飛躍」,突破了英特爾x86架構電腦的長年壟斷,讓高通、聯發科、NVIDIA與三星電子等ARM架構筆電起死回生。而類似蘋果M1晶片的AI(人工智慧)晶片,已成為全球科技大廠的研發的趨勢,AI晶片的爭霸戰正方興未艾。
Thumbnail
本文分析導演巴里・柯斯基(Barrie Kosky)如何運用極簡的舞臺配置,將布萊希特(Bertolt Brecht)的「疏離效果」轉化為視覺奇觀與黑色幽默,探討《三便士歌劇》在當代劇場中的新詮釋,並藉由舞臺、燈光、服裝、音樂等多方面,分析該作如何在保留批判核心的同時,觸及觀眾的觀看位置與人性幽微。
Thumbnail
本文分析導演巴里・柯斯基(Barrie Kosky)如何運用極簡的舞臺配置,將布萊希特(Bertolt Brecht)的「疏離效果」轉化為視覺奇觀與黑色幽默,探討《三便士歌劇》在當代劇場中的新詮釋,並藉由舞臺、燈光、服裝、音樂等多方面,分析該作如何在保留批判核心的同時,觸及觀眾的觀看位置與人性幽微。
Thumbnail
在蘋果近十年來的首次重大硬體發布會上,一款備受期待的擴增實境頭戴式裝置 Vision Pro 終於揭開神秘面紗。這款裝置的推出,不僅標誌著蘋果正式進軍虛擬現實領域,更是對該領域的一次重大突破。
Thumbnail
在蘋果近十年來的首次重大硬體發布會上,一款備受期待的擴增實境頭戴式裝置 Vision Pro 終於揭開神秘面紗。這款裝置的推出,不僅標誌著蘋果正式進軍虛擬現實領域,更是對該領域的一次重大突破。
Thumbnail
AI、電動車、智慧城市無不需要空間感知技術,除了電腦視覺(鏡頭),還有很多技術已經進入我們的生活,這篇文章整理介紹LiDAR這個科技產品的技術、應用、商業,從技術面、投資面了解他是什麼東西。
Thumbnail
AI、電動車、智慧城市無不需要空間感知技術,除了電腦視覺(鏡頭),還有很多技術已經進入我們的生活,這篇文章整理介紹LiDAR這個科技產品的技術、應用、商業,從技術面、投資面了解他是什麼東西。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News