獨立的ISP有什么好處?
很多讀者經常聽別人說獨立的ISP好處多多,但是卻不是很清楚有哪些好處?甚至連ISP是什么也不是很清楚。眾所周知,CPU負責處理通用邏輯數據,GPU則負責處理圖像方面的多媒體數據,ISP則是負責處理拍照模組反饋的信息,也是另一顆重要的處理器,還有下文提到的DSP等模塊,共同打造Qualcomm驍龍820的異構計算體系,各模塊合理分工并協(xié)同工作,最大效率地優(yōu)化日常工作流程。
我們回憶一下拍照時候的流程:打開快門的瞬間,當光線透過鏡頭、光圈之后,折射并傳遞到攝像頭感光元件(CMOS)上,產生光電效應,這個時候CMOS傳感器就會將這些數據傳遞到ISP進行處理,最終將電信號轉化為肉眼可見的數碼相片,顯示在屏幕上。
整個過程中,ISP起到關鍵作用,不僅僅需要準確還原CMOS上得到的數據,還要對部分有瑕疵和損壞的數據(例如噪點、亮度衰減、膚色蒼白)進行算法優(yōu)化。華為、錘子等手機廠商經常強調自己的SoC采用了獨立的ISP芯片,這里所說的獨立ISP芯片并不是指Qualcomm平臺自帶的ISP芯片,而是其它廠商的ISP,例如ALTEK 6010。殊不知,其實Qualcomm處理器自帶的ISP本身的算法優(yōu)化和成像表現已經比較出色,關鍵是,無論采用Qualcomm SoC的獨立ISP還是ALTEK 6010等第三方廠商提供的獨立ISP,關鍵還是得看芯片廠商和手機廠商的配合,正如獨立顯卡并不一定比集成顯卡強一樣的道理。
回到Qualcomm驍龍820的Spectra ISP上,雖然和Qualcomm驍龍810的ISP都是14bit雙ISP處理器,但是在細節(jié)上進行了優(yōu)化。首先,通過ISP和下文提及的DSP進行配合,自適應地增亮視頻和照片中較暗的區(qū)域,在保證視覺效果的前提下減少ISP的功耗。其次,Spectra ISP支持最多三個攝像頭,讓更多智能手機能夠享受奇酷手機 旗艦版、HTC One(M8)、LG V10這些三攝像頭手機帶來的拍照樂趣。
Spectra ISP最大的特色還是其出色的場景檢測系統(tǒng)背后的Zeroth認知平臺,支持下一代計算攝影(認知計算)。索尼Xperia Z系列旗艦機的“金相機”模式,vivo Xshot中的“自動場景”模式,聯(lián)想樂檬X3的“智畫智能場景”模式,其實都是場景檢測系統(tǒng)的實際應用,通過相機內部ISP智能分析被攝物所處的實際環(huán)境究竟是室內、室外還是其它地方?然后通過ISP的算法對拍攝場景的曝光、色溫等參數進行優(yōu)化,真正做到隨手一拍,讓用戶減少調整復雜的相機參數。
除了能夠智能識別場景,還能夠判斷被攝物是否文本/一大片文字,從而調用內部算法對拍攝文本內容進行優(yōu)化,例如HTC One X相機和vivo Xshot就有類似的“文本模式”,前者主要讓相片變成黑白兩種顏色,增強文字和背景的對比度,更好地保留文本閱讀的視覺效果。后者則具備“文檔糾正”功能,能夠將拍歪的文本通過算法調整,最終以正面拍攝的效果呈現在屏幕上(一張為調整前,一張為調整后的照片),這些其實都是手機處理器內置功能帶來的實際應用擴展。
手機廠商以前可能需要通過額外的方式完成“場景識別”和“文檔模式”的功能,而Spectra ISP就是通過提供相關接口給手機廠商,讓他們不再需要單獨通過其它軟硬件的方式就能輕松實現上述功能。
上述的拍照功能只不過是Zeroth認知平臺的一個方面——圖像識別和模式識別(視覺認知),其實還有音頻識別、深度學習神經網絡等技術。
版權所有,未經許可不得轉載
關于CNMO | 聯(lián)系我們 | 站點地圖 | 精英招聘 | CNMO記事 | 家長監(jiān)護工程 | 舉報不良信息
Copyright © 2007 -
北京沃德斯瑪特網絡科技有限責任公司.All rights reserved 發(fā)郵件給我們
京ICP證-070681號 京ICP備09081256號 京公網安備 11010502036320號