AI時代,手機的拍照效果出片品質除了靠堆網路攝影機模組硬體(傳感器、鏡頭、自動對焦模組等)外,還有一個至關重要的因素,那就是演算法。演算法的好壞是一回事,而演算法的執行單元就包括手機的專用影像處理芯片( 如果有的話 )和CPU、GPU、NPU等,它們的算力對於拍照效果的影響主要體現在以下幾個方面:
影像處理能力
手機芯片的算力直接影響了影像處理的速度和品質。強大的芯片可以快速處理大量數據,使得拍照過程更加迅速,同時也能更好地處理高分辨率的圖片,從而獲得更高品質的照片。
人工智慧輔助
許多現代手機都使用了人工智慧(AI)技術來最佳化拍照效果。這種技術需要大量的計算資源,因此,強大的芯片可以提供更好的AI輔助效果,如智慧場景辨識、美顏模式、背景虛化等。
影像穩定和降噪
芯片的算力也會影響影像穩定和降噪的效果。例如,有些芯片可以透過復雜的演算法來減少照片中的噪點,或在拍攝視訊時實作平滑的影像穩定。這都需要強大的計算能力 。
如果手機芯片的算力不足,可能會導致拍照過程緩慢,照片處理時間長,無法充分利用AI技術最佳化照片品質,以及在低光環境下拍攝的照片可能會有更多的噪點等問題 ,可見,手機芯片的算力對於拍照效果是非常重要的。
手機的專用影像處理芯片主要有以下幾種型別:
●影像訊號處理器(ISP)
ISP 全稱Image Signal Processor,是手機中用於處理影像數據的專用芯片。它主要負責將網路攝影機捕捉到的原始數據轉化為可以在螢幕上顯示的影像。ISP的主要功能包括白平衡、自動對焦、降噪、色彩最佳化等。
vivo V3 ISP芯片
● 神經處理單元(NPU)
NPU 全稱Neural Processing Unit,是一種專門用於執行人工智慧任務的芯片。在手機中,NPU常常被用來進行影像處理,比如人像美化、物體辨識、場景辨識等。
●專用影像處理芯片
一些手機還會配備專門的影像處理芯片,比如 OPPO的馬利安納X ,它是全球第一個移動端6nm影像專用NPU,主要用於影像處理,具有強大的AI計算能力和高記憶體吞吐量 。
●其他
除了上述的專用影像處理芯片外,手機中的SoC(System on Chip)也會內建影像處理模組,比如高通驍龍、蘋果A系列、三星Exynos等,它們都具有一定的影像處理能力 。
以上就是手機中常用的專用影像處理芯片型別,它們各有優勢,共同為手機提供了快速優質的影像處理能力。
OPPO 的馬利安納芯片是什麽?
馬利安納芯片是OPPO自研的一款芯片,分為馬利安納X和馬利安納Y(用於音訊處理,這裏不做敘述)兩種型號。
●馬利安納X
馬利安納X是OPPO首款自研的NPU芯片,主要用於影像方面,是全球第一個移動端6nm影像專用NPU 。馬利安納X的AI計算單元整合了專用的片上記憶體子系統,只服務於AI計算,最高可提供每秒萬億位元的吞吐量,是目前手機最高記憶體吞吐量的十倍以上,打破了「記憶體墻」問題 。此外,馬利安納X還整合了由OPPO完全自研的MariLumi影像處理單元,支持20bit的處理位寬,並支持驚人的20bit Ultra HDR,是目前旗艦平台HDR能力的4倍。
OPPO 在其Find X7系列手機裏並沒有采用 馬利安納 自研芯片,這應該是出於成本控制和市場策略因素,另外應該還有面臨技術更新困境,眾所周知,OPPO的自研芯片之路並不順利。