ISP: procesor, który z sygnału aparatu robi zdjęcie

Procesor obrazu (ISP, Image Signal Processor) to osobny blok w układzie SoC, który zamienia surowe dane z matrycy aparatu w gotowe zdjęcie lub wideo: usuwa szum, dobiera kolory, balans bieli, ekspozycję i ostrość.

ISP „wywołuje” surowy sygnał aparatu w ładne zdjęcie

Prostymi słowami

Matryca aparatu jest jak fotograf, który przynosi ci stos niewywołanych filmów. Sam film jest matowy i zaszumiony. ISP to jak laborant w ciemni, który w milisekundy wywołuje, poprawia kolory, usuwa ziarno i drukuje ładne zdjęcie. Dobry laborant wyciągnie przyzwoity kadr nawet z przeciętnego filmu.

Jak to działa

Matryca rejestruje światło, ale każdy piksel widzi tylko jeden kolor.
ISP odtwarza pełne kolory dla każdego piksela (demozaikowanie).
Usuwa szum, koryguje ekspozycję i balans bieli.
Dodaje ostrość, poprawia zniekształcenia obiektywu i przetwarza HDR.
Razem z NPU odpowiada za tryb nocny, rozmycie portretowe i stabilizację wideo.

Co robi obróbka obrazu

Gdzie to zobaczysz

ISP jest w każdym smartfonie, tablecie i aparacie. Producenci chwalą się nim w opisach chipów (Spectra u Qualcomm, Imagiq u MediaTek). Niektóre marki dodają własne osobne chipy do przetwarzania obrazu.

Czy to ważne przy wyborze

Tak, i to wyjaśnia, dlaczego telefon z 50 Mpix czasem robi gorsze zdjęcia niż ten z 12 Mpix: obróbka waży tyle co matryca. Radzę patrzeć na prawdziwe zdjęcia i filmy z telefonu, a nie tylko na megapiksele. Dobry ISP szczególnie widać w wideo 4K i zdjęciach nocnych.

Mity

Mit: Jakość zdjęć zależy tylko od megapikseli. W rzeczywistości: Matryca, obiektyw i obróbka (ISP i AI) ważą tyle samo.
Mit: ISP i NPU to to samo. W rzeczywistości: ISP przetwarza sygnał aparatu, NPU uruchamia sieci neuronowe. Pracują razem.

Częste pytania

Czy można wyłączyć obróbkę ISP?

Częściowo - zdjęcia w RAW dają mniej przetworzone dane.

Dlaczego telefony z tą samą matrycą robią różne zdjęcia?

Przez różne ISP, algorytmy i ustawienia producenta.

Czy ISP wpływa na wideo?

Tak, przetwarza każdą klatkę - od redukcji szumów po stabilizację.

Powiązane pojęcia

Fotografia obliczeniowa, Rozmiar matrycy aparatu, Procesor neuronowy (NPU), RAW i ProRAW