galaxy s21 ultra 5g highlights colors end

Pogledajte kako AI poboljšava portrete na S21

Samsung je objavio detalje o procesiranju portretnih fotografija na Galaxy S21, S21+ i S21 ultra mobitelima. Pogledajte što radi umjetna inteligencija

Zanimljiva objava za nas geekove, ali i sve ostale – što točno radi, i kako, umjetna inteligencija kod procesiranja portreta na Galaxy S21 mobitelima.

Znamo kako je to išlo do prije koju godinu: mobitel napravi fotografiju, ISP (Image Signal Processor) čip – koji je integriran u čipset – je obradi, smanji šum, brine za kontrast, balans bijele…

svg%3E

Onda je stigao image stacking, spajanje više fotografija različitih parametara u jednu, kvalitetniju. A sada je tu i AI, koji radi u simbiozi sa ISP čipom.

Samsung Galaxy S21 koristi Exynos 2100, vrlo dobar čipset izrađen u 5 nm, koji ima izvrstan ISP i snažan AI procesor. U praksi, AI je najbolji za portretne fotografije, kada treba razlučiti osobu od pozadine, ali na uvjerljiv način.

Prve umjetne portretne fotografije su bile vidljivo umjetne, s lošom detekcijom rubova i neuvjerljivim zamućenjem. Nije lako simulirati velike senzore i optiku DSLR-a.

svg%3E

AI procesiranje pomaže i u svim drugim uvjetima, na svim kamerama. Posebno je upečatljiva, i jedinstvena opcija, praćenje objekta na velikom uvećanju S21 ultra mobitela kod snimanja videa. To je do sada bilo nemoguće napraviti, nitko drugi nema tako nešto.

Prva implementacija umjetne inteligencije u fotografije na Samsung mobitelima je stigla sa Note 9 i Scene Optimiserom, a do danas je to podiguto na znatno višu razinu.

AI procesiranje na S21 kod portretnih fotografija odvija se u više koraka.

svg%3E 1. detekcija lica

Nakon okidanja fotografije, AI prepoznaje lica u kadru, te ih odvaja od drugih detalja.

2. restoracija (obrada)

Nakon detekcije, AI obrađuje lica. Poboljšanja uključuju otkrivanje detalja u kosi, očima i crtama lica ispitanika te podešavanje ravnoteže bijele boje kako bi se stvorili prirodniji tonovi kože u bilo kojem okruženju. Ovdje je potrebna fina mjera, lako je dobiti umjetnu fotografiju s neprirodnim izgledom.

Galaxy S21 tu ne staje. Novi Samsungovi flagship mobiteli znaju prepoznati i 3D, što koriste za poboljšanje detalja – i to usprkos toga, što nemaju zasebni 3D ToF senzor.

svg%3E

Kod odabira Portrait moda, možete primjeniti različite efekte, poput zamućenja pozadine, crno bijele fotografija, Backdrop, Color Point (bolje da to ne prevodim… isprobajte :-))

To radi na sljedeći način:

svg%3E

1. Segmentation Mapa: AI prepoznaje ljude i ljubimce u kadru, i kreira segmentacijsku mapu za njih.

2. Seed Mapa: na osnovi segmentacijskih mapa, kreira se seed mapa na koju se primjenjuju efekti. Seed mapa detaljno odvaja subjekt od pozadine

3. Tri-mapa: Procesiranje zatim dodaje tri mape n+povrh seed mape (sloja), da poboljšaju detalje lica i kose

4. Matte Mapa: Matiranje se primjenjuje na postojeće slojeve, da se dodatno istaknu detalji kose i poboljšaju izgled lica

5.Depth Estimation: AI istovremeno obrađuje dubinske informacije potrebne za aplikaciju vjernog zamućenja, ovisno o udaljenosti od kamere

Sve navedene radnje S21 obavi u djelić sekunde. Rezultat su ponajbolje portretne fotografije na tržištu, bolje i od mobitela sa zasebnim dubinskim senzorima (3D ToF). Lijepo!