Samsung je objavio detalje o procesiranju portretnih fotografija na Galaxy S21, S21+ i S21 ultra mobitelima. Pogledajte što radi umjetna inteligencija
Zanimljiva objava za nas geekove, ali i sve ostale – što točno radi, i kako, umjetna inteligencija kod procesiranja portreta na Galaxy S21 mobitelima.
Znamo kako je to išlo do prije koju godinu: mobitel napravi fotografiju, ISP (Image Signal Processor) čip – koji je integriran u čipset – je obradi, smanji šum, brine za kontrast, balans bijele…
Onda je stigao image stacking, spajanje više fotografija različitih parametara u jednu, kvalitetniju. A sada je tu i AI, koji radi u simbiozi sa ISP čipom.
Samsung Galaxy S21 koristi Exynos 2100, vrlo dobar čipset izrađen u 5 nm, koji ima izvrstan ISP i snažan AI procesor. U praksi, AI je najbolji za portretne fotografije, kada treba razlučiti osobu od pozadine, ali na uvjerljiv način.
Prve umjetne portretne fotografije su bile vidljivo umjetne, s lošom detekcijom rubova i neuvjerljivim zamućenjem. Nije lako simulirati velike senzore i optiku DSLR-a.
AI procesiranje pomaže i u svim drugim uvjetima, na svim kamerama. Posebno je upečatljiva, i jedinstvena opcija, praćenje objekta na velikom uvećanju S21 ultra mobitela kod snimanja videa. To je do sada bilo nemoguće napraviti, nitko drugi nema tako nešto.
Prva implementacija umjetne inteligencije u fotografije na Samsung mobitelima je stigla sa Note 9 i Scene Optimiserom, a do danas je to podiguto na znatno višu razinu.
AI procesiranje na S21 kod portretnih fotografija odvija se u više koraka.
1. detekcija lica
Nakon okidanja fotografije, AI prepoznaje lica u kadru, te ih odvaja od drugih detalja.
2. restoracija (obrada)
Nakon detekcije, AI obrađuje lica. Poboljšanja uključuju otkrivanje detalja u kosi, očima i crtama lica ispitanika te podešavanje ravnoteže bijele boje kako bi se stvorili prirodniji tonovi kože u bilo kojem okruženju. Ovdje je potrebna fina mjera, lako je dobiti umjetnu fotografiju s neprirodnim izgledom.
Galaxy S21 tu ne staje. Novi Samsungovi flagship mobiteli znaju prepoznati i 3D, što koriste za poboljšanje detalja – i to usprkos toga, što nemaju zasebni 3D ToF senzor.
Kod odabira Portrait moda, možete primjeniti različite efekte, poput zamućenja pozadine, crno bijele fotografija, Backdrop, Color Point (bolje da to ne prevodim… isprobajte :-))
1. Segmentation Mapa: AI prepoznaje ljude i ljubimce u kadru, i kreira segmentacijsku mapu za njih.
2. Seed Mapa: na osnovi segmentacijskih mapa, kreira se seed mapa na koju se primjenjuju efekti. Seed mapa detaljno odvaja subjekt od pozadine
3. Tri-mapa: Procesiranje zatim dodaje tri mape n+povrh seed mape (sloja), da poboljšaju detalje lica i kose
4. Matte Mapa: Matiranje se primjenjuje na postojeće slojeve, da se dodatno istaknu detalji kose i poboljšaju izgled lica
5.Depth Estimation: AI istovremeno obrađuje dubinske informacije potrebne za aplikaciju vjernog zamućenja, ovisno o udaljenosti od kamere
Sve navedene radnje S21 obavi u djelić sekunde. Rezultat su ponajbolje portretne fotografije na tržištu, bolje i od mobitela sa zasebnim dubinskim senzorima (3D ToF). Lijepo!
