Vir: Sina Technology Synthesis
Uporaba ene same kamere za doseganje zamegljene fotografije ni nič novega, prejšnjaiPhone XRin prejGoogle Pixel 2so imeli podobne poskuse.
Appleov novi iPhone SE je prav tako enak, vendar jekameroelement je prestar, glavna zasluga je še vedno v algoritmu.
Iz poročila o razstavljanju družbe iFixit lahko vidimo, da so nekateri deli v novem iPhone SE popolnoma skladni ziPhone 8, tudi do te mere, da jih je mogoče uporabljati zamenljivo – vključno s širokokotno ločljivostjo 12 milijonov slikovnih pikkamero .
Praksa 'novega vina v starih steklenicah' ni nenavadna za iPhone SE.Pred štirimi leti je prva generacija iPhone SE uporabila tudi videz 5s in večino strojne opreme, tako da lahko Apple ponudi nižjo ceno.
Teoretično pri kopiranju iste strojne opreme fotoaparatakameroznačilnosti obeh se ne bi smele bistveno razlikovati.na primeriPhone 8ne podpira fotografiranja majhne globinske ostrine z jasnim motivom in zamegljenim ozadjem, čemur pogosto pravimo »portretni način«.
Ko pa pogledate Applovo stran za podporo, boste ugotovili, da je portretni način, ki ga ne podpiraiPhone 8podpira novi iPhone SE, tudi če so specifikacije zadnje leče obeh popolnoma enake.
V normalnih okoliščinah je za snemanje zamegljenih fotografij na mobilnem telefonu pogosto potrebna dvojna kamera – tako kot človeške oči mora tudi mobilni telefon z dvema objektivoma na različnih položajih pridobiti dve sliki pod različnimi koti in nato združiti kote pogled Razlika ocenjuje globinsko ostrino, da se doseže zamegljenost ozadja in ostane motiv jasen.
Serija Plus na seznamu ali X, XS in 11 v zadnjih letih se v bistvu zanašajo na sisteme z več kamerami za dokončanje fotografiranja zamegljenosti portreta.
Kako torej rešuje ena sprednja kamera iPhone-a?Jedro leži v infrardečem matričnem projektorju v sistemu Face ID, ki lahko pridobi tudi dovolj natančne podatke o globini, kar je enakovredno 'pomožni leči'.
S tega vidika je iPhone SE lahko fotografira v portretnem načinu zelo poseben: prvič, ne posname več posnetkov, drugič, nima Face ID-ja, v bistvu ni možnosti strojne podpore.
Očitno je Apple naredil nekaj sprememb, ki jih na ravni programske opreme ne vidimo.
Pred kratkim je Ben Sandofsky, razvijalec aplikacije za kamero drugega proizvajalca Halide, razkril tehnična načela in pojasnil, zakaj novi iPhone SE uporablja enake specifikacije z eno lečo kotiPhone 8, vendar lahko doseže način portretne fotografije , ki ga slednji ne more .
Povedali so, da bo novi iPhone SE verjetno "prvi iPhone, ki lahko ustvari učinek zamegljenosti portreta z uporabo samo ene 2D slike".
Lahko bi rekli, da jeiPhone XRtudi ni zamegljenost ene kamere.Ali ga SE ne samo kopira?
Vendar pa je situacija razstavljanja dokazala, dakamereiPhone SE iniPhone XRniso dosledni, kar vodi tudi do razlik v tehnični izvedbi obeh.
▲Samsung Galaxy S7serija je prva naprava, ki uporablja tehnologijo DPAF na pametnem telefonukamero
Najpomembnejša točka je, dakameroodiPhone XRlahko uporablja tehnologijo samodejnega ostrenja z dvojnimi slikovnimi pikami (DPAF), ki omogoča pridobivanje določenih podatkov o globini na podlagi strojne opreme.
Preprosto povedano, tehnologija DPAF je enakovredna delitvi slikovne pike nakamerosenzor v dve manjši pikli, ki sta vzporedna, da zajamete dve fotografiji z različnimi koti, tako kot naše levo in desno oko.
Čeprav kotna razlika, ki jo to povzroči, ni tako očitna kot pri dvojnemkamero, je še vedno ugoden za algoritem za generiranje podatkov o globini.
▲Google Pixel 2, 3Dve karti nesorazmerja, pridobljeni s tehnologijo DPAF, je težko videti s prostim očesom
zaznati, vendar lahko še vedno pomaga algoritmu za segmentacijo slik pri presoji
prejGoogleuporabljali tudi to tehnologijo naPixel 2, 3za doseganje zamegljenosti z enim posnetkom.NaPixel4, ker je kamera nadomeščena s specifikacijo za več kamer, je zaznavanje paralakse bistveno natančnejše od ene kamere.
▲ Oglejmo si podatke, ki jih je Pixel 4 pridobil z dvema kamerama.
Kar zadeva novi iPhone SE, ker so njegovi senzorji prestari, Halide trdi, da se ne more zanašati na senzorje pri pridobivanju zemljevidov neskladij in se v bistvu lahko zanese le na algoritem strojnega učenja, ki ga zagotavlja čip A13 Bionic za simulacijo in ustvarjanje podatkov o globini. zemljevidi.
Ena razlaga stavka je, da je slikanje zamegljenosti portreta iPhone SE v celoti doseženo s programsko opremo in algoritmi.
▲ Posnemite to fotografijo neposredno ziPhone XRin novi iPhone SE
Halid je uporabiliPhone XRin novi iPhone SE za fotografiranje kužka (ne pravi posnetek, samo za slikanje 'ene fotografije'), nato pa primerja podatke o globini obeh slik.
Ugotovili so, da jeiPhone XRnaredil preprosto segmentacijo slike, da bi izvlekel glavno telo, vendar ni pravilno prepoznal mladičevega ušesa.
▲ graf podatkov o globini,iPhone XRna levi, nov iPhone SE na desni
Toda na novem iPhone SE smo z novim algoritmom, ki ga zagotavlja čip A13, dobili zemljevid globine, ki je popolnoma drugačen odXR.Ne samo, da pravilno prepozna mladičkova ušesa in celoten obris, temveč tudi izvede večplastno obdelavo za različna ozadja.
Ta vrsta zemljevida globine ni 100% natančna.Halide je dejal, da natančnost izreza in zamegljenosti novega iPhone SE pri fotografiranju zamegljenih fotografij brez obraza ni tako natančna kot pri fotografiranju portretov.
Še posebej v primeru, ko so nekateri motivi in slike ozadja zelo zamegljeni, bo prednost več kamer v tem trenutku bolj očitna.
▲ Pri tovrstni temi brez obraza in motiv in ozadje nista jasno ločena, je zamegljenost novega iPhone SE
je enostavno narediti napake
Kot lahko vidite iz te slike,iPhone 11 Proopremljen s sistemom z več kamerami, lahko ne le v celoti oriše majhne rastline na hlodi, ampak lahko prepozna tudi razdaljo ozadja in naredi večplastno obdelavo.
▲ graf podatkov o globini,iPhone 11 Prona levi, nov iPhone SE na desni
Na novem iPhone SE sta kljub enakim rezultatom večplastne obdelave tema in ozadje popolnoma zlita.Seveda bo proces po zameglitvi seveda veliko slabši odiPhone 11 Pro.
▲ Dejanski zamegljeni dokazi,iPhone 11 Prona levi in novi iPhone SE na desni
Zato, ko novi iPhone SE uporablja lastno iOSkameroaplikacijo, samo, ko je zaznan človeški obraz, je mogoče "Portretni način" omogočiti, da posnamete zamegljene fotografije.V drugih primerih se prikaže napaka.
Razlog je še vedno povezan z Applovim algoritmom.Halide je omenil tehniko, imenovano 'Portrait Effects Matte' (Portrait Effects Matte), ki se v glavnem uporablja za iskanje natančnih obrisov ljudi na fotografijah v portretnem načinu, vključno s podrobnostmi, kot so lasna linija na robu, okvir očal itd. Motiv in ozadje so segmentirani.
Toda trenutno je ta nabor tehnologije segmentacije, ki temelji na strojnem učenju, bolj pripravljen za "streljanje ljudi", res lahko nadoknadi pomanjkanje paralaksnih podatkov na posameznihkamerotelefoni kot npriPhone XRin iPhone SE, če pa predmet. Algoritem bo naredil tudi napako pri presoji pri spreminjanju znakov iz drugih objektov.
Kar se tiče telefonov z več kamerami, npriPhone 11 Pro, lahko dobite podatke o paralaksi neposredno prekkamerostrojno opremo, tako da lahko uporabljajo portretni način tudi v prizorih brez obraza, ko uporabljajo lastnekamero.
▲ Sprednja leča novega iPhone SE podpira tudi portretni način, natančnost obraza pa je zelo visoka,
in slikovna razlika je le v učinku bokeh
Seveda lahko razvijalci tretjih oseb še vedno uporabljajo stvari, ki niso uradno podprte.Zdaj lahko podpira aplikacija HalideiPhone XR, SE, da posnamete zamegljene slike majhnih živali ali drugih predmetov.Pravzaprav uporablja tudi Applovo portretno masko tehnologijo za pridobivanje zemljevidov globine in nato doda svojo lastno optimizacijo zaledja, ki jo doseže.
▲ Z uporabo aplikacij drugih proizvajalcev, kot je Halide, lahko uporabite novi iPhone SE za zamegljene fotografije subjektov brez obraza
Na splošno je zamegljenost portreta, ki jo doseže ta novi iPhone SE, meja, ki jo je mogoče doseči z optimizacijo programske opreme za telefone z eno kamero.Strogo gledano, je to dejansko posledica čipa A13.Če ni prinesel najnovejšega algoritma strojnega učenja,kamerosamo izkušnja, SE strelska izkušnja očitno mora biti pol.
Zato je za pametne telefone še vedno smiselno razviti sisteme z več kamerami.Za razširitev vidnega polja lahko uporabimo ultra široki kot, pri pridobivanju fotografij z nedestruktivnim zoomom pa se lahko zanesemo na teleobjektiv.Pomaga pri zaznavanju razširjene resničnosti, tega ne dosežemo le z nadgradnjo OTA ali brušenjem algoritmov.
Seveda je moteče tudi slepo bahanje in tekmovanje za število kamer.Če strojna oprema določa le spodnjo mejo slikanja, potem lahko nabor odličnih algoritmov znatno dvigne zgornjo mejo slikanja in celo ponovno izrazi vrednost in vrednost stare strojne opreme.potencial.
Ne vem, če lahko počakamo še štiri leta.Ko bo izšla naslednja generacija iPhone SE, bo samskikameroali imate še vedno mesto v industriji mobilnih telefonov?
Čas objave: 6. maj 2020