Kilde: Sina Technology Synthesis
Bruken av ett enkelt kamera for å oppnå uskarp fotografering er ikke noe nytt, det forrigeiPhone XRog tidligereGoogle Pixel 2har hatt lignende forsøk.
Apples nye iPhone SE er også den samme, men denskameraelementet er for gammelt, er hovedkreditten fortsatt i algoritmen.
Fra demonteringsrapporten til iFixit kan vi se at noen deler i den nye iPhone SE er helt i samsvar mediPhone 8, selv i den grad de kan brukes om hverandre - inkludert vidvinkelen på 12 megapikslerkamera .
Praksisen med "ny vin på gamle flasker" er ikke uvanlig for iPhone SE.Tilbake til fire år siden brukte den første generasjonen iPhone SE også utseendet til 5s og det meste av maskinvaren, slik at Apple kan gi en lavere pris.
Teoretisk sett, når du kopierer den samme kameramaskinvaren,kameraegenskapene til de to bør ikke være mye forskjellige.For eksempel,iPhone 8støtter ikke å ta bilder med små dybdeskarphet med et klart motiv og en uskarp bakgrunn, som er det vi ofte kaller "portrettmodus".
Men når du ser på Apples støtteside, vil du finne at portrettmodusen som ikke støttes aviPhone 8støttes av den nye iPhone SE-selv om spesifikasjonene for baklinsen til de to er nøyaktig de samme.
Under normale omstendigheter må det å ta uskarpe bilder på en mobiltelefon ofte gjøres med to kameraer – akkurat som menneskeøyne, må mobiltelefonen også ta to bilder i forskjellige vinkler gjennom to linser i forskjellige posisjoner, og deretter kombinere vinklene på view Forskjellen estimerer dybdeskarpheten for å oppnå bakgrunnsuskarphet og holde motivet klart.
Plus-serien på listen, eller X, XS og 11 de siste årene, er i utgangspunktet avhengig av multikamerasystemer for å fullføre portrett uskarphet.
Så hvordan løser iPhones enkeltkamera foran?Kjernen ligger i den infrarøde punktmatrise-projektoren i Face ID-systemet, som også kan få tilstrekkelig nøyaktige dybdedata, som tilsvarer en 'hjelpelinse'.
Fra dette synspunktet, iPhone SE kan ta portrettmodus bilder er veldig spesiell: For det første tar den ikke flere bilder, for det andre har den ikke Face ID, det er i utgangspunktet ingen mulighet for maskinvarestøtte.
Tilsynelatende har Apple gjort noen endringer som vi ikke kan se på programvarenivå.
Nylig avslørte Ben Sandofsky, utvikleren av tredjeparts kameraapplikasjonen Halide, de tekniske prinsippene, og forklarer hvorfor den nye iPhone SE bruker de samme spesifikasjonene for enkeltobjektiver somiPhone 8, men den kan oppnå portrettfotomodus som sistnevnte ikke kan.
De sa at den nye iPhone SE sannsynligvis vil være "den første iPhone som kan generere en portrett uskarphet effekt ved å bruke bare et enkelt 2D-bilde".
Du kan si atiPhone XRer heller ikke uskarphet med ett kamera.Er ikke SE bare å kopiere det?
Imidlertid har demonteringssituasjonen bevist atkameraerav iPhone SE ogiPhone XRer ikke konsistente, noe som også fører til forskjeller i den tekniske implementeringen av de to.
▲Samsung Galaxy S7serien er den første enheten som bruker DPAF-teknologi på smarttelefonkamera
Det viktigste poenget er atkameraaviPhone XRkan bruke dual pixel autofocus (DPAF) teknologi, som lar den få visse dybdedata basert på maskinvare.
Enkelt sagt tilsvarer DPAF-teknologi å dele pikselen påkamerasensor inn i to mindre side-ved-side piksler for å ta to bilder med forskjellige vinkler, akkurat som våre venstre og høyre øyne.
Selv om vinkelforskjellen som produseres av dette ikke er like åpenbar som for dualkamera, er det fortsatt gunstig for algoritmen å generere dybdedata.
▲Google Pixel 2, 3To ulikhetskart oppnådd ved hjelp av DPAF-teknologi er vanskelige for det blotte øye
oppfatter, men kan likevel hjelpe bildesegmenteringsalgoritmen til å foreta vurderinger
Tidligere,Googleogså brukt denne teknologien påPixel 2, 3for å oppnå uskarphet i enkeltbilde.PåPixel4, fordi kameraet er erstattet av en multikamera-spesifikasjon, er parallaksedeteksjon betydelig mer nøyaktig enn enkeltkamera.
▲ La oss ta en titt på dataene innhentet av Pixel 4 med to kameraer.
Når det gjelder den nye iPhone SE, fordi sensorene er for gamle, hevder Halide at den ikke kan stole på sensorene for å få forskjellskart, og i utgangspunktet bare kan stole på maskinlæringsalgoritmen levert av A13 Bionic-brikken for å simulere og generere dybdedata kart.
En setningsforklaring er at iPhone SE-portrettuskarphet er utelukkende oppnådd av programvare og algoritmer.
▲ Ta dette bildet direkte mediPhone XRog ny iPhone SE
Halide brukteiPhone XRog den nye iPhone SE for å ta et bilde av valpen (ikke et ekte skudd, bare for å ta et bilde av "ett bilde"), og deretter sammenlignet dybdedataene til de to bildene.
De fant ut atiPhone XRgjorde bare en enkel bildesegmentering for å trekke ut hoveddelen, men gjenkjente ikke valpens øre riktig.
▲ Dybdedatagraf,iPhone XRtil venstre, ny iPhone SE til høyre
Men på den nye iPhone SE, med den nye algoritmen levert av A13-brikken, fikk vi et dybdekart som er helt annerledes ennXR.Den gjenkjenner ikke bare valpens ører og generelle omriss på riktig måte, men utfører også lagdelt behandling for forskjellige bakgrunner.
Denne typen dybdekart er ikke 100 % nøyaktig.Halide sa at nøyaktigheten av utskjæringen og uskarpheten til den nye iPhone SE når du tar uskarpe bilder uten ansikter, ikke er like nøyaktig som når du tar portretter.
Spesielt i tilfellet der enkelte motiver og bakgrunnsbilder er svært uskarpe, vil fordelen med flere kameraer være mer åpenbar på dette tidspunktet.
▲ I denne typen ikke-ansiktstema, og motivet og bakgrunnen ikke er tydelig atskilt, er uskarpheten til den nye iPhone SE
er lett å gjøre feil
Som du kan se fra dette bildet, eriPhone 11 Proutstyrt med et multi-kamera system kan ikke bare fullstendig skissere de små plantene på loggen, men kan også gjenkjenne avstanden til bakgrunnen og lage lagdelt behandling.
▲ Dybdedatagraf,iPhone 11 Protil venstre, ny iPhone SE til høyre
På den nye iPhone SE, til tross for de samme resultatene av lagdelt behandling, har motivet og bakgrunnen blitt fullstendig smeltet sammen.Naturligvis vil prosessen etter uskarphet være mye verre enniPhone 11 Pro.
▲ De faktiske uskarpe bevisene,iPhone 11 Protil venstre og den nye iPhone SE til høyre
Det er derfor, når den nye iPhone SE bruker iOSs egenkameraapp, bare når et menneskelig ansikt oppdages, kan "Portrettmodus" aktiveres for å ta uskarpe bilder.I andre tilfeller vil en feil vises.
Årsaken er fortsatt knyttet til Apples algoritme.Halide nevnte en teknikk kalt 'Portrait Effects Matte' (Portrait Effects Matte), som hovedsakelig brukes til å finne de nøyaktige konturene til personer i portrettmodusbilder, inkludert detaljer som hårfeste på kanten, brilleinnfatning osv. Motivet og bakgrunnen er segmentert.
Men for tiden er dette settet med segmenteringsteknologi basert på maskinlæring mer forberedt på å "skyte mennesker", det kan faktisk veie opp for mangelen på parallaksedata på enkeltpersonerkameratelefoner som f.eksiPhone XRog iPhone SE, men hvis emnet Algoritmen vil også gjøre en vurderingsfeil ved endring av tegn fra andre objekter.
Som for multi-kamera telefoner somiPhone 11 Pro, kan du få parallaksedata direkte gjennomkameramaskinvare, slik at de også kan bruke portrettmodus i ikke-ansiktsscener når de bruker sine egnekamera.
▲ Frontlinsen på den nye iPhone SE støtter også portrettmodus, og presisjonen i ansiktet er veldig høy,
og bildeforskjellen er bare i bokeh-effekten
Selvfølgelig kan tredjepartsutviklere fortsatt bruke ting som ikke er offisielt støttet.Nå kan Halide-appen støtteiPhone XR, SE for å ta uskarpe bilder av små dyr eller andre gjenstander.Faktisk bruker den også Apples portrettmasketeknologi for å få dybdekart, og deretter legge til sin egen back-end-optimalisering for å oppnå.
▲ Ved å bruke tredjepartsapper som Halide kan du bruke den nye iPhone SE til å ta uskarpe bilder av ikke-ansiktsmotiver
Generelt sett er portrettsløringen som oppnås med denne nye iPhone SE grensen som kan oppnås ved programvareoptimalisering for telefoner med ett kamera.Strengt tatt skyldes dette faktisk A13-brikken.Hvis den ikke brakte den nyeste maskinlæringsalgoritmen,kameraerfaring alene, SE-skyteopplevelsen må selvsagt være en halv.
Derfor er det fortsatt meningsfullt for smarttelefoner å utvikle flerkamerasystemer.Vi kan bruke ultravidvinkel for å utvide synsfeltet, og vi kan stole på teleobjektivet for å få ikke-destruktive zoombilder.Hjelp til gjenkjenning av utvidet virkelighet, disse oppnås ikke bare ved en OTA-oppgradering eller sliping av algoritmer.
Det er selvfølgelig også irriterende å skryte i blinde og konkurrere om antall kameraer.Hvis maskinvaren bare bestemmer den nedre grensen for bildebehandling, kan et sett med utmerkede algoritmer heve den øvre grensen for bildebehandling betydelig, og til og med gjenuttrykke verdien og verdien av gammel maskinvare.potensiell.
Jeg vet ikke om vi kan vente fire år til.Når neste generasjon av iPhone SE kommer ut, vil singlekamerahar du fortsatt en plass i mobiltelefonbransjen?
Innleggstid: mai-06-2020