Bron: Sina Tegnologie Sintese
Die gebruik van 'n enkele kamera om vaag fotografie te verkry is niks nuuts nie, die vorigeiPhone XRen vroeërGoogle Pixel 2soortgelyke pogings gehad het.
Apple se nuwe iPhone SE is ook dieselfde, maar sykameraelement is te oud, die belangrikste krediet is steeds in die algoritme.
Uit die demontageverslag van iFixit kan ons sien dat sommige dele in die nuwe iPhone SE heeltemal ooreenstem met dieiPhone 8, selfs in die mate dat hulle uitruilbaar gebruik kan word - insluitend die 12-megapixel wye hoekkamera .
Die gebruik van 'nuwe wyn in ou bottels' is nie ongewoon vir die iPhone SE nie.Terug na vier jaar gelede het die eerste generasie iPhone SE ook die voorkoms van 5s en meeste van die hardeware toegepas, sodat Apple 'n laer prys kan gee.
Teoreties, wanneer dieselfde kamera hardeware kopieer, diekameraeienskappe van die twee moet nie veel verskil nie.Byvoorbeeld,iPhone 8ondersteun nie die neem van klein diepte van veldfoto's met 'n duidelike onderwerp en 'n vaag agtergrond nie, wat ons dikwels die "portretmodus" noem.
Maar as jy na Apple se ondersteuningsbladsy kyk, sal jy vind dat die portretmodus wat nie deur dieiPhone 8word deur die nuwe iPhone SE ondersteun - selfs al is die spesifikasies van die agterste lens presies dieselfde.
Onder normale omstandighede moet die neem van wasige foto's op 'n selfoon dikwels deur dubbele kameras gedoen word - net soos menslike oë, moet die selfoon ook twee beelde teen verskillende hoeke deur twee lense op verskillende posisies verkry, en dan die hoeke van aansig Die verskil skat die diepte van veld om agtergrondvervaag te verkry en die onderwerp duidelik te hou.
Die Plus-reeks op die lys, of die X, XS en 11 in onlangse jare, maak basies staat op multi-kamera-stelsels om portretvervaag-opname te voltooi.
So, hoe los die iPhone se voorste enkelkamera op?Die kern lê in die infrarooi puntmatriksprojektor in die Face ID-stelsel, wat ook voldoende akkurate dieptedata kan verkry, wat gelykstaande is aan 'n 'hulplens'.
Vanuit hierdie oogpunt kan die iPhone SE portretmodusfoto's neem, is baie spesiaal: eerstens neem dit nie veelvuldige foto's nie, tweedens het dit nie Face ID nie, daar is basies geen moontlikheid van hardeware-ondersteuning nie.
Blykbaar het Apple 'n paar veranderinge aangebring wat ons nie op sagtewarevlak kan sien nie.
Onlangs het Ben Sandofsky, die ontwikkelaar van die derdeparty-kameratoepassing Halide, die tegniese beginsels onthul en verduidelik hoekom die nuwe iPhone SE dieselfde enkellens-spesifikasies gebruik as dieiPhone 8, maar dit kan die portretfoto-modus bereik wat laasgenoemde nie kan nie.
Hulle het gesê dat die nuwe iPhone SE waarskynlik 'die eerste iPhone sal wees wat 'n portretvervaag-effek kan genereer deur slegs 'n enkele 2D-beeld te gebruik'.
Jy kan sê dat dieiPhone XRis ook nie 'n enkelkamera-vervaging nie.Kopieer SE dit nie net nie?
Die aftakelingsituasie het egter bewys dat diekamerasvan iPhone SE eniPhone XRis nie konsekwent nie, wat ook lei tot verskille in die tegniese implementering van die twee.
▲Samsung Galaxy S7reeks is die eerste toestel wat DPAF-tegnologie op slimfoon gebruikkamera
Die belangrikste punt is dat diekameravan dieiPhone XRkan dual pixel autofocus (DPAF) tegnologie gebruik, wat dit toelaat om sekere diepte data te verkry gebaseer op hardeware.
In eenvoudige terme, DPAF tegnologie is gelykstaande aan die verdeling van die pixel op diekamerasensor in twee kleiner side-by-side pixels om twee foto's met verskillende hoeke vas te vang, net soos ons linker- en regter-oë.
Alhoewel die hoekverskil wat hierdeur geproduseer word nie so voor die hand liggend is soos dié van dubbel niekamera, is dit steeds bevorderlik vir die algoritme om dieptedata te genereer.
▲Google Pixel 2, 3Twee ongelykheidskaarte wat met DPAF-tegnologie verkry is, is moeilik vir die blote oog
waarneem, maar kan steeds die beeldsegmenteringsalgoritme help om uitsprake te maak
Voorheen,Googlehet ook hierdie tegnologie op gebruikPixel 2, 3om enkelskoot-vervaging te verkry.Op diePixel4, omdat die kamera deur 'n multi-kamera-spesifikasie vervang word, is parallaksopsporing aansienlik meer akkuraat as enkelkamera.
▲ Kom ons kyk na die data wat deur die Pixel 4 met twee kameras verkry is.
Wat die nuwe iPhone SE betref, omdat sy sensors te oud is, beweer Halide dat dit nie op die sensors kan staatmaak om ongelykheidskaarte te verkry nie, en basies net kan staatmaak op die masjienleeralgoritme wat deur die A13 Bionic-skyfie verskaf word om dieptedata te simuleer en te genereer kaarte.
Een sin verduideliking is dat die iPhone SE-portretvervaag-opname geheel en al deur sagteware en algoritmes bereik word.
▲ Neem hierdie foto direk metiPhone XRen nuwe iPhone SE
Halide gebruik dieiPhone XRen die nuwe iPhone SE om 'n foto van die hondjie te neem (nie 'n regte skoot nie, net om 'n foto van 'een foto' te neem), en dan die dieptedata van die twee foto's vergelyk.
Hulle het gevind dat dieiPhone XRhet net 'n eenvoudige beeldsegmentering gedoen om die hoofliggaam uit te trek, maar het nie die hondjie se oor korrek herken nie.
▲ Diepte data grafiek,iPhone XRaan die linkerkant, nuwe iPhone SE aan die regterkant
Maar op die nuwe iPhone SE, met die nuwe algoritme wat deur die A13-skyfie verskaf word, het ons 'n dieptekaart gekry wat heeltemal anders is asXR.Dit herken nie net die hondjie se ore en algehele buitelyn korrek nie, maar doen ook gelaagde verwerking vir verskillende agtergronde.
Hierdie soort dieptekaart is nie 100% akkuraat nie.Halide het gesê dat die akkuraatheid van die uitsny en vervaag van die nuwe iPhone SE by die neem van nie-gesiggesigte vaag foto's nie so akkuraat is as wanneer portrette geneem word nie.
Veral in die geval waar sommige onderwerpe en agtergrondbeelde baie vaag is, sal die voordeel van veelvuldige kameras op hierdie tydstip duideliker wees.
▲ In hierdie soort nie-gesig-tema, en die onderwerp en agtergrond is nie duidelik geskei nie, is die vaagheid van die nuwe iPhone SE
is maklik om foute te maak
Soos u uit hierdie prent kan sien, is dieiPhone 11 Protoegerus met 'n multi-kamera stelsel kan nie net heeltemal uiteensetting van die klein plante op die log, maar kan ook herken die afstand van die agtergrond en maak gelaagde verwerking.
▲ Diepte data grafiek,iPhone 11 Proaan die linkerkant, nuwe iPhone SE aan die regterkant
Op die nuwe iPhone SE, ten spyte van dieselfde resultate van gelaagde verwerking, is die onderwerp en agtergrond heeltemal saamgesmelt.Natuurlik sal die proses na-vervaag natuurlik baie erger wees as dieiPhone 11 Pro.
▲ Die werklike vaag bewyse,iPhone 11 Proaan die linkerkant en die nuwe iPhone SE aan die regterkant
Dit is hoekom, wanneer die nuwe iPhone SE iOS se eie gebruikkameraapp, slegs wanneer 'n menslike gesig bespeur word, kan die "Portretmodus" geaktiveer word om vaag foto's te neem.In ander gevalle sal 'n fout verskyn.
Die rede is steeds verwant aan Apple se algoritme.Halide het 'n tegniek genoem 'Portrait Effects Matte' (Portrait Effects Matte), wat hoofsaaklik gebruik word om die presiese buitelyn van mense in portretmodusfoto's te vind, insluitend besonderhede soos haarlyn op die rand, brilraam, ens. Die onderwerp en agtergrond is gesegmenteer.
Maar tans is hierdie stel segmenteringstegnologie gebaseer op masjienleer meer voorbereid om "mense te skiet", dit kan inderdaad opmaak vir die gebrek aan parallaksdata op enkelekamerafone soosiPhone XRen iPhone SE, maar as die onderwerp Die algoritme sal ook 'n oordeelsfout maak wanneer karakters van ander voorwerpe verander word.
Soos vir multi-kamera fone soosiPhone 11 Pro, Jy kan parallaksdata direk deur diekamerahardeware, sodat hulle ook die portretmodus in nie-gesigstonele kan gebruik wanneer hulle hul eie gebruikkamera.
▲ Die voorste lens van die nuwe iPhone SE ondersteun ook die portretmodus, en die presisie van die gesig is baie hoog,
en die beeldverskil is slegs in die bokeh-effek
Natuurlik kan derdeparty-ontwikkelaars steeds dinge gebruik wat nie amptelik ondersteun word nie.Nou kan die Halide-toepassing ondersteuniPhone XR, SE om vaag foto's van klein diere of ander voorwerpe te neem.Trouens, dit gebruik ook Apple se portretmaskertegnologie om dieptekaarte te verkry, en voeg dan sy eie agterkant-optimalisering by om dit te bereik.
▲ Deur derdeparty-toepassings soos Halide te gebruik, kan jy die nuwe iPhone SE gebruik om vaag foto's van nie-gesigsonderwerpe te neem
Oor die algemeen is die vervaagde portret wat deur hierdie nuwe iPhone SE behaal word, die limiet wat bereik kan word deur sagteware-optimalisering vir enkelkamera-fone.Streng gesproke is dit eintlik te wyte aan die A13-skyfie.As dit nie die nuutste masjienleeralgoritme gebring het nie, diekameraervaring alleen, moet die SE-skietervaring natuurlik 'n half wees.
Daarom is dit steeds sinvol vir slimfone om multikamerastelsels te ontwikkel.Ons kan ultrawye hoek gebruik om die gesigsveld te verbreed, en ons kan staatmaak op die telefotolens om nie-vernietigende zoomfoto's te verkry.Hulp vir die opsporing van volgemaakte werklikheid, dit word nie net bereik deur 'n OTA-opgradering of die slyp van algoritmes nie.
Om blindelings te spog en om die aantal kameras mee te ding is natuurlik ook irriterend.As die hardeware slegs die onderste limiet van beelding bepaal, dan kan 'n stel uitstekende algoritmes die boonste limiet van beelding aansienlik verhoog, en selfs die waarde en waarde van ou hardeware weer uitdruk.potensiaal.
Ek weet nie of ons nog vier jaar kan wag nie.Wanneer die volgende generasie van iPhone SE uitkom, sal enkelkamerahet jy nog 'n plek in die selfoonbedryf?
Postyd: Mei-06-2020