Boarne: Sina Technology Synthesis
It gebrûk fan ien kamera om wazige fotografy te berikken is neat nij, de foarigeiPhone XRen earderGoogle Pixel 2hawwe hie ferlykbere besykjen.
Apple's nije iPhone SE is ek itselde, mar synkameraelemint is te âld, de wichtichste kredyt is noch yn it algoritme.
Ut it demontagerapport fan iFixit kinne wy sjogge dat guon dielen yn 'e nije iPhone SE folslein konsistint binne mei deiPhone 8, sels foar safier't se wikseljend kinne wurde brûkt - ynklusyf de 12-megapixel brede hoekekamera .
De praktyk fan 'nije wyn yn âlde flessen' is net ûngewoan foar de iPhone SE.Werom nei fjouwer jier lyn hat de earste generaasje iPhone SE ek it uterlik fan 5s en de measte hardware tapast, sadat Apple in legere priis kin jaan.
Teoretysk, by it kopiearjen fan deselde kamera hardware, dekameraskaaimerken fan de twa moatte net folle oars.Bygelyks,iPhone 8stipet gjin foto's fan lytse djipte fan fjild mei in dúdlik ûnderwerp en in wazige eftergrûn, wat wy faaks de "portretmodus" neame.
Mar as jo sjogge op Apple syn stipe side, jimme sille fine dat it portret modus dat wurdt net stipe troch deiPhone 8wurdt stipe troch de nije iPhone SE-sels as de efterste lens spesifikaasjes fan de twa binne krekt itselde.
Under normale omstannichheden moat it meitsjen fan wazige foto's op in mobile tillefoan faak dien wurde troch dûbele kamera's - krekt as minsklike eagen moat de mobile tillefoan ek twa ôfbyldings krije yn ferskate hoeken troch twa linzen op ferskate posysjes, en dan de hoeken fan view It ferskil skat de djipte fan fjild om eftergrûnwazige te berikken en it ûnderwerp dúdlik te hâlden.
De Plus-searje op 'e list, as de X, XS, en 11 yn' e ôfrûne jierren, fertrouwe yn prinsipe op multi-kamera-systemen om portretûntsjustering te foltôgjen.
Dus hoe lost de foarste single-kamera fan 'e iPhone op?De kearn leit yn de ynfraread dot matrix-projektor yn it Face ID-systeem, dy't ek genôch krekte djiptegegevens krije kin, wat lykweardich is oan in 'helplens'.
Ut dit eachpunt, de iPhone SE kin nimme portret modus foto's is hiel spesjaal: earst, it net nimme meardere shots, twadde, it hat gjin Face ID, der is yn prinsipe gjin mooglikheid fan hardware stipe.
Blykber hat Apple wat feroaringen makke dy't wy net kinne sjen op softwarenivo.
Koartlyn iepenbiere Ben Sandofsky, de ûntwikkelder fan 'e kamera-applikaasje fan tredden Halide, de technyske prinsipes, en ferklearre wêrom't de nije iPhone SE deselde spesifikaasjes foar ien lens brûkt as deiPhone 8, mar it kin berikke de portret foto modus dat de lêste kin net.
Se seine dat de nije iPhone SE wierskynlik 'de earste iPhone sil wêze dy't in portret-wazige effekt kin generearje mei mar in inkele 2D-ôfbylding'.
Jo kinne sizze dat deiPhone XRis ek net in single-camera blur.Is SE it net gewoan kopiearje?
De ûntmantelingssituaasje hat lykwols bewiisd dat dekamera'sfan iPhone SE eniPhone XRbinne net konsekwint, wat ek liedt ta ferskillen yn de technyske útfiering fan de twa.
▲Samsung Galaxy S7rige is it earste apparaat dat brûkt DPAF technology op smartphonekamera
It wichtichste punt is dat dekamerafan deiPhone XRkin dual pixel autofocus (DPAF) technology brûke, wêrtroch it bepaalde djiptegegevens kin krije basearre op hardware.
Yn ienfâldige termen is DPAF technology lykweardich oan it dielen fan de piksel op 'ekamerasensor yn twa lytsere side-by-side piksels om twa foto's mei ferskate hoeken te fangen, krekt as ús lofter- en rjochtseagen.
Hoewol't de hoek ferskil produsearre troch dit is net sa fanselssprekkend as dat fan dualkamera, it is noch altyd befoarderlik foar it algoritme om djiptegegevens te generearjen.
▲Google Pixel 2, 3Twa disparity kaarten krigen mei DPAF technology binne lestich foar it bleate each
waarnimme, mar kin noch helpe de ôfbylding segmentation algoritme te meitsjen oardielen
Earder,Googleek brûkt dizze technology opPixel 2, 3om single-shot blur te berikken.Op 'ePixel4, om't de kamera wurdt ferfongen troch in multi-kamera spesifikaasje, parallakse-deteksje is signifikant krekter as single-kamera.
▲ Litte wy ris sjen nei de gegevens krigen troch de Pixel 4 mei twa kamera's.
Wat de nije iPhone SE oangiet, om't syn sensoren te âld binne, beweart Halide dat it net kin fertrouwe op 'e sensoren om disparity-kaarten te krijen, en kin yn prinsipe allinich fertrouwe op it masine-learalgoritme levere troch de A13 Bionic-chip om djiptegegevens te simulearjen en te generearjen kaarten.
Ien sin útlis is dat de iPhone SE portret wazig sjitten wurdt folslein berikt troch software en algoritmen.
▲ Nim dizze foto direkt meiiPhone XRen nije iPhone SE
Halide brûkt deiPhone XRen de nije iPhone SE om in foto fan 'e puppy te nimmen (net in echte skot, gewoan om in foto fan 'ien foto' te nimmen), en fergelike dan de djiptegegevens fan 'e twa foto's.
Se fûnen dat deiPhone XRdie krekt in ienfâldige ôfbyldingssegmentaasje om it haadlichem út te lûken, mar erkende it ear fan 'e puppy net korrekt.
▲ Grafyk foar djiptegegevens,iPhone XRoan de linkerkant, nije iPhone SE oan de rjochterkant
Mar op 'e nije iPhone SE, mei it nije algoritme levere troch de A13-chip, hawwe wy in djiptekaart krigen dy't folslein oars is asXR.It herkent net allinich de earen en de algemiene omtrek fan 'e puppy korrekt, mar docht ek gelaagde ferwurking foar ferskate eftergrûnen.
Dit soarte fan djiptekaart is net 100% akkuraat.Halide sei dat de krektens fan 'e útsnijing en waziging fan' e nije iPhone SE by it sjitten fan wazige foto's sûnder gesicht net sa krekt is as by it nimmen fan portretten.
Benammen yn it gefal wêr't guon ûnderwerpen en eftergrûnôfbyldings heul wazig binne, sil it foardiel fan meardere kamera's op dit stuit dúdliker wêze.
▲ Yn dit soarte fan net-gesichtstema, en it ûnderwerp en eftergrûn binne net dúdlik skieden, is de wazige fan 'e nije iPhone SE
is maklik om flaters te meitsjen
Sa't jo sjen kinne út dizze foto, deiPhone 11 Proútrist mei in multi-kamera systeem kin net allinnich folslein sketse de lytse planten op it log, mar ek kin werkenne de ôfstân fan 'e eftergrûn en meitsje layered ferwurking.
▲ Grafyk foar djiptegegevens,iPhone 11 Prooan de linkerkant, nije iPhone SE oan de rjochterkant
Op de nije iPhone SE, nettsjinsteande deselde resultaten fan laach ferwurking, it ûnderwerp en eftergrûn binne folslein gearfoege.Natuerlik sil it post-wazige proses fansels folle slimmer wêze as deiPhone 11 Pro.
▲ De eigentlike wazige bewizen,iPhone 11 Prooan de linkerkant en de nije iPhone SE oan de rjochterkant
Dat is de reden, as de nije iPhone SE iOS's eigen brûktkameraapp, allinich as in minsklik gesicht wurdt ûntdutsen, kin de "Portretmodus" ynskeakele wurde om wazige foto's te nimmen.Yn oare gefallen sil in flater ferskine.
De reden is noch altyd relatearre oan Apple's algoritme.Halide neamde in technyk neamd 'Portret Effects Matte' (Portrait Effects Matte), dy't benammen brûkt wurdt om de krekte omtrek fan minsken yn portretmodusfoto's te finen, ynklusyf details lykas hierline op 'e râne, brilframe, ensfh. It ûnderwerp en eftergrûn binne segmentearre.
Mar op it stuit is dizze set segmentaasjetechnology basearre op masine learen mear taret foar "sjitten fan minsken", it kin yndie goed meitsje foar it gebrek oan parallaksgegevens op singlekameratelefoans lykasiPhone XRen iPhone SE, mar as it ûnderwerp It algoritme sil ek meitsje in oardiel flater by it feroarjen fan karakters fan oare objekten.
As foar multi-kamera telefoans lykasiPhone 11 Pro, kinne jo krije parallaks gegevens direkt fia dekamerahardware, sadat se ek de portretmodus kinne brûke yn net-gesichtssênes by it brûken fan har eigenkamera.
▲ De frontlens fan 'e nije iPhone SE stipet ek de portretmodus, en de presyzje fan it gesicht is heul heech,
en it byldferskil is allinich yn it bokeh-effekt
Fansels kinne ûntwikkelders fan tredden noch dingen brûke dy't net offisjeel stipe wurde.No kin de Halide-app stypjeiPhone XR, SE om wazige foto's te meitsjen fan lytse bisten of oare objekten.Yn feite brûkt it ek Apple's portretmaskertechnology om djiptekaarten te krijen, en foegje dan syn eigen back-end-optimalisaasje ta om te berikken.
▲ Mei apps fan tredden lykas Halide kinne jo de nije iPhone SE brûke om wazige foto's te nimmen fan ûnderwerpen sûnder gesicht
Yn 't algemien is de portretwazige berikt troch dizze nije iPhone SE de limyt dy't kin wurde berikt troch softwareoptimalisaasje foar tillefoans mei ien kamera.Strikt sjoen is dit eins te tankjen oan de A13-chip.As it net bringe de nijste masine learen algoritme, dekameraûnderfining allinnich, de SE shooting ûnderfining moat fansels in heale.
Dêrom is it noch sinfol foar smartphones om systemen mei meardere kamera's te ûntwikkeljen.Wy kinne ultra-brede hoeke brûke om it sichtfjild te ferbreedzjen, en wy kinne fertrouwe op 'e telelens om net-destruktive zoomfoto's te krijen.Augmented reality detection help, dizze wurde net allinich berikt troch in OTA-upgrade, of it slypjen fan algoritmen.
Blinne opskeppe en konkurrearjen om it tal kamera's is fansels ek ferfelend.As de hardware allinich de legere limyt fan imaging bepaalt, dan kin in set fan poerbêste algoritmen de boppegrins fan imaging signifikant ferheegje, en sels de wearde en wearde fan âlde hardware opnij útdrukke.potinsjeel.
Ik wit net oft wy noch fjouwer jier wachtsje kinne.As de folgjende generaasje fan iPhone SE komt út, sil singlekameraa noch hawwe in plak yn de mobile telefoan yndustry?
Post tiid: mei-06-2020