Fonto: Sina Technology Synthesis
La uzo de ununura fotilo por atingi neklaran foton estas nenio nova, la antaŭaiPhone XRkaj pli frueGoogle Pixel 2havis similajn provojn.
La nova iPhone SE de Apple ankaŭ estas la sama, sed ĝiafotiloelemento estas tro malnova, la ĉefa kredito estas ankoraŭ en la algoritmo.
El la raporto pri malmuntado de iFixit, ni povas vidi, ke iuj partoj en la nova iPhone SE estas tute kongruaj kun laiPhone 8, eĉ ĝis la mezuro ke ili povas esti uzataj interŝanĝeble - inkluzive de la 12-megapiksela larĝangulofotilo .
La praktiko de "nova vino en malnovaj boteloj" ne estas nekutima por la iPhone SE.Reen antaŭ kvar jaroj, la unua generacio de iPhone SE ankaŭ aplikis la aspekton de 5s kaj plejparto de la aparataro, do Apple povas doni pli malaltan prezon.
Teorie, kiam oni kopias la saman fotilan aparataron, lafotilokarakterizaĵoj de la du ne devus esti multe malsamaj.Ekzemple,iPhone 8ne subtenas preni malgrandajn kampajn fotojn kun klara temo kaj neklara fono, kio estas tio, kion ni ofte nomas la "portreĝimo".
Sed kiam vi rigardas la subtenan paĝon de Apple, vi trovos, ke la portretreĝimo ne estas subtenata de laiPhone 8estas subtenata de la nova iPhone SE-eĉ se la malantaŭaj lensospecifoj de la du estas ĝuste la samaj.
En normalaj cirkonstancoj, preni neklarajn fotojn per poŝtelefono ofte devas esti farita per duoblaj fotiloj - same kiel homaj okuloj, la poŝtelefono ankaŭ bezonas akiri du bildojn laŭ malsamaj anguloj per du lensoj en malsamaj pozicioj, kaj poste kombini la angulojn de vido La diferenco taksas la kampan profundon por atingi fonan malklariĝon kaj teni la temon klara.
La Plus-serio en la listo, aŭ la X, XS kaj 11 en la lastaj jaroj, esence dependas de multfotilaj sistemoj por kompletigi portretan malklarkonturan pafadon.
Do kiel solvas la antaŭa ununura fotilo de la iPhone?La kerno kuŝas en la infraruĝa punktomatrica projekciilo en la Face ID-sistemo, kiu ankaŭ povas akiri sufiĉe precizajn profunddatenojn, kio estas ekvivalenta al "helplenso".
De ĉi tiu vidpunkto, la iPhone SE povas preni portretreĝimo fotojn estas tre speciala: unue, ĝi ne prenas plurajn pafojn, due, ĝi ne havas Face ID, ekzistas esence neniu ebleco de aparataro subteno.
Ŝajne, Apple faris iujn ŝanĝojn, kiujn ni ne povas vidi ĉe la programaro.
Lastatempe, Ben Sandofsky, la programisto de la triaparta fotila aplikaĵo Halide, malkaŝis la teknikajn principojn, klarigante kial la nova iPhone SE uzas la samajn unu-lensajn specifojn kiel laiPhone 8, sed ĝi povas atingi la portretan fotoreĝimon, kiun ĉi-lasta ne povas.
Ili diris, ke la nova iPhone SE verŝajne estos "la unua iPhone kiu povas generi portretan malklaran efikon uzante nur ununuran 2D-bildon".
Vi povus diri ke laiPhone XRankaŭ ne estas unu-fotila malklaraĵo.Ĉu SE ne nur kopias ĝin?
Tamen, la malmunta situacio pruvis, ke lafotilojde iPhone SE kajiPhone XRne estas konsekvencaj, kio ankaŭ kondukas al diferencoj en la teknika efektivigo de la du.
▲Samsung Galaxy S7serio estas la unua aparato kiu uzas DPAF-teknologion sur inteligenta telefonofotilo
La plej grava punkto estas, ke lafotilode laiPhone XRpovas uzi teknologion de duobla piksela aŭtofokuso (DPAF), kiu permesas al ĝi akiri certajn profunddatenojn bazitajn sur aparataro.
En simplaj esprimoj, DPAF-teknologio estas ekvivalenta al dividado de la pikselo sur lafotilosensilo en du pli malgrandajn flank-al-flankajn pikselojn por kapti du fotojn kun malsamaj anguloj, same kiel niaj maldekstraj kaj dekstraj okuloj.
Kvankam la anguldiferenco produktita de ĉi tio ne estas tiel evidenta kiel tiu de dualafotilo, ĝi daŭre estas favora al la algoritmo por generi profundajn datumojn.
▲Google Pixel 2, 3Du malegalecmapoj akiritaj per DPAF-teknologio estas malfacilaj por la nuda okulo
percepti, sed ankoraŭ povas helpi al la bildsegmenta algoritmo fari juĝojn
Antaŭe,Gugloankaŭ uzis ĉi tiun teknologionPikseloj 2, 3por atingi unu-pafon malklariĝon.Sur laPikselo4, ĉar la fotilo estas anstataŭigita per mult-fotila specifo, paralakso-detekto estas signife pli preciza ol unu-fotilo.
▲ Ni rigardu la datumojn akiritajn de la Pixel 4 per du fotiloj.
Koncerne al la nova iPhone SE, ĉar ĝiaj sensiloj estas tro malnovaj, Halide asertas, ke ĝi ne povas fidi la sensilojn por akiri malegalajn mapojn, kaj esence nur povas fidi la maŝinlernad-algoritmon provizitan de la blato A13 Bionic por simuli kaj generi profundajn datumojn. mapoj.
Unu frazo klarigo estas ke la iPhone SE portreta malklara pafado estas tute atingita per programaro kaj algoritmoj.
▲ Prenu ĉi tiun foton rekte kuniPhone XRkaj nova iPhone SE
Halide uzis laiPhone XRkaj la nova iPhone SE por preni foton de la hundido (ne vera pafo, nur por preni bildon de 'unu foto'), kaj tiam komparis la profunddatenojn de la du bildoj.
Ili trovis ke laiPhone XRnur faris simplan bildsegmentadon por eltiri la ĉefan korpon, sed ne ĝuste rekonis la orelon de la hundido.
▲ Profunda datuma grafiko,iPhone XRmaldekstre, nova iPhone SE dekstre
Sed sur la nova iPhone SE, kun la nova algoritmo provizita de la blato A13, ni ricevis profundmapon kiu estas tute malsama deXR.Ĝi ne nur ĝuste rekonas la orelojn kaj ĝeneralan konturon de la hundido, sed ankaŭ faras tavoligitan prilaboradon por malsamaj fonoj.
Tia profundmapo ne estas 100% preciza.Halide diris, ke la precizeco de la eltondado kaj malklariĝo de la nova iPhone SE kiam oni pafas nevizaĝajn neklarajn fotojn, ne estas tiel precizaj kiel kiam oni prenas portretojn.
Precipe en la kazo kie iuj temoj kaj fonbildoj estas tre malklaraj, la avantaĝo de pluraj fotiloj estos pli evidenta ĉi-momente.
▲ En ĉi tiu speco de senvizaĝa temo, kaj la temo kaj fono ne estas klare apartigitaj, la malklariĝo de la nova iPhone SE
estas facile erari
Kiel vi povas vidi el ĉi tiu bildo, laiPhone 11 Proekipita per mult-fotila sistemo povas ne nur tute skizi la malgrandajn plantojn sur la ŝtipo, sed ankaŭ povas rekoni la distancon de la fono kaj fari tavoligitan prilaboradon.
▲ Profunda datuma grafiko,iPhone 11 Promaldekstre, nova iPhone SE dekstre
Sur la nova iPhone SE, malgraŭ la samaj rezultoj de tavoligita prilaborado, la temo kaj fono estis tute kunfanditaj.Nature, la post-malklara procezo nature estos multe pli malbona ol laiPhone 11 Pro.
▲ La realaj neklaraj pruvoj,iPhone 11 Promaldekstre kaj la nova iPhone SE dekstre
Tial, kiam la nova iPhone SE uzas la propran iOSfotiloapp, nur kiam homa vizaĝo estas detektita, la "Portretreĝimo" povas esti ebligita por fari neklarajn fotojn.En aliaj kazoj, eraro aperos.
La kialo ankoraŭ rilatas al la algoritmo de Apple.Halide menciis teknikon nomitan 'Portrait Effects Matte' (Portraitefektoj Matte), kiu estas ĉefe uzata por trovi la precizan skizon de homoj en portretreĝimo fotoj, inkluzive de detaloj kiel harlinio sur la rando, okulvitroj kadro, ktp. La subjekto kaj fono estas segmentitaj.
Sed nuntempe, ĉi tiu aro de segmenta teknologio bazita sur maŝina lernado estas pli preta por "pafi homojn", ĝi ja povas kompensi la mankon de paralaksaj datumoj pri unuopaĵo.fotilotelefonoj kiel ekzempleiPhone XRkaj iPhone SE, sed se la subjekto La algoritmo ankaŭ faros juĝan eraron kiam ŝanĝas signojn de aliaj objektoj.
Koncerne al plurfotilaj telefonoj kieliPhone 11 Pro, vi povas akiri paralaksajn datumojn rekte per lafotiloaparataro, do ili ankaŭ povas uzi la portretreĝimon en ne-vizaĝaj scenoj kiam ili uzas sian propranfotilo.
▲ La antaŭa lenso de la nova iPhone SE ankaŭ subtenas la portretreĝimon, kaj la precizeco de la vizaĝo estas tre alta,
kaj la bildiga diferenco estas nur en la bokeh-efiko
Kompreneble, triaj programistoj ankoraŭ povas uzi aferojn, kiuj ne estas oficiale subtenataj.Nun la Halide-apo povas subteniiPhone XR, SE fari neklarajn bildojn de malgrandaj bestoj aŭ aliaj objektoj.Fakte, ĝi ankaŭ uzas la portretmaskteknologion de Apple por akiri profundmapojn, kaj poste aldoni sian propran malantaŭan optimumigon por atingi.
▲ Uzante triajn programojn kiel Halide, vi povas uzi la novan iPhone SE por fari neklarajn fotojn de nevizaĝaj temoj.
Ĝenerale, la portreta malklariĝo atingita de ĉi tiu nova iPhone SE estas la limo atingita per programara optimumigo por unu-fotilaj telefonoj.Strikte parolante, ĉi tio fakte estas pro la blato A13.Se ĝi ne alportis la lastan maŝinlernadon algoritmon, lafotilosperto sole, la SE-pafada sperto evidente devas esti duono.
Sekve, estas ankoraŭ signifa por saĝtelefonoj evoluigi plurfotilajn sistemojn.Ni povas uzi ultra-larĝan angulon por plilarĝigi la vidkampon, kaj ni povas fidi je la teleobjektivo por akiri nedetruajn zomajn fotojn.Helpo pri detekto de pliigita realeco, ĉi tiuj ne nur estas atingitaj per OTA-ĝisdatigo aŭ la muelado de algoritmoj.
Kompreneble, blinde fanfaroni kaj konkuri pri la nombro da fotiloj ankaŭ ĝenas.Se la aparataro nur determinas la malsupran limon de bildigo, tiam aro de bonegaj algoritmoj povas signife altigi la supran limon de bildigo, kaj eĉ re-esprimi la valoron kaj valoron de malnova aparataro.potencialo.
Mi ne scias ĉu ni povas atendi ankoraŭ kvar jarojn.Kiam la sekva generacio de iPhone SE eliros, estos solakamerĉu ankoraŭ havas lokon en la poŝtelefona industrio?
Afiŝtempo: majo-06-2020