Šaltinis: Sina Technology Synthesis
Vieno fotoaparato naudojimas neryškiai fotografijai pasiekti nėra naujiena, ankstesnėiPhone XRir anksčiauGoogle Pixel 2turėjo panašių bandymų.
„Apple“ naujasis „iPhone SE“ taip pat yra tas pats, tačiau jofotoaparataselementas per senas, pagrindinis kreditas vis dar yra algoritme.
▲ Iš kairės į dešinęfotoaparatasnaujojo iPhone SE jutikliai,iPhone 8iriPhone XR
Iš „iFixit“ išmontavimo ataskaitos matome, kad kai kurios naujojo „iPhone SE“ dalys visiškai atitinkaiPhone 8, net tiek, kiek juos galima naudoti pakaitomis, įskaitant 12 megapikselių plačiakampįfotoaparatas .
„Naujo vyno senuose buteliuose“ praktika „iPhone SE“ nėra neįprasta.Dar prieš ketverius metus pirmosios kartos iPhone SE taip pat pritaikė 5s išvaizdą ir didžiąją dalį techninės įrangos, todėl Apple gali pasiūlyti mažesnę kainą.
Teoriškai, kopijuojant tą pačią fotoaparato aparatinę įrangą,fotoaparatasabiejų charakteristikos neturėtų labai skirtis.Pavyzdžiui,iPhone 8nepalaiko mažo lauko gylio nuotraukų su aiškiu objektu ir neryškiu fonu, o tai dažnai vadiname „portreto režimu“.
Tačiau pažvelgę į „Apple“ palaikymo puslapį pamatysite, kad portreto režimas nepalaikomasiPhone 8palaiko naujasis iPhone SE, net jei abiejų galinių objektyvų specifikacijos yra visiškai vienodos.
Įprastomis aplinkybėmis neryškias nuotraukas mobiliuoju telefonu dažnai reikia daryti dviem fotoaparatais – kaip ir žmogaus akimis, mobiliajame telefone taip pat reikia gauti du vaizdus skirtingais kampais per du objektyvus skirtingose padėtyse, o tada sujungti vaizdas Skirtumas įvertina lauko gylį, kad fonas būtų sulietas ir objektas būtų aiškus.
Sąraše esančios „Plus“ serijos arba X, XS ir 11 pastaraisiais metais iš esmės remiasi kelių kamerų sistemomis, kad užbaigtų portretų suliejimą.
Taigi, kaip išsprendžia viena „iPhone“ priekinė kamera?Šerdis slypi „Face ID“ sistemos infraraudonųjų taškų matricos projektoriuje, kuris taip pat gali gauti pakankamai tikslius gylio duomenis, o tai prilygsta „pagalbiniam objektyvui“.
Šiuo požiūriu „iPhone SE“ gali fotografuoti portreto režimu yra labai ypatingas: pirma, jis nedaro kelių kadrų, antra, neturi „Face ID“, iš esmės nėra galimybės palaikyti aparatinę įrangą.
Matyt, „Apple“ padarė keletą pakeitimų, kurių programinės įrangos lygiu nematome.
Neseniai Benas Sandofsky, trečiosios šalies fotoaparatų programos Halide kūrėjas, atskleidė techninius principus, paaiškindamas, kodėl naujajame iPhone SE naudojamos tos pačios vieno objektyvo specifikacijos kaip iriPhone 8, tačiau jis gali pasiekti portreto fotografavimo režimą, kurio pastarasis negali.
Jie teigė, kad naujasis „iPhone SE“ greičiausiai bus „pirmasis iPhone, galintis sukurti portreto suliejimo efektą naudojant tik vieną 2D vaizdą“.
Galite pasakyti, kadiPhone XRtaip pat nėra vienos kameros suliejimas.Ar SE tik nekopijuoja?
Tačiau išmontavimo situacija įrodė, kadfotoaparataiiPhone SE iriPhone XRnėra nuoseklūs, todėl skiriasi ir jų techninis įgyvendinimas.
▲Samsung Galaxy S7serija yra pirmasis įrenginys, kuriame išmaniajame telefone naudojama DPAF technologijafotoaparatas
Svarbiausias dalykas yra tai, kadfotoaparatasišiPhone XRgali naudoti dviejų pikselių automatinio fokusavimo (DPAF) technologiją, kuri leidžia gauti tam tikro gylio duomenis pagal aparatinę įrangą.
Paprastais žodžiais tariant, DPAF technologija prilygsta pikselių padalijimuifotoaparatasjutiklis į du mažesnius vienas šalia kito esančius pikselius, kad padarytumėte dvi nuotraukas skirtingais kampais, kaip mūsų kairioji ir dešinė akis.
Nors dėl to gaunamas kampų skirtumas nėra toks akivaizdus kaip dvigubasfotoaparatas, jis vis dar yra palankus algoritmui generuoti gylio duomenis.
▲„Google Pixel 2“, 3Du skirtumų žemėlapiai, gauti naudojant DPAF technologiją, yra sunkiai matomi plika akimi
suvokti, bet vis tiek gali padėti vaizdų segmentavimo algoritmui priimti sprendimus
AnksčiauGoogletaip pat naudojo šią technologijąPixel 2, 3kad pasiektumėte vieno kadro suliejimą.AntPikselis4, kadangi fotoaparatą pakeičia kelių kamerų specifikacija, paralakso aptikimas yra žymiai tikslesnis nei vienos kameros.
▲ Pažvelkime į Pixel 4 gautus duomenis naudojant dvi kameras.
Kalbant apie naująjį iPhone SE, kadangi jo jutikliai yra per seni, Halide teigia, kad negali pasikliauti jutikliais, kad gautų skirtumų žemėlapius, ir iš esmės gali pasikliauti tik mašininio mokymosi algoritmu, kurį teikia A13 Bionic lustas, kad imituotų ir generuotų gylio duomenis. žemėlapiai.
Vieno sakinio paaiškinimas yra tas, kad „iPhone SE“ portreto suliejimo fotografavimas visiškai pasiekiamas naudojant programinę įrangą ir algoritmus.
▲ Fotografuokite tiesiogiai suiPhone XRir naujas iPhone SE
Halidas naudojoiPhone XRir naujasis iPhone SE, kad nufotografuotų šuniuką (ne tikras kadras, tik kad nufotografuotų „vieną nuotrauką“), o tada palygino dviejų nuotraukų gylio duomenis.
Jie nustatė, kadiPhone XRtiesiog atliko paprastą vaizdo segmentavimą, kad ištrauktų pagrindinį korpusą, bet tinkamai neatpažino šuniuko ausies.
▲ gylio duomenų grafikas,iPhone XRkairėje, naujas iPhone SE dešinėje
Tačiau naujajame iPhone SE su nauju A13 lusto pateiktu algoritmu gavome gylio žemėlapį, kuris visiškai skiriasi nuoXR.Jis ne tik teisingai atpažįsta šuniuko ausis ir bendrą kontūrą, bet ir sluoksniais apdoroja skirtingus fonus.
Toks gylio žemėlapis nėra 100% tikslus.Halide teigė, kad naujojo „iPhone SE“ išpjovos ir suliejimo tikslumas, fotografuojant neryškias nuotraukas be veido, nėra toks tikslus kaip fotografuojant portretus.
Ypač tuo atveju, kai kai kurie objektai ir fono vaizdai yra labai neryškūs, kelių kamerų pranašumas šiuo metu bus akivaizdesnis.
▲ Esant tokiai ne veido temai, o objektas ir fonas nėra aiškiai atskirti, naujojo „iPhone SE“ suliejimas
lengva padaryti klaidų
Kaip matote iš šio paveikslėlio,iPhone 11 ProĮrengta kelių kamerų sistema gali ne tik visiškai apibūdinti mažus augalus ant rąsto, bet ir atpažinti atstumą nuo fono bei atlikti sluoksniuotą apdorojimą.
▲ gylio duomenų grafikas,iPhone 11 Prokairėje, naujas iPhone SE dešinėje
Naujajame „iPhone SE“, nepaisant tų pačių sluoksninio apdorojimo rezultatų, objektas ir fonas buvo visiškai sujungti.Natūralu, kad po suliejimo procesas bus daug blogesnis neiiPhone 11 Pro.
▲ Tikrieji neryškūs įrodymai,iPhone 11 Prokairėje ir naujasis iPhone SE dešinėje
Štai kodėl, kai naujasis iPhone SE naudoja savo iOSfotoaparatasprogramėlę, tik aptikus žmogaus veidą, galima įjungti „Portreto režimą“, kad būtų galima daryti neryškias nuotraukas.Kitais atvejais pasirodys klaida.
Priežastis vis dar susijusi su Apple algoritmu.Halide paminėjo techniką, vadinamą „Portrait Effects Matte“ („Portrait Effects Matte“), kuri dažniausiai naudojama norint rasti tikslius žmonių kontūrus portreto režimo nuotraukose, įskaitant tokias detales kaip plaukų linija ant krašto, akinių rėmeliai ir kt. Objektas ir fonas yra segmentuoti.
Tačiau šiuo metu šis segmentavimo technologijų rinkinys, pagrįstas mašininiu mokymusi, yra labiau pasirengęs „šaudyti žmones“, jis iš tikrųjų gali kompensuoti paralakso duomenų trūkumą viename.fotoaparatastelefonai, tokie kaipiPhone XRir iPhone SE, bet jei objektas Keisdamas kitų objektų simbolius, algoritmas taip pat padarys sprendimo klaidą.
Kalbant apie kelių kamerų telefonus, pvziPhone 11 Pro, galite gauti paralakso duomenis tiesiogiai perfotoaparatasaparatinė įranga, todėl jie taip pat gali naudoti portreto režimą ne veido scenose, kai naudoja savofotoaparatas.
▲ Naujojo iPhone SE priekinis objektyvas taip pat palaiko portreto režimą, o veido tikslumas yra labai didelis,
o vaizdo skirtumas yra tik „bokeh“ efekte
Žinoma, trečiųjų šalių kūrėjai vis tiek gali naudoti dalykus, kurie nėra oficialiai palaikomi.Dabar „Halide“ programa gali palaikytiiPhone XR, SE, kad padarytumėte neryškias mažų gyvūnų ar kitų objektų nuotraukas.Tiesą sakant, ji taip pat naudoja „Apple“ portretinės kaukės technologiją, kad gautų gylio žemėlapius, o tada prideda savo užpakalinį optimizavimą.
▲ Naudodami trečiųjų šalių programas, pvz., Halide, galite naudoti naująjį iPhone SE, kad padarytumėte susiliejusias ne veido objektų nuotraukas.
Apskritai šiuo naujuoju „iPhone SE“ pasiekiamas portreto suliejimas yra riba, kurią galima pasiekti optimizuojant programinę įrangą telefonams su viena kamera.Griežtai kalbant, tai iš tikrųjų yra dėl A13 lusto.Jei jis neatnešė naujausio mašininio mokymosi algoritmo,fotoaparatasvien patirtis, SE šaudymo patirtis akivaizdžiai turi būti pusė.
Todėl išmaniesiems telefonams vis dar prasminga kurti kelių kamerų sistemas.Galime naudoti itin platų kampą, kad praplėstume matymo lauką, o teleobjektyvu galime pasikliauti, kad gautume neardančias priartinimo nuotraukas.Papildytos realybės aptikimo pagalba, tai pasiekiama ne tik OTA atnaujinimu ar algoritmų šlifavimu.
Žinoma, erzina ir aklas girtis bei varžymasis dėl kamerų skaičiaus.Jei aparatinė įranga nustato tik apatinę vaizdo gavimo ribą, puikių algoritmų rinkinys gali žymiai padidinti viršutinę vaizdo gavimo ribą ir netgi iš naujo išreikšti senos aparatinės įrangos vertę ir vertę.potencialus.
Nežinau, ar galime laukti dar ketverius metus.Kai pasirodys naujos kartos iPhone SE, bus vienaskameraar vis dar turite vietą mobiliųjų telefonų pramonėje?
Paskelbimo laikas: 2020-06-06