Lähde: Sina Technology Synthesis
Yhden kameran käyttö sumean valokuvauksen aikaansaamiseksi ei ole mitään uutta, edellineniPhone XRja aikaisemminGoogle Pixel 2on ollut vastaavia yrityksiä.
Applen uusi iPhone SE on myös sama, mutta senkameraelementti on liian vanha, päähyvitys on edelleen algoritmissa.
iFixitin purkamisraportista voimme nähdä, että jotkin uuden iPhone SE:n osat ovat täysin yhdenmukaisiaiPhone 8, jopa siinä määrin, että niitä voidaan käyttää vaihtokelpoisesti - mukaan lukien 12 megapikselin laajakulmakamera .
Käytäntö "uusi viini vanhoissa pulloissa" ei ole epätavallinen iPhone SE:lle.Neljä vuotta sitten ensimmäisen sukupolven iPhone SE sovelsi myös 5s:n ulkonäköä ja suurinta osaa laitteistosta, joten Apple voi antaa halvemman hinnan.
Teoriassa, kun kopioidaan samaa kameralaitteistoa,kameraNäiden kahden ominaisuudet eivät saa olla kovin erilaisia.Esimerkiksi,iPhone 8ei tue pienten syväterävyyskuvien ottamista selkeällä kohteella ja epäselvällä taustalla, jota kutsumme usein "muotokuvatilaksi".
Mutta kun katsot Applen tukisivua, huomaat, että muotokuvatila, jota ei tueiPhone 8uusi iPhone SE tukee sitä, vaikka molempien takalinssien tekniset tiedot ovat täsmälleen samat.
Tavallisissa olosuhteissa sumennettujen kuvien ottaminen matkapuhelimella on usein tehtävä kahdella kameralla - aivan kuten ihmissilmä, matkapuhelimen on myös otettava kaksi kuvaa eri kulmista kahdella eri asennossa olevalla linssillä ja yhdistettävä sitten kuvakulmat. näkymä Ero arvioi syväterävyyden taustan epäterävyyden saavuttamiseksi ja kohteen pitämiseksi selkeänä.
Listalla olevat Plus-sarjat tai viime vuosien X-, XS- ja 11-sarjat luottavat periaatteessa usean kameran järjestelmiin muotokuvan epäterävyyden kuvaamiseen.
Joten miten iPhonen etukamera ratkaisee?Ydin on Face ID -järjestelmän infrapunapistematriisiprojektorissa, joka voi myös saada riittävän tarkkoja syvyystietoja, mikä vastaa "apulinssiä".
Tästä näkökulmasta iPhone SE voi ottaa muotokuvatilan kuvia on hyvin erikoinen: ensinnäkin se ei ota useita kuvia, toiseksi sillä ei ole Face ID:tä, laitteistotukea ei periaatteessa ole.
Ilmeisesti Apple on tehnyt joitain muutoksia, joita emme näe ohjelmistotasolla.
Äskettäin kolmannen osapuolen Halide-kamerasovelluksen kehittäjä Ben Sandofsky paljasti tekniset periaatteet ja selitti, miksi uusi iPhone SE käyttää samoja yhden linssin teknisiä ominaisuuksia kuiniPhone 8, mutta sillä voidaan saavuttaa muotokuvatila, jota jälkimmäinen ei voi.
He sanoivat, että uusi iPhone SE on todennäköisesti "ensimmäinen iPhone, joka voi luoda muotokuvan epäterävyyden käyttämällä vain yhtä 2D-kuvaa".
Voit sanoa, ettäiPhone XRei myöskään ole yhden kameran sumennus.Eikö SE vain kopioi sitä?
Purkamistilanne on kuitenkin osoittanut, ettäkameratiPhone SE:stä jaiPhone XReivät ole johdonmukaisia, mikä johtaa myös eroihin näiden kahden teknisessä toteutuksessa.
▲Samsung Galaxy S7sarja on ensimmäinen laite, joka käyttää DPAF-tekniikkaa älypuhelimessakamera
Tärkein asia on, ettäkamera-ltaiPhone XRvoi käyttää dual pixel autofocus (DPAF) -tekniikkaa, jonka avulla se voi saada tiettyjä syvyystietoja laitteiston perusteella.
Yksinkertaisesti sanottuna DPAF-tekniikka vastaa pikselin jakamistakameraanturi kahdeksi pienemmäksi vierekkäiseksi pikseliksi ottaaksesi kaksi valokuvaa eri kulmista, aivan kuten vasen ja oikea silmämme.
Vaikka tämän tuottama kulmaero ei ole yhtä ilmeinen kuin kaksoiskulman erokamera, se on edelleen suotuisa algoritmille syvyystietojen luomiseen.
▲Google Pixel 2, 3Kaksi DPAF-tekniikalla saatua erokarttaa on vaikea nähdä paljaalla silmällä
havaitsevat, mutta voivat silti auttaa kuvan segmentointialgoritmia tekemään päätöksiä
Aiemmin,Googlekäytti myös tätä tekniikkaaPixel 2, 3yhden kuvan epäterävyyden saavuttamiseksi.KäytössäPikseli4, koska kamera on korvattu usealla kameralla, parallaksitunnistus on huomattavasti tarkempi kuin yhden kameran.
▲ Katsotaanpa Pixel 4:n kahden kameran avulla saamia tietoja.
Mitä tulee uuteen iPhone SE:hen, koska sen anturit ovat liian vanhoja, Halide väittää, ettei se voi luottaa antureisiin erokarttojen saamiseksi, ja periaatteessa se voi luottaa vain A13 Bionic -sirun tarjoamaan koneoppimisalgoritmiin simuloida ja luoda syvyystietoja. karttoja.
Yksi lause selitys on, että iPhone SE:n muotokuva-sumennuskuvaus saadaan kokonaan ohjelmiston ja algoritmien avulla.
▲ Ota tämä kuva suoraan kanssaiPhone XRja uusi iPhone SE
Halide käyttiiPhone XRja uusi iPhone SE ottamaan kuvan pennusta (ei oikeaa kuvaa, vain "yhdestä valokuvasta"), ja sitten vertaili kahden kuvan syvyystietoja.
He havaitsivat, ettäiPhone XRteki vain yksinkertaisen kuvan segmentoinnin vetääkseen päärungon ulos, mutta ei tunnistanut pennun korvaa oikein.
▲ Syvyysdatakaavio,iPhone XRvasemmalla, uusi iPhone SE oikealla
Mutta uudessa iPhone SE:ssä, A13-sirun tarjoamalla uudella algoritmilla, saimme syvyyskartan, joka on täysin erilainen kuinXR.Se ei ainoastaan tunnista oikein pennun korvat ja yleiset ääriviivat, vaan myös käsittelee kerroksittain erilaisia taustoja.
Tällainen syvyyskartta ei ole 100 % tarkka.Halide sanoi, että uuden iPhone SE:n leikkauksen ja sumennuksen tarkkuus kuvattaessa kasvottomia epäselviä kuvia ei ole yhtä tarkkaa kuin muotokuvia otettaessa.
Varsinkin jos jotkin kohteet ja taustakuvat ovat hyvin epäselviä, useiden kameroiden edut ovat ilmeisempiä tällä hetkellä.
▲ Tällaisessa ei-kasvoteemassa, jossa kohde ja tausta eivät ole selvästi erotettu toisistaan, uuden iPhone SE:n hämärtyminen
on helppo tehdä virheitä
Kuten tästä kuvasta näkyy,iPhone 11 Promonikamerajärjestelmällä varustettu ei vain pysty hahmottelemaan tukin pieniä kasveja kokonaan, vaan myös tunnistaa taustan etäisyyden ja tehdä kerroksittain käsittelyä.
▲ Syvyysdatakaavio,iPhone 11 Provasemmalla, uusi iPhone SE oikealla
Uudessa iPhone SE:ssä aihe ja tausta on sulautettu täysin yhteen huolimatta samoista kerrosteisen käsittelyn tuloksista.Luonnollisesti hämärtymisen jälkeinen prosessi on luonnollisesti paljon huonompi kuiniPhone 11 Pro.
▲ Varsinaiset epäselvät todisteet,iPhone 11 Provasemmalla ja uusi iPhone SE oikealla
Tästä syystä, kun uusi iPhone SE käyttää iOS:n omaakamerasovellus, vain kun ihmiskasvot tunnistetaan, "Muotokuvatila" voidaan ottaa käyttöön epäselvien kuvien ottamiseksi.Muissa tapauksissa tulee virheilmoitus.
Syy liittyy edelleen Applen algoritmiin.Halide mainitsi tekniikan nimeltä "Portrait Effects Matte" (Portrait Effects Matte), jota käytetään pääasiassa ihmisten tarkan ääriviivojen löytämiseen muotokuvatilan valokuvissa, mukaan lukien yksityiskohdat, kuten hiusraja reunassa, silmälasien kehys jne. Kohde ja tausta ovat segmentoituja.
Mutta tällä hetkellä tämä koneoppimiseen perustuva segmentointiteknologia on paremmin valmistautunut "ihmisten ampumiseen", se voi todellakin korvata yksittäisen parallaksidatan puutteen.kamerapuhelimet, kuteniPhone XRja iPhone SE, mutta jos aihe Algoritmi tekee myös arviointivirheen vaihtaessaan merkkejä muista objekteista.
Mitä tulee monikamerapuhelimiin, kuteniPhone 11 Pro, voit saada parallaksitietoja suoraankameralaitteisto, joten he voivat käyttää muotokuvatilaa myös muissa kohtauksissa, joissa ei ole kasvoja, kun he käyttävät omia kohtauksiaankamera.
▲ Uuden iPhone SE:n etulinssi tukee myös muotokuvatilaa, ja kasvojen tarkkuus on erittäin korkea,
ja kuvan ero on vain bokeh-efektissä
Kolmannen osapuolen kehittäjät voivat tietysti edelleen käyttää asioita, joita ei virallisesti tueta.Nyt Halide-sovellus voi tukeaiPhone XR, SE ottaaksesi epäselviä kuvia pienistä eläimistä tai muista esineistä.Itse asiassa se käyttää myös Applen muotokuvanaamaritekniikkaa syvyyskarttojen saamiseksi ja lisää sitten oman tausta-optimoinnin saavuttamiseksi.
▲ Käyttämällä kolmannen osapuolen sovelluksia, kuten Halide, voit käyttää uutta iPhone SE:tä ottamaan epäselviä kuvia muista kuin kasvoista.
Yleisesti ottaen tämän uuden iPhone SE:n saavuttama muotokuvan sumeus on raja, joka voidaan saavuttaa yhden kameran puhelimien ohjelmistooptimoinnilla.Tarkkaan ottaen tämä johtuu itse asiassa A13-sirusta.Jos se ei tuonut uusinta koneoppimisalgoritmia,kameraPelkästään kokemusta SE-ammuntakokemuksesta on ilmeisesti oltava puolet.
Siksi älypuhelimille on edelleen mielekästä kehittää monikamerajärjestelmiä.Voimme käyttää ultralaajakulmaa laajentamaan näkökenttää, ja voimme luottaa teleobjektiiviin saadaksemme tuhoamattomia zoomauskuvia.Lisätyn todellisuuden havaitsemisen apu, niitä ei saavuteta vain OTA-päivityksellä tai algoritmien hiomalla.
Tietysti myös sokea kehuminen ja kameroiden määrästä kilpaileminen on ärsyttävää.Jos laitteisto määrittää vain kuvantamisen alarajan, joukko erinomaisia algoritmeja voi merkittävästi nostaa kuvantamisen ylärajaa ja jopa ilmaista uudelleen vanhan laitteiston arvon ja arvon.potentiaalia.
En tiedä, voimmeko odottaa vielä neljä vuotta.Kun seuraavan sukupolven iPhone SE tulee ulos, tulee singlekameraonko sinulla vielä paikka matkapuhelinteollisuudessa?
Postitusaika: 06-06-2020