Zdroj: Sina Technology Synthesis
Použití jediného fotoaparátu pro dosažení rozmazané fotografie není nic nového, předchozíiPhone XRa dříveGoogle Pixel 2měli podobné pokusy.
Nový iPhone SE od Applu je také stejný, ale jehoFotoaparátprvek je příliš starý, hlavní kredit je stále v algoritmu.
▲ Zleva dopravaFotoaparátsenzory nového iPhonu SE,iPhone 8aiPhone XR
Ze zprávy o rozebrání iFixit můžeme vidět, že některé díly v novém iPhonu SE jsou zcela v souladu siPhone 8, a to i do té míry, že je lze používat zaměnitelně – včetně 12megapixelového širokoúhlého záběruFotoaparát .
Praxe „nového vína ve starých lahvích“ není pro iPhone SE ničím neobvyklým.Zpátky do doby před čtyřmi lety první generace iPhone SE také použila vzhled 5s a většinu hardwaru, takže Apple může dát nižší cenu.
Teoreticky, při kopírování stejného hardwaru fotoaparátu,Fotoaparátvlastnosti těchto dvou by se neměly příliš lišit.Například,iPhone 8nepodporuje pořizování fotografií s malou hloubkou ostrosti s jasným objektem a rozostřeným pozadím, čemuž často říkáme „režim portrétu“.
Když se ale podíváte na stránku podpory Apple, zjistíte, že režim na výšku, který není podporovániPhone 8je podporován novým iPhonem SE – i když specifikace zadní čočky obou jsou naprosto stejné.
Za normálních okolností musí být pořizování rozmazaných fotografií na mobilním telefonu často prováděno duálními fotoaparáty - stejně jako lidské oči, mobilní telefon také potřebuje získat dva snímky z různých úhlů pomocí dvou čoček v různých polohách a poté kombinovat úhly Zobrazit Rozdíl odhaduje hloubku ostrosti pro dosažení rozostření pozadí a udržení čistého objektu.
Řada Plus na seznamu nebo X, XS a 11 v posledních letech v zásadě spoléhají na vícekamerové systémy k dokončení fotografování rozostření portrétů.
Jak tedy řeší přední jediná kamera iPhonu?Jádro spočívá v infračerveném bodovém projektoru v systému Face ID, který také dokáže získat dostatečně přesné údaje o hloubce, což je ekvivalentní „pomocné čočce“.
Z tohoto pohledu je iPhone SE, který umí fotit na výšku, velmi zvláštní: zaprvé nefotí více snímků, zadruhé nemá Face ID, v podstatě chybí možnost hardwarové podpory.
Apple zřejmě provedl nějaké změny, které na softwarové úrovni nevidíme.
Nedávno Ben Sandofsky, vývojář aplikace pro fotoaparáty třetí strany Halide, odhalil technické principy a vysvětlil, proč nový iPhone SE používá stejné specifikace jednoho objektivu jakoiPhone 8, ale může dosáhnout režimu portrétové fotografie, který druhý nedokáže.
Řekli, že nový iPhone SE bude pravděpodobně „prvním iPhonem, který dokáže generovat efekt rozostření portrétu pouze pomocí jediného 2D obrázku“.
Dalo by se říci, žeiPhone XRtaké nejde o rozostření jednoho fotoaparátu.Nekopíruje to SE jen tak?
Situace při demontáži však prokázala, žekameryiPhone SE aiPhone XRnejsou konzistentní, což také vede k rozdílům v technické implementaci obou.
▲Samsung Galaxy S7série je prvním zařízením, které využívá technologii DPAF na smartphonuFotoaparát
Nejdůležitějším bodem je, žeFotoaparátziPhone XRmůže využívat technologii automatického ostření dvou pixelů (DPAF), která mu umožňuje získat údaje o určité hloubce na základě hardwaru.
Jednoduše řečeno, technologie DPAF je ekvivalentní dělení pixelu naFotoaparátsenzor na dva menší pixely vedle sebe pro zachycení dvou fotografií s různými úhly, stejně jako naše levé a pravé oko.
I když rozdíl úhlu, který tím vzniká, není tak zřejmý jako u dualFotoaparát, je stále vhodné pro algoritmus generovat data hloubky.
▲Google Pixel 2, 3Dvě mapy disparity získané pomocí technologie DPAF jsou pro pouhé oko obtížné
vnímat, ale stále může pomoci algoritmu segmentace obrazu při rozhodování
Dříve,Googletaké používal tuto technologii naPixel 2, 3k dosažení rozostření jedním záběrem.NaPixel4, protože je kamera nahrazena specifikací pro více kamer, je detekce paralaxy výrazně přesnější než jednokamerová.
▲ Pojďme se podívat na data získaná Pixelem 4 pomocí dvou fotoaparátů.
Pokud jde o nový iPhone SE, protože jeho senzory jsou příliš staré, Halide tvrdí, že se nemůže spoléhat na senzory při získávání map disparity a v zásadě se může spolehnout pouze na algoritmus strojového učení, který poskytuje čip A13 Bionic pro simulaci a generování hloubkových dat. mapy.
Vysvětlení jednou větou je, že fotografování rozostření portrétu iPhone SE je plně dosaženo softwarem a algoritmy.
▲ Pořiďte tuto fotografii přímo pomocíiPhone XRa nový iPhone SE
▲ Graf hloubkových dat,iPhone XRvlevo, vpravo nový iPhone SE
Ale na novém iPhone SE, s novým algoritmem poskytovaným čipem A13, jsme získali hloubkovou mapu, která je zcela odlišná odXR.Nejenže správně rozpozná uši a celkový obrys štěněte, ale také provádí vrstvené zpracování pro různá pozadí.
Tento druh hloubkové mapy není 100% přesný.Halide uvedl, že přesnost výřezu a rozmazání nového iPhonu SE při focení rozmazaných fotografií bez obličeje není tak přesná jako při focení portrétů.
Zejména v případě, kdy jsou některé objekty a obrázky na pozadí velmi rozmazané, bude v tuto chvíli výhoda více fotoaparátů patrnější.
▲ V tomto druhu motivu bez tváře a předmět a pozadí nejsou jasně odděleny, rozostření nového iPhone SE
je snadné dělat chyby
Jak můžete vidět z tohoto obrázku,iPhone 11 Provybavený multi-kamerovým systémem dokáže nejen kompletně obkreslit malé rostliny na kládě, ale také dokáže rozpoznat vzdálenost pozadí a provést vrstvené zpracování.
▲ Graf hloubkových dat,iPhone 11 Provlevo, vpravo nový iPhone SE
Na novém iPhonu SE, navzdory stejným výsledkům vrstveného zpracování, byly předmět a pozadí zcela srostlé dohromady.Proces po rozmazání bude přirozeně mnohem horší než teniPhone 11 Pro.
▲ Skutečné rozmazané důkazy,iPhone 11 Provlevo a nový iPhone SE vpravo
To je důvod, proč, když nový iPhone SE používá vlastní iOSFotoaparátaplikace, pouze když je detekován lidský obličej, lze povolit režim „Portrét“ pro pořizování rozmazaných fotografií.V ostatních případech se objeví chyba.
Důvod stále souvisí s algoritmem společnosti Apple.Halide zmínil techniku zvanou 'Portrait Effects Matte' (Portrait Effects Matte), která se používá hlavně k nalezení přesného obrysu osob na fotografiích v režimu na výšku, včetně detailů, jako je vlasová linie na okraji, rám brýlí atd. Objekt a pozadí jsou segmentované.
Ale v současné době je tato sada segmentačních technologií založená na strojovém učení připravenější na „střílení lidí“, může skutečně nahradit nedostatek paralaxních dat na singluFotoaparáttelefony jako napřiPhone XRa iPhone SE, ale pokud subjekt Algoritmus také udělá chybu v úsudku při změně znaků z jiných objektů.
Co se týče telefonů s více fotoaparátyiPhone 11 Pro, můžete získat data paralaxy přímo přesFotoaparáthardwaru, takže při použití svých vlastních mohou použít režim na výšku i ve scénách bez tvářeFotoaparát.
▲ Přední čočka nového iPhonu SE podporuje také portrétní režim a přesnost obličeje je velmi vysoká,
a rozdíl v zobrazení je pouze v efektu bokeh
Vývojáři třetích stran samozřejmě mohou stále používat věci, které nejsou oficiálně podporovány.Nyní může aplikace Halide podporovatiPhone XR, SE pro pořizování rozmazaných snímků malých zvířat nebo jiných objektů.Ve skutečnosti také používá technologii portrétové masky společnosti Apple k získání hloubkových map a poté k dosažení vlastní optimalizace back-endu.
▲ Pomocí aplikací třetích stran, jako je Halide, můžete nový iPhone SE používat k pořizování rozmazaných fotografií objektů, které nemají obličej.
Obecně platí, že rozostření portrétu, kterého dosáhl tento nový iPhone SE, je limit, kterého lze dosáhnout softwarovou optimalizací pro telefony s jedním fotoaparátem.Přísně vzato je to ve skutečnosti způsobeno čipem A13.Pokud by nepřinesl nejnovější algoritmus strojového učení,Fotoaparátzážitek sám o sobě, zážitek ze střelby SE samozřejmě musí být poloviční.
Proto je stále smysluplné, aby chytré telefony vyvíjely vícekamerové systémy.K rozšíření zorného pole můžeme použít ultraširokoúhlý úhel a můžeme se spolehnout na to, že teleobjektiv získá nedestruktivní fotografie se zoomem.Pomáhá detekce rozšířené reality, těch není dosaženo pouze upgradem OTA nebo opracováním algoritmů.
Slepé vychloubání a soutěžení o počet kamer je samozřejmě také otravné.Pokud hardware určuje pouze spodní hranici zobrazení, pak sada vynikajících algoritmů může výrazně zvýšit horní hranici zobrazení a dokonce znovu vyjádřit hodnotu a hodnotu starého hardwaru.potenciál.
Nevím, jestli můžeme čekat další čtyři roky.Až vyjde další generace iPhonu SE, bude singlkameramáte stále své místo v odvětví mobilních telefonů?
Čas odeslání: květen-06-2020