Крыніца: Sina Technology Synthesis
Выкарыстанне адной камеры для атрымання размытых фатаграфій не з'яўляецца новым, папярэднімiPhone XRі ранейGoogle Pixel 2былі падобныя спробы.
Новы iPhone SE ад Apple таксама такі ж, але ягокамераэлемент занадта стары, асноўная заслуга ўсё яшчэ ў алгарытме.
З справаздачы аб разборцы iFixit мы бачым, што некаторыя часткі новага iPhone SE цалкам адпавядаюцьiPhone 8, нават у той ступені, што яны могуць выкарыстоўвацца ўзаемазаменна - у тым ліку 12-мегапіксэльны шырокавугольныкамера .
Практыка «новае віно ў старых бутэльках» не з'яўляецца незвычайнай для iPhone SE.Вяртаючыся да чатырох гадоў таму, у iPhone SE першага пакалення таксама быў выкарыстаны знешні выгляд 5s і большая частка абсталявання, таму Apple можа даць больш нізкую цану.
Тэарэтычна, пры капіяванні таго ж апаратнага забеспячэння камерыкамерахарактарыстыкі гэтых двух не павінны моцна адрознівацца.Напрыклад,iPhone 8не падтрымлівае фотаздымкі з малой глыбінёй рэзкасці з выразным аб'ектам і размытым фонам, што мы часта называем «партрэтным рэжымам».
Але калі вы паглядзіце на старонку падтрымкі Apple, вы ўбачыце, што партрэтны рэжым не падтрымліваеццаiPhone 8падтрымліваецца новым iPhone SE, нават калі характарыстыкі задніх аб'ектываў аднолькавыя.
У звычайных абставінах здымка размытых фатаграфій на мабільны тэлефон часта неабходна рабіць з дапамогай падвойных камер - гэтак жа, як і чалавечыя вочы, мабільны тэлефон таксама павінен атрымаць два выявы пад рознымі вугламі праз дзве лінзы ў розных пазіцыях, а затым аб'яднаць вуглы Прагляд Розніца ацэньвае глыбіню рэзкасці для дасягнення размытасці фону і захавання аб'екта выразным.
Серыя Plus у спісе, або X, XS і 11 у апошнія гады, у асноўным абапіраюцца на шматкамерныя сістэмы для завяршэння здымкі партрэтнага размытасці.
Такім чынам, як вырашае пярэдняя адзіная камера iPhone?Ядро ляжыць у інфрачырвоным матрычным праектары ў сістэме Face ID, які таксама можа атрымліваць дастаткова дакладныя дадзеныя аб глыбіні, што эквівалентна «дапаможнай лінзе».
З гэтага пункту гледжання iPhone SE можа рабіць фатаграфіі ў партрэтным рэжыме вельмі асабліва: па-першае, ён не робіць некалькі здымкаў, па-другое, у яго няма Face ID, у прынцыпе няма магчымасці апаратнай падтрымкі.
Відавочна, Apple унесла некаторыя змены, якія мы не бачым на праграмным узроўні.
Нядаўна Бэн Сандофскі, распрацоўшчык дадатку для камеры ад іншых вытворцаў Halide, раскрыў тэхнічныя прынцыпы, патлумачыўшы, чаму новы iPhone SE выкарыстоўвае тыя ж характарыстыкі, што і ў адной лінзе.iPhone 8, але ён можа дасягнуць рэжыму партрэтнай фатаграфіі, чаго не можа апошні.
Яны сказалі, што новы iPhone SE, верагодна, стане «першым iPhone, які можа ствараць эфект размытасці партрэта, выкарыстоўваючы толькі адно 2D-малюнак».
Можна сказаць, штоiPhone XRгэта таксама не размыццё адной камеры.Ці не SE гэта проста капіюе?
Аднак сітуацыя дэмантажу паказала, штокамерыiPhone SE іiPhone XRне з'яўляюцца паслядоўнымі, што таксама прыводзіць да адрозненняў у тэхнічнай рэалізацыі абодвух.
▲Samsung Galaxy S7серыя з'яўляецца першай прыладай, якая выкарыстоўвае тэхналогію DPAF на смартфонекамера
Найбольш важным момантам з'яўляецца тое, штокамеразiPhone XRможа выкарыстоўваць тэхналогію двухпіксельнай аўтафакусоўкі (DPAF), якая дазваляе атрымліваць пэўныя дадзеныя аб глыбіні на аснове апаратных сродкаў.
Прасцей кажучы, тэхналогія DPAF эквівалентная падзелу пікселя накамерадатчык на два меншыя пікселі, размешчаныя побач, каб зрабіць дзве фатаграфіі з рознымі вугламі, як нашы левыя і правыя вочы.
Хоць розніца ў вуглах, якая ўтвараецца пры гэтым, не такая відавочная, як у падвойнагакамера, гэта па-ранейшаму спрыяе алгарытму генерацыі даных аб глыбіні.
▲Google Pixel 2, 3Дзве карты дыспрапорцыі, атрыманыя з выкарыстаннем тэхналогіі DPAF, цяжка знайсці няўзброеным вокам
ўспрымаць, але ўсё яшчэ можа дапамагчы алгарытму сегментацыі малюнкаў выносіць меркаванні
Раней,Googleтаксама выкарыстоўвалі гэтую тэхналогію наПіксэль 2, 3для дасягнення размытасці аднаго здымка.НаПіксель4, паколькі камера заменена спецыфікацыяй для некалькіх камер, выяўленне паралаксу значна больш дакладнае, чым аднакамернае.
▲ Давайце паглядзім на даныя, атрыманыя Pixel 4 з дапамогай дзвюх камер.
Што тычыцца новага iPhone SE, таму што яго датчыкі занадта старыя, Halide сцвярджае, што ён не можа разлічваць на датчыкі для атрымання карт дыспрапорцыі, і ў асноўным можа спадзявацца толькі на алгарытм машыннага навучання, які забяспечваецца чыпам A13 Bionic для мадэлявання і генерацыі дадзеных аб глыбіні. карты.
Адно тлумачэнне прапановы заключаецца ў тым, што размыццё партрэта iPhone SE цалкам дасягаецца праграмным забеспячэннем і алгарытмамі.
▲ Вазьміце гэтую фатаграфію непасрэдна зiPhone XRі новы iPhone SE
Галогенид выкарыстаўiPhone XRі новы iPhone SE, каб сфатаграфаваць шчанюка (не сапраўдны здымак, проста каб сфатаграфаваць «адну фатаграфію»), а затым параўнаў даныя глыбіні двух здымкаў.
Яны выявілі, штоiPhone XRпроста зрабіў простую сегментацыю малюнка, каб выцягнуць асноўнае цела, але не правільна распазнала вуха шчанюка.
▲ Графік дадзеных глыбіні,iPhone XRзлева, новы iPhone SE справа
Але на новым iPhone SE з новым алгарытмам, які забяспечвае чып A13, мы атрымалі карту глыбіні, якая цалкам адрозніваецца адXR.Ён не толькі правільна распазнае вушы і агульны контур шчанюка, але і робіць шматслаёвую апрацоўку для розных фонаў.
Такая карта глыбіні не з'яўляецца 100% дакладнай.Халід сказаў, што дакладнасць выразання і размывання новага iPhone SE пры здымцы размытага фота без твару не такая дакладная, як пры здымцы партрэтаў.
Асабліва ў выпадку, калі некаторыя аб'екты і фонавыя выявы вельмі размытыя, перавага некалькіх камер у гэты час будзе больш відавочнай.
▲ У такой тэматыцы без твару, а прадмет і фон нявыразна падзеленыя, размытасць новага iPhone SE
лёгка рабіць памылкі
Як вы можаце бачыць з гэтага здымка, стiPhone 11 Proабсталяваны шматкамернай сістэмай, можа не толькі цалкам акрэсліць невялікія расліны на бервяне, але і распазнаць адлегласць да фону і вырабіць папластовую апрацоўку.
▲ Графік дадзеных глыбіні,iPhone 11 Proзлева, новы iPhone SE справа
На новым iPhone SE, нягледзячы на тыя ж вынікі шматслаёвай апрацоўкі, тэма і фон цалкам зліты.Натуральна, працэс пасля размывання, натуральна, будзе значна горш, чымiPhone 11 Pro.
▲ Фактычныя размытыя доказы,iPhone 11 Proзлева і новы iPhone SE справа
Вось чаму, калі новы iPhone SE выкарыстоўвае ўласную iOSкамерапрыкладанне, толькі калі выяўляецца чалавечы твар, можна ўключыць «Партрэтны рэжым», каб рабіць размытыя фатаграфіі.У іншых выпадках з'явіцца памылка.
Прычына ўсё ж звязана з алгарытмам Apple.Халід згадаў тэхніку пад назвай «Матавыя эфекты партрэта» (Portrait Effects Matte), якая ў асноўным выкарыстоўваецца для пошуку дакладных контураў людзей на фота ў партрэтным рэжыме, уключаючы такія дэталі, як лінія валасоў па краі, аправа ачкоў і г.д. Аб'ект і фон сегментаваны.
Але ў цяперашні час гэты набор тэхналогій сегментацыі, заснаваны на машынным навучанні, больш падрыхтаваны да «стральбы ў людзей», ён сапраўды можа папоўніць недахоп паралаксных дадзеных на адзіночныхкамератэлефоны, такія якiPhone XRі iPhone SE, але калі суб'ект Алгарытм таксама зробіць памылку пры змене сімвалаў з іншых аб'ектаў.
Што тычыцца шматкамерных тэлефонаў, якiPhone 11 Pro, вы можаце атрымаць даныя паралакса непасрэдна празкамераапаратнае забеспячэнне, таму яны таксама могуць выкарыстоўваць партрэтны рэжым у сцэнах без твару пры выкарыстанні ўласныхкамера.
▲ Пярэдняя лінза новага iPhone SE таксама падтрымлівае партрэтны рэжым, і дакладнасць твару вельмі высокая,
і розніца малюнка толькі ў эфекце боке
Вядома, староннія распрацоўшчыкі ўсё яшчэ могуць выкарыстоўваць рэчы, якія афіцыйна не падтрымліваюцца.Цяпер дадатак Halide можа падтрымлівацьiPhone XR, SE, каб рабіць размытыя здымкі дробных жывёл або іншых аб'ектаў.Фактычна, ён таксама выкарыстоўвае тэхналогію партрэтнай маскі Apple, каб атрымаць карты глыбіні, а затым дадаць сваю ўласную аптымізацыю для гэтага.
▲ Выкарыстоўваючы іншыя праграмы, такія як Halide, вы можаце выкарыстоўваць новы iPhone SE, каб рабіць размытыя фатаграфіі аб'ектаў без твару
Увогуле, размытасць партрэта, дасягнутая гэтым новым iPhone SE, - гэта мяжа, якую можна дасягнуць з дапамогай аптымізацыі праграмнага забеспячэння для тэлефонаў з адной камерай.Уласна кажучы, гэта на самай справе звязана з чыпам A13.Калі ён не прынёс найноўшы алгарытм машыннага навучання, токамератолькі вопыт, вопыт здымкі SE, відавочна, павінен быць удвая.
Такім чынам, для смартфонаў па-ранейшаму важна распрацоўваць шматкамерныя сістэмы.Мы можам выкарыстоўваць звышшырокі кут, каб пашырыць поле зроку, і мы можам спадзявацца на тэлеаб'ектыў для атрымання фатаграфій з неразбуральным зумам.Дапаможа выяўлення дапоўненай рэальнасці, гэта дасягаецца не толькі шляхам абнаўлення OTA або шліфоўкі алгарытмаў.
Вядома, слепа выхваляцца і спаборнічаць за колькасць камер таксама раздражняе.Калі апаратнае забеспячэнне вызначае толькі ніжнюю мяжу выявы, то набор выдатных алгарытмаў можа значна падняць верхнюю мяжу выявы і нават зноўку выказаць каштоўнасць і каштоўнасць старога абсталявання.патэнцыял.
Я не ведаю, ці можна чакаць яшчэ чатыры гады.Калі выйдзе наступнае пакаленне iPhone SE, будзе сінглкамерці ўсё яшчэ ёсць месца ў індустрыі мабільных тэлефонаў?
Час публікацыі: 06.06.2020 г