منبع: سنتز فناوری سینا
استفاده از یک دوربین برای دستیابی به عکاسی تار چیز جدیدی نیستآیفون XRو زودترگوگل پیکسل 2تلاش های مشابهی داشته اند.
آیفون SE جدید اپل نیز همان است، اما همین استدوربینعنصر خیلی قدیمی است، اعتبار اصلی هنوز در الگوریتم است.
از گزارش دمونتاژ iFixit می توان دریافت که برخی از قطعات آیفون SE جدید کاملاً باآیفون 8، حتی تا حدی که بتوان از آنها به جای یکدیگر استفاده کرد - از جمله زاویه باز 12 مگاپیکسلیدوربین .
عمل "شراب جدید در بطری های قدیمی" برای iPhone SE غیرعادی نیست.به چهار سال پیش، نسل اول آیفون SE نیز از ظاهر 5s و بیشتر سخت افزار استفاده می کرد، بنابراین اپل می تواند قیمت کمتری را ارائه دهد.
از نظر تئوری، هنگام کپی کردن همان سخت افزار دوربین،دوربینویژگی های این دو نباید خیلی متفاوت باشد.مثلا،آیفون 8از گرفتن عکس‌های با عمق میدان کم با سوژه واضح و پس‌زمینه تار پشتیبانی نمی‌کند، چیزی که اغلب آن را «حالت پرتره» می‌نامیم.
اما وقتی به صفحه پشتیبانی اپل نگاه می‌کنید، متوجه می‌شوید که حالت پرتره که توسط آن پشتیبانی نمی‌شودآیفون 8توسط iPhone SE جدید پشتیبانی می شود، حتی اگر مشخصات لنز عقب این دو دقیقاً یکسان باشد.
در شرایط عادی، گرفتن عکس‌های تار بر روی تلفن همراه اغلب باید توسط دوربین‌های دوگانه انجام شود - درست مانند چشم انسان، تلفن همراه نیز باید دو تصویر را در زوایای مختلف از طریق دو لنز در موقعیت‌های مختلف دریافت کند و سپس زوایای آن را با هم ترکیب کند. مشاهده تفاوت عمق میدان را برای دستیابی به محو شدن پس زمینه و شفاف نگه داشتن سوژه تخمین می زند.
سری پلاس در لیست یا X، XS و 11 در سال‌های اخیر، اساساً به سیستم‌های چند دوربینی برای تکمیل تصویربرداری تاری پرتره متکی هستند.
پس چگونه تک دوربین جلوی آیفون را حل می کند؟هسته در پروژکتور ماتریس نقطه‌ای مادون قرمز در سیستم Face ID قرار دارد که می‌تواند داده‌های عمقی به اندازه کافی دقیق را به دست آورد که معادل یک "عدسی کمکی" است.
از این منظر، آیفون SE می‌تواند عکس‌های حالت پرتره بگیرد بسیار خاص است: اولاً چندین عکس نمی‌گیرد، دوم اینکه Face ID ندارد، اساساً امکان پشتیبانی سخت‌افزاری وجود ندارد.
ظاهرا اپل تغییراتی ایجاد کرده است که در سطح نرم افزار نمی توانیم آن ها را ببینیم.
اخیرا، بن سندوفسکی، توسعه‌دهنده اپلیکیشن دوربین شخص ثالث Halide، اصول فنی را فاش کرد و توضیح داد که چرا آیفون SE جدید از همان مشخصات تک لنز استفاده می‌کند.آیفون 8، اما می تواند به حالت عکس پرتره برسد که دومی نمی تواند.
آنها گفتند که آیفون SE جدید احتمالاً "اولین آیفونی است که می تواند تنها با استفاده از یک تصویر دو بعدی، جلوه تاری پرتره ایجاد کند".
ممکن است بگویید کهآیفون XRهمچنین یک تاری تک دوربینی نیست.آیا SE فقط آن را کپی نمی کند؟
با این حال، وضعیت برچیدن ثابت کرده است کهدوربین هاآیفون SE وآیفون XRسازگار نیستند، که همچنین منجر به تفاوت در اجرای فنی این دو می شود.
▲سامسونگ گلکسی اس 7سری اولین دستگاهی است که از فناوری DPAF در گوشی های هوشمند استفاده می کنددوربین
مهمترین نکته این است کهدوربینازآیفون XRمی تواند از فناوری فوکوس خودکار دو پیکسل (DPAF) استفاده کند که به آن اجازه می دهد تا داده های عمق خاصی را بر اساس سخت افزار بدست آورد.
به زبان ساده، فناوری DPAF معادل تقسیم پیکسل روی آن استدوربینحسگر را به دو پیکسل کوچکتر در کنار هم تبدیل کنید تا دو عکس با زوایای مختلف بگیرید، درست مانند چشم چپ و راست ما.
اگرچه تفاوت زاویه ایجاد شده توسط این به اندازه دوگانه واضح نیستدوربین، هنوز هم برای الگوریتم برای تولید داده های عمق مفید است.
▲Google Pixel 2, 3دو نقشه نابرابری به دست آمده با استفاده از فناوری DPAF برای چشم غیر مسلح دشوار است
درک کند، اما همچنان می تواند به الگوریتم تقسیم بندی تصویر کمک کند تا قضاوت کند
قبلا،گوگلهمچنین از این فناوری درپیکسل 2، 3برای رسیدن به تاری تک شاتدرپیکسل4، از آنجایی که دوربین با مشخصات چند دوربین جایگزین شده است، تشخیص اختلاف منظر به طور قابل توجهی دقیق تر از دوربین تک است.
▲ بیایید نگاهی به داده های بدست آمده توسط پیکسل 4 با استفاده از دو دوربین بیندازیم.
در مورد iPhone SE جدید، به دلیل قدیمی بودن سنسورهای آن، Halide ادعا می کند که نمی تواند برای بدست آوردن نقشه های نابرابری به سنسورها تکیه کند و اساساً می تواند تنها به الگوریتم یادگیری ماشین ارائه شده توسط تراشه A13 Bionic برای شبیه سازی و تولید داده های عمق تکیه کند. نقشه ها.
توضیح یک جمله این است که عکاسی پرتره آیفون SE کاملاً توسط نرم افزار و الگوریتم ها انجام می شود.
▲ این عکس را مستقیماً باآیفون XRو آیفون SE جدید
▲ نمودار داده های عمق،آیفون XRدر سمت چپ، iPhone SE جدید در سمت راست
اما در آیفون SE جدید، با الگوریتم جدید ارائه شده توسط تراشه A13، نقشه عمقی کاملا متفاوت ازXR.نه تنها گوش ها و طرح کلی توله سگ را به درستی تشخیص می دهد، بلکه پردازش لایه ای را برای پس زمینه های مختلف انجام می دهد.
این نوع نقشه عمق 100٪ دقیق نیست.هالید گفت که دقت برش و تار شدن آیفون SE جدید هنگام عکاسی عکس‌های تار بدون چهره به اندازه عکس‌های پرتره دقیق نیست.
به خصوص در مواردی که برخی از سوژه ها و تصاویر پس زمینه بسیار تار هستند، مزیت دوربین های متعدد در این زمان آشکارتر خواهد بود.
▲ در این نوع تم غیر چهره، و سوژه و پس زمینه به وضوح از هم جدا نشده اند، تاری آیفون SE جدید
اشتباه کردن آسان است
همانطور که از این تصویر می بینید،آیفون 11 پرومجهز به یک سیستم چند دوربینی نه تنها می تواند گیاهان کوچک روی سیاهه را به طور کامل ترسیم کند، بلکه می تواند فاصله پس زمینه را تشخیص دهد و پردازش لایه ای انجام دهد.
▲ نمودار داده های عمق،آیفون 11 پرودر سمت چپ، iPhone SE جدید در سمت راست
در آیفون SE جدید، علیرغم نتایج یکسان پردازش لایه ای، سوژه و پس زمینه کاملاً با هم ترکیب شده اند.به طور طبیعی، فرآیند پس از محو شدن به طور طبیعی بسیار بدتر از این خواهد بودآیفون 11 پرو.
▲ شواهد مبهم واقعی،آیفون 11 پرودر سمت چپ و آیفون SE جدید در سمت راست
به همین دلیل است که وقتی iPhone SE جدید از iOS خود استفاده می کنددوربینتنها زمانی که چهره انسان شناسایی شود، می‌توان «حالت پرتره» را برای گرفتن عکس‌های تار فعال کرد.در موارد دیگر، خطا ظاهر می شود.
دلیل آن همچنان به الگوریتم اپل مربوط می شود.هالید از تکنیکی به نام « جلوه‌های پرتره مات» (Portrait Effects Matte) نام برد که عمدتاً برای یافتن طرح کلی افراد در عکس‌های حالت پرتره، از جمله جزئیاتی مانند خط مو روی لبه، قاب عینک و غیره استفاده می‌شود. سوژه و پس‌زمینه. تقسیم بندی می شوند.
اما در حال حاضر، این مجموعه از فناوری تقسیم‌بندی مبتنی بر یادگیری ماشینی برای «تیراندازی به افراد» آماده‌تر است، و در واقع می‌تواند کمبود داده‌های اختلاف منظر در تک را جبران کند.دوربینگوشی هایی مانندآیفون XRو iPhone SE، اما اگر موضوع الگوریتم هنگام تغییر کاراکترها از اشیاء دیگر نیز دچار خطای قضاوت می شود.
همانطور که برای تلفن های چند دوربین مانندآیفون 11 پرو، می توانید داده های اختلاف منظر را مستقیماً از طریق دریافت کنیددوربینسخت افزار، بنابراین می توانند در هنگام استفاده از صحنه های خود از حالت پرتره در صحنه های غیر چهره نیز استفاده کننددوربین.
▲ لنز جلوی آیفون SE جدید از حالت پرتره نیز پشتیبانی می کند و دقت چهره بسیار بالاست.
و تفاوت تصویربرداری فقط در افکت بوکه است
البته، توسعه دهندگان شخص ثالث همچنان می توانند از چیزهایی استفاده کنند که به طور رسمی پشتیبانی نمی شوند.اکنون برنامه Halide می تواند پشتیبانی کندآیفون XR, SE برای گرفتن عکس های تار از حیوانات کوچک یا اشیاء دیگر.در واقع، از فناوری ماسک پرتره اپل نیز برای بدست آوردن نقشه های عمقی استفاده می کند و سپس بهینه سازی back-end خود را برای دستیابی به آن اضافه می کند.
▲ با استفاده از برنامه های شخص ثالث مانند Halide، می توانید از iPhone SE جدید برای گرفتن عکس های تار از سوژه های غیر چهره استفاده کنید.
به طور کلی، تاری پرتره به دست آمده توسط این آیفون SE جدید محدودیتی است که می توان با بهینه سازی نرم افزاری برای گوشی های تک دوربین به دست آورد.به طور دقیق، این در واقع به دلیل تراشه A13 است.اگر آخرین الگوریتم یادگیری ماشین را ارائه نمی کرد،دوربینتجربه به تنهایی، تجربه تیراندازی SE بدیهی است که باید نصف باشد.
بنابراین، هنوز هم برای گوشی های هوشمند توسعه سیستم های چند دوربینه معنادار است.ما می توانیم از زاویه فوق عریض برای گسترش میدان دید استفاده کنیم و می توانیم برای به دست آوردن عکس های زوم غیر مخرب به لنز تله فوتو اعتماد کنیم.تشخیص واقعیت افزوده کمک می کند، اینها تنها با ارتقاء OTA یا خرد کردن الگوریتم ها به دست نمی آیند.
البته لاف زدن کورکورانه و رقابت بر سر تعداد دوربین نیز آزاردهنده است.اگر سخت افزار فقط حد پایین تصویربرداری را تعیین کند، مجموعه ای از الگوریتم های عالی می توانند حد بالایی تصویربرداری را به میزان قابل توجهی افزایش دهند و حتی ارزش و ارزش سخت افزار قدیمی را دوباره بیان کنند.پتانسیل.
نمی دانم می توانیم چهار سال دیگر صبر کنیم یا نه.وقتی نسل بعدی آیفون SE عرضه شود، تک خواهد شددوربینآیا هنوز جایی در صنعت تلفن همراه دارید؟
زمان ارسال: مه-06-2020