გაქვთ შეკითხვა?დაგვირეკეთ:+86 13660586769

ბუნდოვანი ფოტოების გადაღებაც შესაძლებელია ერთ კადრში.როგორ აკეთებს ამას ახალი iPhone SE?

წყარო: Sina Technology Synthesis

ბუნდოვანი ფოტოგრაფიის მისაღწევად ერთი კამერის გამოყენება ახალი არაფერია, წინაiPhone XRდა ადრეცGoogle Pixel 2ჰქონდათ მსგავსი მცდელობები.

Apple-ის ახალი iPhone SE ასევე იგივეა, მაგრამ მისიკამერაელემენტი ძალიან ძველია, მთავარი კრედიტი ისევ ალგორითმშია.

1

▲ მარცხნიდან მარჯვნივ,კამერაახალი iPhone SE-ის სენსორები,iPhone 8დაiPhone XR

iFixit-ის დაშლის ანგარიშიდან ჩვენ ვხედავთ, რომ ახალი iPhone SE-ის ზოგიერთი ნაწილი სრულად შეესაბამებაiPhone 8, თუნდაც იმდენად, რამდენადაც მათი გამოყენება შესაძლებელია ურთიერთშენაცვლებით - 12 მეგაპიქსელიანი ფართო კუთხის ჩათვლითკამერა .

„ახალი ღვინის ძველ ბოთლებში“ პრაქტიკა უჩვეულო არ არის iPhone SE-სთვის.ოთხი წლის წინ, პირველი თაობის iPhone SE-მ ასევე გამოიყენა 5s-ის გარეგნობა და ტექნიკის უმეტესი ნაწილი, ასე რომ Apple-ს შეუძლია უფრო დაბალი ფასი მისცეს.

თეორიულად, იგივე კამერის აპარატურის კოპირებისას,კამერაორივეს მახასიათებლები არ უნდა იყოს ძალიან განსხვავებული.Მაგალითად,iPhone 8მხარს არ უჭერს ველის მცირე სიღრმის ფოტოების გადაღებას მკაფიო საგნით და ბუნდოვანი ფონით, რასაც ჩვენ ხშირად ვუწოდებთ „პორტრეტის რეჟიმს“.

2

მაგრამ როდესაც დააკვირდებით Apple-ის მხარდაჭერის გვერდს, ნახავთ, რომ პორტრეტის რეჟიმი არ არის მხარდაჭერილიiPhone 8მხარს უჭერს ახალი iPhone SE - მაშინაც კი, თუ ორივეს უკანა ლინზის სპეციფიკაციები ზუსტად იგივეა.

3

ნორმალურ პირობებში, ბუნდოვანი ფოტოების გადაღება მობილურ ტელეფონზე ხშირად საჭიროა ორმაგი კამერით - ისევე როგორც ადამიანის თვალით, მობილურ ტელეფონს ასევე სჭირდება ორი სურათის სხვადასხვა კუთხით გადაღება ორი ლინზის მეშვეობით სხვადასხვა პოზიციებზე და შემდეგ კუთხების გაერთიანება. ნახვა განსხვავება აფასებს ველის სიღრმეს, რათა მიაღწიოს ფონის დაბინდვას და შეინარჩუნოს საგანი ნათელი.

სიაში შემავალი Plus სერიები, ან ბოლო წლებში X, XS და 11, ძირითადად ეყრდნობა მრავალკამერიან სისტემებს პორტრეტების ბუნდოვანი გადაღების დასასრულებლად.

როგორ წყვეტს iPhone-ის წინა ერთჯერადი კამერა?ბირთვი დევს ინფრაწითელ წერტილოვანი მატრიცის პროექტორში Face ID სისტემაში, რომელსაც ასევე შეუძლია საკმარისად ზუსტი სიღრმის მონაცემების მიღება, რაც "დამხმარე ლინზების" ტოლფასია.

4

ამ თვალსაზრისით, iPhone SE-ს შეუძლია პორტრეტის რეჟიმში ფოტოების გადაღება ძალიან განსაკუთრებულია: პირველი, ის არ იღებს მრავალ კადრს, მეორე, მას არ აქვს Face ID, ძირითადად არ არსებობს ტექნიკის მხარდაჭერის შესაძლებლობა.

როგორც ჩანს, Apple-მა შეიტანა გარკვეული ცვლილებები, რომლებსაც პროგრამული უზრუნველყოფის დონეზე ვერ ვხედავთ.

ცოტა ხნის წინ, ბენ სანდოფსკიმ, მესამე მხარის კამერის აპლიკაციის Halide-ს შემქმნელმა, გამოავლინა ტექნიკური პრინციპები და განმარტა, თუ რატომ იყენებს ახალი iPhone SE იგივე ერთი ლინზის სპეციფიკაციებს, როგორცiPhone 8, მაგრამ მას შეუძლია მიაღწიოს პორტრეტის ფოტო რეჟიმს , რაც ამ უკანასკნელს არ შეუძლია .

მათ თქვეს, რომ ახალი iPhone SE, სავარაუდოდ, იქნება „პირველი iPhone, რომელსაც შეუძლია პორტრეტის დაბინდვის ეფექტის შექმნა მხოლოდ ერთი 2D სურათის გამოყენებით“.

შეიძლება ითქვას, რომiPhone XRასევე არ არის ერთკამერიანი ბუნდოვანი.SE უბრალოდ არ აკოპირებს მას?

თუმცა, დემონტაჟის ვითარებამ დაამტკიცა, რომკამერებიiPhone SE-ს დაiPhone XRარ არის თანმიმდევრული, რაც ასევე იწვევს განსხვავებას ორივეს ტექნიკურ განხორციელებაში.

5

Samsung Galaxy S7სერია არის პირველი მოწყობილობა, რომელიც იყენებს DPAF ტექნოლოგიას სმარტფონზეკამერა

ყველაზე მნიშვნელოვანი ის არის, რომკამერასაქართველოსiPhone XRშეუძლია გამოიყენოს ორმაგი პიქსელი ავტოფოკუსის (DPAF) ტექნოლოგია, რომელიც საშუალებას აძლევს მას მიიღოს გარკვეული სიღრმის მონაცემები ტექნიკის საფუძველზე.

მარტივი სიტყვებით, DPAF ტექნოლოგია უდრის პიქსელის გაყოფასკამერასენსორი ორ პატარა გვერდიგვერდ პიქსელად, რათა გადაიღოთ ორი ფოტო სხვადასხვა კუთხით, ისევე როგორც ჩვენი მარცხენა და მარჯვენა თვალები.

მიუხედავად იმისა, რომ ამით წარმოქმნილი კუთხის სხვაობა არც ისე აშკარაა, როგორც ორმაგიკამერა, ის მაინც ხელს უწყობს ალგორითმს სიღრმისეული მონაცემების გენერირებას.

6

Google Pixel 2, 3DPAF ტექნოლოგიის გამოყენებით მიღებული ორი უთანასწორობის რუკა რთულია შეუიარაღებელი თვალისთვის
აღიქვამს, მაგრამ მაინც შეუძლია დაეხმაროს გამოსახულების სეგმენტაციის ალგორითმს გადაწყვეტილების მიღებაში

ადრე,Googleასევე გამოიყენა ეს ტექნოლოგიაპიქსელი 2, 3ერთჯერადი დაბინდვის მისაღწევად.Ზეპიქსელი4, რადგან კამერა შეიცვალა მრავალკამერიანი სპეციფიკაციით, პარალაქსის გამოვლენა მნიშვნელოვნად უფრო ზუსტია, ვიდრე ერთი კამერა.

7

▲ მოდით გადავხედოთ Pixel 4-ის მიერ მიღებულ მონაცემებს ორი კამერის გამოყენებით.

რაც შეეხება ახალ iPhone SE-ს, რადგან მისი სენსორები ძალიან ძველია, ჰალიდი ამტკიცებს, რომ მას არ შეუძლია დაეყრდნოს სენსორებს უთანასწორობის რუქების მოსაპოვებლად და ძირითადად მხოლოდ A13 Bionic ჩიპის მიერ მოწოდებულ მანქანური სწავლის ალგორითმს შეუძლია სიღრმისეული მონაცემების სიმულაციისა და გენერირების მიზნით. რუკები.

ერთი წინადადების ახსნა არის ის, რომ iPhone SE პორტრეტის ბუნდოვანი გადაღება მთლიანად მიიღწევა პროგრამული უზრუნველყოფისა და ალგორითმებით.

8

▲ გადაიღეთ ეს ფოტო პირდაპირiPhone XRდა ახალი iPhone SE

ჰალიდემ გამოიყენაiPhone XRდა ახალი iPhone SE ლეკვის სურათის გადასაღებად (არა რეალური კადრი, უბრალოდ "ერთი ფოტოს" გადასაღებად), შემდეგ კი შეადარეს ორი სურათის სიღრმის მონაცემები.

მათ აღმოაჩინეს, რომiPhone XRუბრალოდ გააკეთეთ გამოსახულების მარტივი სეგმენტაცია, რათა ამოეღო მთავარი სხეული, მაგრამ სწორად ვერ ამოიცნო ლეკვის ყური.

9

▲ სიღრმის მონაცემთა გრაფიკი,iPhone XRმარცხნივ, ახალი iPhone SE მარჯვნივ

მაგრამ ახალ iPhone SE-ზე, A13 ჩიპის მიერ მოწოდებული ახალი ალგორითმით, მივიღეთ სიღრმის რუკა, რომელიც სრულიად განსხვავდებაXR.ის არა მხოლოდ სწორად ცნობს ლეკვის ყურებს და მთლიან მონახაზს, არამედ აკეთებს ფენოვან დამუშავებას სხვადასხვა ფონისთვის.

ასეთი სიღრმის რუკა არ არის 100% ზუსტი.ჰალიდემ თქვა, რომ ახალი iPhone SE-ის ამოჭრისა და დაბინდვის სიზუსტე სახის გარეშე ბუნდოვანი ფოტოების გადაღებისას ისეთი ზუსტი არ არის, როგორც პორტრეტების გადაღებისას.

განსაკუთრებით იმ შემთხვევაში, როდესაც ზოგიერთი სუბიექტი და ფონის სურათი ძალიან ბუნდოვანია, მრავალი კამერის უპირატესობა ამ დროს უფრო აშკარა იქნება.

10

▲ ამ ტიპის არასახის თემაში და თემა და ფონი მკაფიოდ არ არის გამიჯნული, ახალი iPhone SE-ის დაბინდვა
ადვილია შეცდომების დაშვება

როგორც ამ სურათიდან ხედავთ,iPhone 11 Proმრავალკამერიანი სისტემით აღჭურვილს შეუძლია არა მხოლოდ სრულად გამოკვეთოს ლოგინზე არსებული პატარა მცენარეები, არამედ შეუძლია ფონის მანძილის ამოცნობა და ფენოვანი დამუშავება.

11

▲ სიღრმის მონაცემთა გრაფიკი,iPhone 11 Proმარცხნივ, ახალი iPhone SE მარჯვნივ

ახალ iPhone SE-ზე, ფენოვანი დამუშავების იგივე შედეგების მიუხედავად, საგანი და ფონი მთლიანად შეერწყა ერთმანეთს.ბუნებრივია, დაბინდვის შემდგომი პროცესი, ბუნებრივია, ბევრად უარესი იქნება, ვიდრეiPhone 11 Pro.

12

▲ ფაქტობრივი ბუნდოვანი მტკიცებულებები,iPhone 11 Proმარცხნივ და ახალი iPhone SE მარჯვნივ

სწორედ ამიტომ, როდესაც ახალი iPhone SE იყენებს iOS-სკამერააპში, მხოლოდ ადამიანის სახის აღმოჩენის შემთხვევაში, „პორტრეტის რეჟიმის“ ჩართვა შესაძლებელია ბუნდოვანი ფოტოების გადასაღებად.სხვა შემთხვევებში, შეცდომა გამოჩნდება.

13

მიზეზი კვლავ Apple-ის ალგორითმს უკავშირდება.ჰალიდმა ახსენა ტექნიკა სახელწოდებით "Portrait Effects Matte" (Portrait Effects Matte), რომელიც ძირითადად გამოიყენება ადამიანების ზუსტი მონახაზის მოსაძებნად პორტრეტის რეჟიმში ფოტოებში, მათ შორის ისეთი დეტალები, როგორიცაა თმის ხაზი კიდეზე, სათვალეების ჩარჩო და ა.შ. საგანი და ფონი. სეგმენტირებულია.

მაგრამ ამჟამად, სეგმენტაციის ტექნოლოგიის ეს ნაკრები, რომელიც დაფუძნებულია მანქანურ სწავლაზე, უფრო მომზადებულია „ადამიანების გადასაღებად“, მას ნამდვილად შეუძლია შეავსოს პარალაქსის მონაცემების ნაკლებობა ერთეულზე.კამერატელეფონები, როგორიცააiPhone XRდა iPhone SE, მაგრამ თუ სუბიექტი ალგორითმი ასევე დაუშვებს განსჯის შეცდომას სხვა ობიექტებიდან სიმბოლოების შეცვლისას.

რაც შეეხება მრავალკამერიან ტელეფონებს, როგორიცააiPhone 11 Pro, შეგიძლიათ მიიღოთ პარალაქსის მონაცემები პირდაპირ მეშვეობითკამერააპარატურა, ასე რომ, მათ ასევე შეუძლიათ გამოიყენონ პორტრეტის რეჟიმი არასახის სცენებში საკუთარი გამოყენებისასკამერა.

14

▲ ახალი iPhone SE-ის წინა ლინზა ასევე მხარს უჭერს პორტრეტის რეჟიმს და სახის სიზუსტე ძალიან მაღალია,
და გამოსახულების განსხვავება მხოლოდ ბოკეს ეფექტშია

რა თქმა უნდა, მესამე მხარის დეველოპერებს მაინც შეუძლიათ გამოიყენონ ის, რაც ოფიციალურად არ არის მხარდაჭერილი.ახლა Halide აპს შეუძლია მხარდაჭერაiPhone XR, SE პატარა ცხოველების ან სხვა საგნების ბუნდოვანი სურათების გადასაღებად.ფაქტობრივად, ის ასევე იყენებს Apple-ის პორტრეტის ნიღბის ტექნოლოგიას სიღრმისეული რუქების მოსაპოვებლად და შემდეგ დასამატებლად საკუთარი უკანა ნაწილის ოპტიმიზაციის მისაღწევად.

15

▲ მესამე მხარის აპების გამოყენებით, როგორიცაა Halide, შეგიძლიათ გამოიყენოთ ახალი iPhone SE არასახის საგნების ბუნდოვანი ფოტოების გადასაღებად

ზოგადად, ამ ახალი iPhone SE-ის მიერ მიღწეული პორტრეტის დაბინდვა არის ზღვარი, რომლის მიღწევაც შესაძლებელია ერთკამერიანი ტელეფონების პროგრამული ოპტიმიზაციის გზით.მკაცრად რომ ვთქვათ, ეს არის A13 ჩიპის გამო.თუ მან არ მოიტანა მანქანათმცოდნეობის უახლესი ალგორითმი,კამერამარტო გამოცდილება, SE სროლის გამოცდილება აშკარად უნდა იყოს ნახევარი.

ამიტომ, სმარტფონებისთვის ჯერ კიდევ მნიშვნელოვანია მრავალკამერიანი სისტემების განვითარება.ჩვენ შეგვიძლია გამოვიყენოთ ულტრა ფართო კუთხე ხედვის ველის გასაფართოვებლად, ხოლო ტელეფოტოლინზას დავეყრდნობით არა-დესტრუქციული მასშტაბირების ფოტოების მისაღებად.გაფართოებული რეალობის გამოვლენის დახმარება, ეს მიიღწევა არა მხოლოდ OTA განახლებით, ან ალგორითმების დამუშავებით.

16

რა თქმა უნდა, მაღიზიანებს ბრმად ტრაბახი და კამერების რაოდენობის შეჯიბრი.თუ აპარატურა განსაზღვრავს მხოლოდ გამოსახულების ქვედა ზღვარს, მაშინ შესანიშნავი ალგორითმების ერთობლიობა მნიშვნელოვნად ამაღლებს გამოსახულების ზედა ზღვარს და კიდევ ერთხელ გამოხატავს ძველი ტექნიკის მნიშვნელობას და ღირებულებას.პოტენციალი.

არ ვიცი, შეგვიძლია თუ არა კიდევ ოთხი წლის ლოდინი.როდესაც iPhone SE-ის შემდეგი თაობა გამოვა, იქნება მარტოკამერაკიდევ გაქვთ ადგილი მობილური ტელეფონების ინდუსტრიაში?


გამოქვეყნების დრო: მაისი-06-2020