Kaynak: Sina Teknoloji Sentezi
Bulanık fotoğraf elde etmek için tek bir kameranın kullanılması yeni bir şey değil, öncekiiPhone XRve daha erkenGoogle Piksel 2benzer girişimleri oldu.
Apple'ın yeni iPhone SE'si de aynı, ancakkameraeleman çok eski, ana kredi hala algoritmada.
iFixit'in demontaj raporundan, yeni iPhone SE'deki bazı parçaların tamamen uyumlu olduğunu görebiliyoruz.iPhone 812 megapiksel geniş açı dahil, birbirlerinin yerine kullanılabildikleri ölçüde bilekamera .
'Eski şişelerde yeni şarap' uygulaması iPhone SE için alışılmadık bir durum değil.Dört yıl öncesine kadar ilk nesil iPhone SE'de de 5'lerin görünümü ve donanımın çoğu uygulanmış, bu nedenle Apple daha düşük bir fiyat verebilir.
Teorik olarak, aynı kamera donanımını kopyalarken,kameraikisinin özellikleri çok farklı olmamalıdır.Örneğin,iPhone 8genellikle "portre modu" dediğimiz, net bir konu ve bulanık bir arka plan ile küçük alan derinliği fotoğrafları çekmeyi desteklemez.
Ancak Apple'ın destek sayfasına baktığınızda, Apple tarafından desteklenmeyen portre modunun olduğunu göreceksiniz.iPhone 8Arka lens özellikleri tamamen aynı olsa bile yeni iPhone SE tarafından destekleniyor.
Normal şartlar altında, bir cep telefonunda bulanık fotoğraflar çekmenin genellikle çift kamera ile yapılması gerekir - tıpkı insan gözü gibi, cep telefonunun da farklı konumlardaki iki lens aracılığıyla farklı açılarda iki görüntü elde etmesi ve ardından açıları birleştirmesi gerekir. görünüm Fark, arka plan bulanıklığını elde etmek ve konuyu net tutmak için alan derinliğini tahmin eder.
Listedeki Plus serisi veya son yıllarda X, XS ve 11, portre bulanıklığını tamamlamak için temel olarak çoklu kamera sistemlerine güveniyor.
Peki iPhone'un ön tek kamerası nasıl çözüyor?Çekirdek, aynı zamanda bir 'yardımcı lens'e eşdeğer, yeterince doğru derinlik verisi elde edebilen Face ID sistemindeki kızılötesi nokta matrisli projektörde yatmaktadır.
Bu açıdan bakıldığında iPhone SE'nin portre modunda fotoğraf çekebilmesi çok özel: birincisi, birden fazla çekim yapmıyor, ikincisi, Face ID'si yok, temelde donanım desteği imkanı yok.
Görünüşe göre Apple, yazılım düzeyinde göremediğimiz bazı değişiklikler yapmış.
Son zamanlarda, üçüncü taraf kamera uygulaması Halide'nin geliştiricisi Ben Sandofsky, yeni iPhone SE'nin neden aynı tek lens özelliklerini kullandığını açıklayarak teknik ilkeleri açıkladı.iPhone 8, ancak ikincisinin yapamayacağı portre fotoğraf modunu elde edebilir .
Yeni iPhone SE'nin muhtemelen 'yalnızca tek bir 2D görüntü kullanarak portre bulanıklığı efekti oluşturabilen ilk iPhone' olacağını söylediler.
diyebilirsin kiiPhone XRayrıca tek kameralı bir bulanıklık değildir.SE sadece kopyalamıyor mu?
Ancak, söküm durumu kanıtlamıştır ki,kameralariPhone SE'nin veiPhone XRtutarlı değildir, bu da ikisinin teknik uygulamasında farklılıklara yol açar.
▲Samsung Galaxy S7serisi, akıllı telefonda DPAF teknolojisini kullanan ilk cihazdır.kamera
En önemli nokta ise,kameraarasındaiPhone XRdonanıma dayalı olarak belirli derinlik verilerini elde etmesini sağlayan çift pikselli otomatik odaklama (DPAF) teknolojisini kullanabilir.
Basit bir ifadeyle, DPAF teknolojisi, pikseli kareye bölmekle eşdeğerdir.kamerasol ve sağ gözlerimiz gibi farklı açılarla iki fotoğraf çekmek için iki küçük yan yana piksele dönüştürün.
Bunun ürettiği açı farkı ikilininki kadar açık olmasa dakamera, derinlik verileri oluşturmak için algoritmaya hala elverişlidir.
▲Google Piksel 2, 3DPAF teknolojisi kullanılarak elde edilen iki eşitsizlik haritasını çıplak gözle görmek zordur.
algılayabilir, ancak yine de görüntü segmentasyon algoritmasının karar vermesine yardımcı olabilir.
Önceden,Googlebu teknolojiyi de kullandıPiksel 2, 3tek çekim bulanıklık elde etmek için.Üzerindepiksel4, kameranın yerini çoklu kamera özelliği aldığından, paralaks algılama tek kameradan önemli ölçüde daha doğrudur.
▲ Pixel 4'ün iki kamera kullanarak elde ettiği verilere bir göz atalım.
Yeni iPhone SE'ye gelince, sensörleri çok eski olduğu için Halide, eşitsizlik haritaları elde etmek için sensörlere güvenemeyeceğini ve temel olarak derinlik verilerini simüle etmek ve oluşturmak için yalnızca A13 Bionic çip tarafından sağlanan makine öğrenme algoritmasına güvenebileceğini iddia ediyor. haritalar.
Bir cümlelik açıklama, iPhone SE portre bulanıklaştırma çekiminin tamamen yazılım ve algoritmalar tarafından gerçekleştirildiğidir.
▲ Bu fotoğrafı doğrudaniPhone XRve yeni iPhone SE
Halide kullandıiPhone XRve yeni iPhone SE'yi köpek yavrusunun fotoğrafını çekmek için (gerçek bir çekim değil, sadece 'tek bir fotoğrafın' fotoğrafını çekmek için) ve ardından iki fotoğrafın derinlik verilerini karşılaştırdı.
buldular kiiPhone XRsadece ana gövdeyi çıkarmak için basit bir görüntü segmentasyonu yaptı, ancak köpeğin kulağını doğru şekilde tanımadı.
▲ Derinlik veri grafiği,iPhone XRsolda, sağda yeni iPhone SE
Ancak yeni iPhone SE'de, A13 çipinin sağladığı yeni algoritmayla, öncekinden tamamen farklı bir derinlik haritası elde ettik.XR.Yalnızca köpeğin kulaklarını ve genel hatlarını doğru şekilde tanımakla kalmaz, aynı zamanda farklı arka planlar için katmanlı işlemler de yapar.
Bu tür bir derinlik haritası %100 doğru değildir.Halide, yeni iPhone SE'nin yüzü olmayan bulanık fotoğraflar çekerken yaptığı kesme ve bulanıklaştırma doğruluğunun portre çekerkenki kadar doğru olmadığını söyledi.
Özellikle bazı konuların ve arka plan görüntülerinin çok bulanık olduğu durumlarda, bu sefer birden fazla kameranın avantajı daha belirgin olacaktır.
▲ Bu tür yüzsüz temada ve konu ile arka plan net bir şekilde ayrılmamıştır, yeni iPhone SE'nin bulanıklığı
hata yapmak kolaydır
Bu resimden de görebileceğiniz gibi,iPhone 11 Probir çoklu kamera sistemi ile donatılmış, sadece kütük üzerindeki küçük bitkileri tamamen özetlemekle kalmaz, aynı zamanda arka planın mesafesini tanıyabilir ve katmanlı işleme yapabilir.
▲ Derinlik veri grafiği,iPhone 11 Prosolda, sağda yeni iPhone SE
Yeni iPhone SE'de, aynı katmanlı işleme sonuçlarına rağmen, konu ve arka plan tamamen kaynaşmıştır.Doğal olarak, bulanıklaştırma sonrası süreç doğal olarak öncekinden çok daha kötü olacaktır.iPhone 11 Pro.
▲ Asıl bulanık ispatlar,iPhone 11 Prosolda ve yeni iPhone SE sağda
Bu nedenle, yeni iPhone SE, iOS'un kendikamerauygulamasında, yalnızca bir insan yüzü algılandığında, bulanık fotoğraflar çekmek için "Portre Modu" etkinleştirilebilir.Diğer durumlarda, bir hata görünecektir.
Nedeni hala Apple'ın algoritmasıyla ilgili.Halide, 'Portre Efektleri Mat' (Portre Efektleri Mat) adlı bir teknikten bahsetti ve bu teknik, esas olarak portre modundaki fotoğraflarda, kenardaki saç çizgisi, gözlük çerçevesi vb. gibi ayrıntılar da dahil olmak üzere, insanların kesin hatlarını bulmak için kullanılır. Konu ve arka plan segmentlere ayrılır.
Ancak şu anda, makine öğrenimine dayalı bu segmentasyon teknolojisi seti, "insanları vurmak" için daha hazırlıklıdır, gerçekten de tek tek üzerinde paralaks verisi eksikliğini telafi edebilir.kameragibi telefonlariPhone XRve iPhone SE, ancak özne, diğer nesnelerden karakterleri değiştirirken de algoritma bir karar hatası yapacaktır.
Gibi çok kameralı telefonlara gelinceiPhone 11 Pro, paralaks verilerini doğrudankameradonanım, böylece kendi portrelerini kullanırken yüz olmayan sahnelerde portre modunu da kullanabilirler.kamera.
▲ Yeni iPhone SE'nin ön lensi de portre modunu destekliyor ve yüzün hassasiyeti çok yüksek,
ve görüntüleme farkı sadece bokeh etkisindedir
Elbette üçüncü taraf geliştiriciler, resmi olarak desteklenmeyen şeyleri kullanmaya devam edebilir.Halide uygulaması artıkiPhone XR, SE, küçük hayvanların veya diğer nesnelerin bulanık resimlerini çekmek için.Aslında, derinlik haritaları elde etmek için Apple'ın portre maskesi teknolojisini kullanır ve ardından elde etmek için kendi arka uç optimizasyonunu ekler.
▲ Halide gibi üçüncü taraf uygulamaları kullanarak, yüzü olmayan nesnelerin bulanık fotoğraflarını çekmek için yeni iPhone SE'yi kullanabilirsiniz.
Genel olarak, bu yeni iPhone SE tarafından elde edilen portre bulanıklığı, tek kameralı telefonlar için yazılım optimizasyonu ile elde edilebilecek sınırdır.Açıkçası, bu aslında A13 çipinden kaynaklanıyor.En son makine öğrenme algoritmasını getirmediyse,kameraTek başına deneyim, SE çekim deneyiminin kesinlikle yarım olması gerekiyor.
Bu nedenle akıllı telefonların çoklu kamera sistemleri geliştirmesi hala anlamlı.Görüş alanını genişletmek için ultra geniş açı kullanabiliriz ve tahribatsız yakınlaştırma fotoğrafları elde etmek için telefoto lense güvenebiliriz.Artırılmış gerçeklik algılama yardımı, bunlar yalnızca bir OTA yükseltmesiyle veya algoritmaların öğütülmesiyle elde edilmez.
Tabii ki, körü körüne övünmek ve kamera sayısı için rekabet etmek de can sıkıcı.Donanım yalnızca görüntülemenin alt sınırını belirlerse, bir dizi mükemmel algoritma, görüntülemenin üst sınırını önemli ölçüde yükseltebilir ve hatta eski donanımın değerini ve değerini yeniden ifade edebilir.potansiyel.
Dört yıl daha bekleyebilir miyiz bilmiyorum.Yeni nesil iPhone SE çıktığında, tek olacakkameraa hala cep telefonu sektöründe yeriniz var mı?
Gönderim zamanı: Mayıs-06-2020