Google, Auto Frame'ı Tanıttı: Sinir Ağı Fotoğraf Perspektifini Sonradan Değiştiriyor
Google/DeepMind
Google DeepMind
Google Research
Google, Google Fotoğraflar'da Auto Frame adlı yeni bir özellik başlattı. Bu özellik, makine öğrenimi modelleri ve üretken yapay zeka kullanarak fotoğraflar çekildikten sonra açılarını yeniden ayarlıyor. Sistem, 3 boyutlu bir sahneyi yeniden oluşturuyor, kamera pozunu ve odak uzaklığını ayarlıyor ve difüzyon iç boyama yoluyla gizli içeriği dolduruyor. Ayrıca portrelerdeki geniş açı bozulmasını otomatik olarak algılayıp düzeltiyor.
Google Research ve Google DeepMind, Google Fotoğraflar'da artık kullanıma sunulan Auto Frame özelliğini tanıttı. Bu özellik, fotoğrafları çekildikten sonra kamera perspektifini değiştirerek düzenliyor. Geleneksel kırpmadan farklı olarak, bir fotoğrafı 3B sahne olarak yorumluyor, orijinal odak uzaklığıyla birlikte piksel başına 3B nokta haritası tahmin ediyor, ardından klasik 3B işlemeyi kullanarak yeni bir kamera konumu ve iç parametreleri simüle ediyor. İşlenen görüntüde kaçınılmaz olarak, daha önce görünmeyen içeriklerin olması gereken yerlerde boşluklar oluşuyor; bu boşluklar, yeniden işlenmiş kaynak görüntüden hedef görünümü yeniden oluşturmayı öğrenen özel olarak eğitilmiş bir latent difüzyon modeli tarafından dolduruluyor. Portrelerde, makine öğrenimi modelleri yüzleri ve 3B yönelimlerini tespit ederek otomatik olarak en iyi çerçevelemeyi öneriyor ve sanal kamera iç parametrelerini ayarlayarak geniş açı bozulmasını düzeltiyor. Tamamen otomatik bu çözüm, Google Fotoğraflar'daki Auto Frame adayları içinde ikinci düzenleme seçeneği olarak sunuluyor.
Kaynak: Google Research —
orijinal
