Yenilikçilik

Yeni Algoritma, Net Renkli Resimler için Su Altı Bozulmalarını Gideriyor

Yeni Algoritma, Net Renkli Resimler için Su Altı Bozulmalarını Gideriyor



We are searching data for your request:

Forums and discussions:
Manuals and reference books:
Data from registers:
Wait the end of the search in all databases.
Upon completion, a link will appear to access the found materials.

Hiç sadece yeşil ve mavi tonlarında çıkması için bir su altı fotoğrafı çektiniz mi? Bunun nedeni, ışığın suda farklı davranmasıdır.

Kişisel fotoğraflar çekerken sadece bir serseri olsa da, fenomen aslında deniz yaşamının doğru fotoğraflarını çekememenin temel ilerlemeyi engellediği bilim camiasında daha büyük bir meseledir. Oşinograf ve mühendis Derya Akkaynak ve Hayfa Üniversitesi'nden mühendis Tali Treibitz, tüm bunları çözebilecek yeni bir yapay zeka algoritması yarattı.

#Ocean susuz nasıl görünüyor? Sualtı resimlerinizden suyu gideren Sea-thru algoritmasına buradan göz atın: https://t.co/bHJq73gWVF#CVPRpic.twitter.com/VAWubfSPsQ

- Derya Akkaynak (@dakkaynak) 14 Haziran 2019

Suyu çıkarmak

Algoritmanın ne yaptığını açıklamanın en iyi yolu, suyu uzaklaştırdığını söylemektir. Bunun nedeni, fotoğrafların kuru karada çekilmiş gibi su altında çekilmesine izin vermesidir.

Araştırmacılar yeni sistemlerine Sea-thru adını verdiler ve bu sıra dışı bir şey değil. Resimleri yapay olarak düzelten photoshop'tan farklı olarak, Sea-thru gerçek zamanlı fiziksel olarak doğru bir düzeltmedir.

Araştırmacıların çalışmasında paylaşılan bu görüntü, algoritmanın gerçekten neler başarabileceğini gösteriyor:

Gerçek renkleri elde etmek

İLGİLİ: NVIDIA AI HERKESDEN SANATÇI YAPAR

Algoritma, deniz yaşamı bilim camiasını heyecanlandırdı. California Bilimler Akademisi'nde mercan biyoloğu olan Pim Bongaerts, "Bu yaklaşımın sevdiğim yanı, gerçekten gerçek renkleri elde etmekle ilgili olması" dedi.Bilimsel amerikalı. "Gerçek rengi elde etmek, mevcut veri kümelerimizden çok daha fazla değer elde etmemize gerçekten yardımcı olabilir."

IE, Akkaynak ile çalışmaları hakkında röportaj yapma fırsatı buldu.

IE: Algoritmayı icat etmeye nasıl başladınız?
Akkaynak: Hayfa Üniversitesi, Deniz Görüntüleme Laboratuvarı'ndaki doktora sonrası bursum sırasında, üç yıllık teorik ve deneysel çalışmanın sonucunda Sea-thru algoritmasını geliştirdim. Dijital kameralar (su altı muhafazaları ile birlikte) sadece 1990'ların başından beri ticari olarak mevcuttu, bu nedenle o zamandan beri su altı görüntülerinde renkleri sürekli olarak düzeltmek, alanımızda zorlu ve açık bir problemdi. 2015 yılında Hayfa Üniversitesi'ne ilk katıldığımda üzerinde çalışmaya başladığım sorun buydu.

Zamanla, sağlam ve tutarlı bir renk düzeltme algoritmasının eksikliğinin nedenleri netleşti - araştırmacılar, su altı fotoğraflarındaki renkleri düzeltmek için kamera sensöründe bir görüntü oluşturmak için ışığın atmosferde nasıl hareket ettiğini açıklayan bir denklem kullanıyorlardı. Suyun altında ışığa ne olduğu, havada olandan çok farklıdır. Özellikle okyanus için (daha fazla) fiziksel olarak doğru bir denklem formüle ettiğimi ve bu denklemin Sea-thru algoritmasına yol açan gerçek buluş olduğunu keşfettiğimde. Bu denklem, Sea-thru algoritmasının mevcut algoritmalardan daha iyi çalışmasının ve gördüğünüz çarpıcı düzeltmeleri (algoritmik olarak) üretebilmesinin nedenidir.

IE: Algoritma nasıl çalışır?
Akkaynak: İhtiyaç duyduğu standart olmayan tek bilgi parçası bir "mesafe haritası" dır.
bize sahnedeki her nesnenin kameradan uzaklığını söyler. Bunun dışında doğal ışık altında alınan ham RGB görüntüler üzerinde çalışır. Görsellerde renk kartelasına ihtiyaç duymaz. Bu bir AI algoritması değildir - yani sinir ağları veya ilgili eğitim de yoktur.

Bir mesafe haritası elde etmenin farklı yolları vardır. Sahnenin birden fazla görüntüsünü kullanarak tahmin ediyoruz. Ayrıca bir stereo kamera kurulumu kullanabilir ve birden fazla görüntüye gerek kalmadan tek bir görüntü çiftinden mesafe elde edebilirsiniz. Algoritma mesafeye sahip olduğunda, yukarıda bahsettiğim denkleme dayalı olarak "sisi" ortadan kaldırmak ve renkleri geri yüklemek için gerekli tüm parametreleri tahmin eder.

IE: Algoritma için hangi uygulamaları öngörüyorsunuz?
Akkaynak: Sea-thru halihazırda video üzerinde çalışıyor, bu çok güzel, çünkü video kareleri doğası gereği aynı sahnenin birden fazla görüntüsü olduğu için birden fazla görüntü ihtiyacını ortadan kaldırıyor. Ayrıca, yapay ışık taşıma ihtiyacını ortadan kaldırır, bu da birçok fotoğrafçı için daha az masraf ve daha az malzeme taşımak anlamına gelir.

Ancak deniz bilimcileri tarafından çekilen analiz görüntülerinin ve videolarının otomasyonu, büyük bir değer katacak. Bu görüntüler (ör. Resif, deniz tabanı, balık stokları vb. Anketler) Sea-thru ile önceden işlendiğinde, bilim adamları daha sonra sayma, tanımlama, bölümleme ve sınıflandırma yapabilmek için güçlü bilgisayarla görme ve makine öğrenimi yöntemlerini kullanabilecekler. hayvanlar ve içlerindeki diğer nesneler. Şu anda çok miktarda görüntü alıyoruz, ancak analizlerin çoğu manuel olarak yapılıyor, bu da yorucu, yavaş ve pahalı.

Şu anda Sea-thru yalnızca doğal ışık altında çekilen görüntülerde çalışıyor, ancak bunu yapay ışık durumunda genişleteceğiz çünkü okyanusun çoğu bu şekilde keşfediliyor. Ve tabii ki, bunu Photoshop'ta tüketici kameralarına ve hatta dalış maskelerine entegre edilmiş bir modül olarak görüyorum. Sadece zaman meselesi!


Videoyu izle: PostgreSQL Sohbetleri 15: PostgreSQLde WAL kavramı ileri seviye (Ağustos 2022).