@gamsizm #StarWars

#bilim #teknoloji

Görsel Mikrofon, Sessiz Videolardaki Ortam Sesini “Duyabiliyor”

“Mary’nin Küçük Bir Kuzusu Vardı” şarkısı, bir kez daha işitsel tarih yazdı. Thomas Edison’un alüminyum folyo fonografına söyleyerek ilk ses kaydını gerçekleştirmesinden 130 küsur yıl sonra, Massachusetts Teknoloji Enstitüsü (MIT), Microsoft ve Adobe araştırmacıları tarafından aynı şarkı, dünyanın ilk “görsel mikrofon”u ünvanına sahip olan boş bir patates cipsi paketi tarafından kaydedildi. Geliştirilen algoritma, görsel mikrofon olarak kullanılan nesnenin hareketine bakarak ses yakalayabiliyor. Işıktan ses çıkarmak aslında tam olarak yeni bir şey değil. Lazer mikrofonlar yıllardır var. Buradaki fark ise görsel mikrofonun bütünüyle pasif bir cihaz olması; lazer ya da özel bir aydınlatma gerekmiyor.

0
Sevkan UzelYıldız Teknik Üniversitesi –
Editör / YazarBütün Yazılarını GörTakip Et
“Mary’nin Küçük Bir Kuzusu Vardı” şarkısı, bir kez daha işitsel tarih yazdı. Thomas Edison’un alüminyum folyo fonografına söyleyerek ilk ses kaydını gerçekleştirmesinden 130 küsur yıl sonra, Massachusetts Teknoloji Enstitüsü (MIT), Microsoft ve Adobe araştırmacıları tarafından aynı şarkı, dünyanın ilk “görsel mikrofon”u ünvanına sahip olan boş bir patates cipsi paketi tarafından kaydedildi. Geliştirilen algoritma, görsel mikrofon olarak kullanılan nesnenin hareketine bakarak ses yakalayabiliyor. Işıktan ses çıkarmak aslında tam olarak yeni bir şey değil. Lazer mikrofonlar yıllardır var. Buradaki fark ise görsel mikrofonun bütünüyle pasif bir cihaz olması; lazer ya da özel bir aydınlatma gerekmiyor.

İşitmemizi sağlayan duyu organlarımız olan kulaklar, çevredeki seslerin kulak zarı üzerinde yarattığı titreşimlerin beyin tarafından yorumlanmasına bağlı olarak çalışır. Konser alanları gibi yüksek seslerin çalındığı ortamlarda, kulak zarımızın ötesinde, şarkıların bas seslerinin titreşimini göğsümüzde de hissederiz. Benzer biçimde, ortamda çalan bir şarkı da cips paketi gibi ince ve hafif bir nesnede küçük (bir mikrometrenin onda biri civarı ölçekte) titreşimlere neden olur. Böylesine küçük titreşimleri gözümüz fark edemese de, MIT ekibinin ses geçirmez camın ardına yerleştirdiği yüksek-hızlı kamera fark edebiliyordu. Araştırmacılar sadece poşetin küçük titreyişlerini çözümleyerek, ortamda çalan şarkının bütününü yeniden üretmeyi başardıklarını ilk olarak 2014 yılının Ağustos ayında duyurdu. MIT tarafından yapılan açıklamada, ses geçirmez bir camın ardında, kameradan 4,5 m uzaklıkta bulunan bir cips paketinin titreşimlerinin analiz edilmesi sonucunda, ortam seslerinin yeniden yaratılabildiği açıklandı.

Çalışma büyük ölçüde yüksek hızlı kameralar ile gerçekleştirildi. Bu tür cihazlar oldukça pahalı ama ekip herkesin elinde bulunabilen daha düşük hızlı kameralar kullanılarak da, biraz daha düşük kalitede olsa da aynı işlemin yapılabileceğini gösterdi. Bunu yapmak için günümüzde kullanılan CMOS görüntüleyici bazlı kameraların çoğundaki “döner perde”den (İng. rolling shutter) yararlanılıyor. Döner perde CMOS sensörleri, her seferinde bir satırlık görüntü yakalıyor. Her bir satır, yüksek hızlı kameranın karelerine yapılana benzer şekilde işlenebiliyor. Kamera herhangi bir şey kaydetmiyorken kareler arası boşluklar oluyor ama düşük çözünürlükte de olsa, ortam sesi çıkarılabiliyor.

Her Nesne Mikrofon Görevi Görebilir mi?
“Normal mikrofonlar, içlerindeki bir diyaframın hareketini elektriksel sinyale dönüştürerek çalışır. Bu diyafram sesle hemen hareket edecek şekilde tasarlanmıştır, böylece hareketi kaydedilebilir ve ses olarak yorumlanabilir,” diye açıklıyor Davis ve görsel mikrofonun, dünyayı veri bakımından daha zengin bir yer hâline getirdiğini belirtiyor. “Videonun, orada olduğundan haberimizin olmadığı tüm o enformasyonu içerdiğini göstermiş olduk. Bu, dünyayı görüntüleyebilme biçimimize yeni bir boyut getiriyor,” diyor. Yani yüksek hızlı kameralar kullanarak, gündelik yaşamda kullanılan nesneler üzerinde ortam sesleri nedeniyle oluşan titreşimleri kaydetmek ve daha sonra sesleri yeniden yaratmak olanaklı; dolayısıyla titreşen herhangi bir nesne mikrofona dönüşebilir. Alüminyum folyo, bitki yaprağı ve su yüzeyi gibi titreşmeye müsait her türlü nesne sayesinde bu işlem yapılabiliyor. Örneğin, konuşan birinin ne dediğini duyamıyorsunuz ama yanında duran saksıdaki çiçeğin yapraklarının titreşimlerini videoya alabiliyorsanız, kişinin konuştuklarını bu yöntem sayesinde ortaya çıkarabilirsiniz. Araştırmacıların verdiği bir örnekte, ekip bir kulaklığı filme alıp çalan şarkıyı yeniden yaratmayı denediğinde, ortaya çıkardıkları ses verisi, Shazam uygulamasının şarkıyı tanımlamasına yetecek netlikteydi.

https://bilimfili.com/gorsel-mikrofon-sessiz-videolardaki-ortam-sesini-duyabiliyor/

Yerli ve Milli

#raytracing #rtx #nvidia Adamlar kesenin ağzını açmış belli ki (!) https://youtu.be/tu7pxJXBBn8

Xiaomi Mi 8 kullanan var mı? Ekrandan memnun mu, varsa? Parlaklık açısından özellikle. Meizu 16 ilgimi çekmişti ama ekranı 430 nit civarındaymış.

#raytracing #rtx #nvidia https://youtu.be/NeCPvQcKr5Q

#raytracing #nvidia #rtx https://youtu.be/__ccxzh4G4s

#nvidia #rtx #raytracing https://youtu.be/z9aTb_X3Baw

Küresel bir markanın Türkiye Genel Merkezinden aldığım haberi paylaşayım dedim. Gıda sektöründeki bir başka tanıdık benzer zammı doğruladı.

1 Eylül itibariyle bizim sektörlerde (ev temizlik, kişisel bakım, sigara, alkol, vs..) çok ciddi zam geliyor, 40% düşünün yaklaşık.

Bence 1 Eylül öncesinde alabildiğinizi alın derim.

Kim bu adam diyenler yazdığım (tek) blog yazısına bakabilir. Kafalar güzel herhalde.