Carnegie Mellon Üniversitesi araştırmacıları tarafından geliştirilen kamera sistemi, ses titreşimlerini o kadar hassas ve ayrıntılı bir formda algılayabiliyor ki bir orkestra yahut kümede tek bir enstrümanın müziğini tekrar oluşturabiliyor.
Düşük maliyetli
Sistem iki kamera ve bir lazerden oluşuyor. Araştırmacılar, oluşturdukları sistemin insan gözünün göremediği, yüksek süratli ve düşük genlikli yüzey titreşimlerini algılayabildiğini belirtiyor. Sistemde evvelki araştırmalarda kullanılan yüksek süratli kameralar yerine daha uygun fiyatlı kameralar tercih edilmiş. CMU Robotik Enstitüsü profesörü, optik mikrofonu çok daha pratik ve kullanılabilir hale getirdiklerini, bunu da düşük maliyetle başardıklarını söylüyor.
Kamera sistemi nasıl çalışıyor?
Algoritma, rolling shutter ve global shutter ile yakalanan nokta desenleri karşılaştırıyor. Desenler ortasındaki farkları kullanarak titreşimleri hesaplıyor ve sesi yine oluşturuyor. Muhtemelen lazer ile oluşturulan nokta desen, sert bir yüzeye yansıdıktan sonra alandaki uygun ışığın hareketini tabir ediyor. Bu hareket yüzey titreştikçe değişiyor. Sarmal deklanşör manzarayı bir uçtan öbür uca süratle tararken, küresel deklanşör birebir anda tüm manzarayı yakalıyor.
Ödül aldı
Bilgisayarlı görü konusunda önde gelen konferanslardan CVPR’de ödül alan sisteme ait araştırmada yer alan isimlerden O’Toole, bu sistemin bilgisayarlı görü ile yapılabileceklerin sonlarını zorladığını belirtiyor.
Nerelerde kullanılabilir?
Bilgisayarlı görü alanındaki birçok çalışma, alandaki objeleri tanımak yahut takip etmek için eğitim sistemlerine odaklanıyor. Bu çalışma sistemlerin algılanamayan, yüksek frekanslı titreşimleri daha düzgün görmesini sağlaması açısından bilgisayarlı görü için yeni uygulamaların yolunu açıyor.
Ekibin çift deklanşörlü optik titreşim algılama sistemi, ses mühendislerinin düzenleme evresinde istedikleri enstrümana odaklanmalarını kolaylaştıracak. Yahut üreticiler, bu sistemle fabrikadaki makinelerden gelen titreşimleri izleyerek sorunu daha rahat tespit edebilecek. Bu teknolojinin uygulanabileceği birçok alan var.
