Yeni ve İyileştirilmiş Kamera İnsan Gözünden İlham Aldı
Maryland Üniversitesi’nden bilgisayar bilimcilerinin liderliğindeki bir ekip, robotların çevrelerini daha iyi görüp tepki vermesini sağlayan yeni bir kamera mekanizması icat etti. İnsan gözünün çalışma prensibinden esinlenerek geliştirilen bu yenilikçi kamera sistemi, gözün net ve sabit bir görüş sağlamak için yaptığı küçük istemsiz hareketleri taklit ediyor. “Artificial Microsaccade-Enhanced Event Camera” (AMI-EV) olarak adlandırılan kameranın prototip ve test çalışmaları, 2024 Mayıs ayında Science Robotics dergisinde yayımlandı.
Hareketli Nesneleri Net Yakalama Sorunu Çözüldü
Çalışmanın baş yazarı ve Maryland Üniversitesi doktora öğrencisi Botao He, “Event kameralar, hareketli nesneleri izleme konusunda geleneksel kameralardan daha iyi ancak çok fazla hareket olduğunda net ve bulanıksız görüntüler yakalamakta zorlanıyorlar,” dedi. “Bu büyük bir sorun çünkü robotlar ve otonom araçlar gibi birçok teknoloji, çevreye doğru tepki verebilmek için doğru ve zamanında görüntülere ihtiyaç duyar.”
He’nin ekibi, bu sorunu insan ve hayvanların odaklanmak için yaptığı küçük ve hızlı göz hareketlerinden ilham alarak çözdü. İnsan gözü, bu küçük hareketlerle bir nesneye ve onun görsel dokularına (renk, derinlik ve gölgeleme gibi) doğru şekilde odaklanabiliyor.
İnsan Gözünün Hareketleri Kamerada Taklit Edildi
Ekip, bu küçük hareketleri AMI-EV içine yerleştirilen döner bir prizma ile taklit etti. Prizmanın sürekli dönen hareketi, insan gözünde doğal olarak meydana gelen hareketleri simüle ederek kameranın kaydedilen nesnenin dokularını stabilize etmesini sağladı. Ayrıca, prizmanın hareketini telafi etmek ve stabil görüntüler elde etmek için yazılım geliştirdiler.
Maryland Üniversitesi Bilgisayar Bilimleri profesörü ve araştırmanın ortak yazarı Yiannis Aloimonos, ekibin buluşunu robotik görme alanında büyük bir ilerleme olarak görüyor. “Gözlerimiz çevremizin resimlerini çeker ve bu resimler beynimize gönderilir, burada görüntüler analiz edilir. Algılama bu süreçle gerçekleşir ve dünyayı bu şekilde anlarız,” dedi.
Geniş Uygulama Alanları
Araştırmacılar, buluşlarının robotik ve ulusal savunmanın ötesinde de önemli etkileri olabileceğini düşünüyor. Doğru görüntü yakalama ve şekil tespiti gerektiren endüstrilerde çalışan bilim insanları, kameralarını sürekli olarak iyileştirmenin yollarını arıyorlar ve AMI-EV birçok sorunlarına çözüm sunabilir.
Araştırma bilimcisi ve makalenin kıdemli yazarı Cornelia Fermüller, “Event sensörler ve AMI-EV, üstün performansları, düşük gecikme süresi ve düşük güç tüketimi gibi özellikleriyle akıllı giyilebilir teknolojilerde ön plana çıkacak,” dedi. Bu özellikler, örneğin sanal gerçeklik uygulamaları için ideal olup, sorunsuz bir deneyim ve baş ve vücut hareketlerinin hızlı hesaplamaları gerektirir.
İlk testlerde, AMI-EV, insan nabzı tespiti ve hızlı hareket eden şekillerin tanımlanması gibi çeşitli bağlamlarda hareketi doğru bir şekilde yakalayıp gösterebildi. AMI-EV, saniyede on binlerce kare yakalayarak, çoğu ticari kameranın sunduğu 30 ila 1000 kare/saniye performansını geride bıraktı. Bu daha akıcı ve gerçekçi hareket tasviri, artırılmış gerçeklik deneyimlerinden daha iyi güvenlik izlemeye kadar birçok alanda önemli olabilir.
Aloimonos, “Yeni kamera sistemimiz, otonom bir aracın yolda neyin insan olup olmadığını anlamasına yardımcı olmak gibi birçok spesifik sorunu çözebilir,” dedi. “Sonuç olarak, otonom sürüş sistemleri veya akıllı telefon kameraları gibi genel kamuoyunun zaten etkileşimde bulunduğu birçok uygulamaya sahip. Yeni kamera sistemimizin, daha gelişmiş ve yetenekli sistemlerin yolunu açtığına inanıyoruz.”
