HERMES, insan davranı?larını analiz etmek amac?yla olu?turulmu? yeni bilgisayarl? görü sistemidir.
Sistem, insan davranı?larını tanımlamak ve anlatılan hareketlerden bu davranı?ları tahmin etmek amac?yla doşal dili (insan dilini) kullanır.
UAB’nin (Universitat Autònoma de Barcelona- Autonomous University of Barcelona) CVC (Computer Vision Centre) birimi tarafından koordine edilen bir Avrupal? ara?tırmac?lar toplulu?u HERMES’i geliştiriyor. HERMES, video kameralar ve insan davranı?larını tanıyan ve tahmin eden, bunun yanı sıra bunları insan dilinde tanımlayabilen bir yaz?l?mdan oluşan, bilişsel bir sistem.
HERMES (Human Expressive Graphic Representation of Motion and their Evaluation in Sequences), davranı?larım?z? analiz ederken 3 farkl? odaksal ad?m kullanıyor. ?nceledişi kişiye X kişisi dersek X’in uzaktaki bir nesne olarak görülmesi, X’in vücudunun tamam?nın incelenmesi, böylece tüm vücut duru?larının analizinin yapılması ve X’in yüzünün tüm detaylarıyla incelenmesi, böylece mimik hareketlerinin analizinin yapılması.
Proje iki ana konuyu hedef al?yor: Bunlardan ilki, tanımlamak ya da analiz edilmiş hareket modellerine dayal? kavramsal tanımlamaları üretmek. Dişeri ise görselle?tirmeyi kullanarak iletişimi sağlamak ya da yaz?l? tanımlamalara dayal? yapay hareket modelleri üretmek.
?lk olarak, insan dilinde yaz? üretimi aşa??daki faktörlere dayanarak HERMES ile uyumlu hale getirilecek:
- Semantik tanımlamalar ara?tırmac?lara kavramsal veri tabanında bulunan ayrıntıları kontrol olana?? sunacak.
- Semantik tanımlamalar en doşal tanımlama ?ekliyle HERMES’in dişer uçtaki kullanıc?sıyla iletişime izin verecek.
- Semantik tanımlamalar kavramsal birtak?m durumları ay?rt edecek, böylelikle kısa mesajların ya da temel detayların iletilmesine olanak tanıyacak. Mesela; uçtaki kullanıc?ya cevaplar kay?t yapan kameranın yanındaki bir mikrofondan ya da 3G teknolojisine sahip bir telefondan gönderilebilecek. (Görme engelli insanlar için dü?ünülmü?.)
HERMES izledişi hareketleri e? zamanl? olarak yaz? diline dökecek. Yani görsel bilginin otomatik olarak dönü?ümü söz konusu.
Sisteme bilgi al?m?, bilgisayarl? görü ve sisteme hareket modellerini ö?renme ve tanıma yetisi kazand?ran yapay zeka algoritmaları tarafından sağlanıyor.
HERMES, bilgisayarl? görü dünyasına 2 önemli inovasyon sağl?yor. Birincisi; önceki görü araçlarına karı?lık HERMES hareketleri foto?raflardan değil direkt olarak videodan sağl?yor. Yani olay basit ve net bir ?ekilde gerçek zamanl? olarak bilgisayarda kare kare (demek istedişim her hareketin ayrı ayrı karelenmesi) görülüyor. Sistem, konuşma ve bilgiyi farkl? dillerde tanımlama amaçl? bir de avatar kullanıyor.
?kinci yenilik ise sistemin, beklenmedik davranı?ları – tabii ki tanıd??? davranı?lar çerçevesinde – analiz edip belirleme ve ekstra olarak uyarı sinyalleri verme imkanı sağlaması. Bu, sosyal arenada nasıl bir yarar sağlayabilir diye dü?ünürsek birkaç örnek verelim: HERMES, trafikte araç sollayan bir arac?n görüntüsünü yakalay?p polis merkezine uyarı gönderebilir veya yalnız yaşayan yağl? insanların acil durumlarını hastanelere uyarı olarak gönderebilir. Bu ve bunun gibi birçok örnek aklınıza gelmiştir eminim ki. HERMES sayesinde birçok sosyal sorun çözüme kavuşabilir gibi gözüküyor, özellikle insanı sinir hastası yapan “trafik” problemleri.
HERMES üzerinde çal?şan ara?tırmac?lar tarafından gerçekle?tirilen ve HERMES’in tamamlanan parçaları olan 7 alt projeye bir göz atal?m:
1- Kamera sistemi: Statik kameralar, tam görüntü ve yüksek çözünürlük elde etme amaçl? kullanıl?rken aktif kameralar – pan-tilt (yatay ve dikey olarak panoramik görüntüleme) yak?nla?tırıc? sensörler- otomatik izleme ve tekil olarak yak?n çekim yapma amaçl? kullanıl?yor. HERMES’teki bu sistemi gerçekle?tirmek için optimizasyon teknikleri görüntülerdeki bilgilere uyguland?.
2- Resimdeki nesne ve bireylerin hareket analizleri: Sistemde; alınan bilgi, aktif kameraların, hareketin nerede gerçekle?tişini bulup o yöne yönelmesi için rehber olarak kullanıl?r. Bu özellikler farkl? izleme tekniklerinin kullanılmasıyla sağland?.
3-Vücudun farkl? bölümlerinden bilgi almak amac?yla insan vücudunun hareketlerinin analizi ve bu analizi gerçekle?tirip davranı?ları tahmin etmek ya da tanımlamak: Bu konuda model ve siluet tanımaya dayal? teknikler kullanıld?.
4-Bireyin duygusal durumunun anla??lması için mimiklerinin analizi: Bu alt projede, izleme ve yüzün 2D – 3D modellerini hizalama işlemleri için yeni teknikler olu?turuldu.
5-Görüntü karelerinde neler oldu?unu tanımlama ve tarif etme amaçl?, yaz?l?m?n ve doşal dilin entegrasyonu, kavramsal bir temsil düzeni kullanılarak kaydedildi.
6-Sistemin tüm entegrasyonu (yaz?l?m&donanım?n gerçek zamanl? ve gerçek nesneler ya da bireylerle çal?şabilmesi) : Sistem, işleyişini test etmek amac?yla gerçek hayat “durumlarında” kullanılmak için dizayn edildi.
7-Gerçek&sanal dünyaların etkileğimine ve davranı?ları insan dilinde tarif etmeye dayal? sanal basamakların üretimi için yüksek gerçeklik teknikleri kullanıld?.
HERMES’in avantajları açık: Özellikle milli istihbarat alanlarında ve kaza ya da suçların önlenmesinde kullanım? birçok sorunun üstesinden gelebilir. Bununla birlikte, ara?tırmac?lar bu sistemin kullanım?nın pazarlama ve psikoloji gibi sektörlerde de büyük fayda sağlayacağını dü?ünüyor.
Bir an önce tamamlanması ve insan hayatına katk?larını sağlaması dileğiyle.
Görü?mek üzere!
Kaynaklar:
Beni Bul Anne