Video içerik analizi

Video içerik analizi veya video analizi olarak da bilinen video içerik analizi, zamansal ve uzamsal olayları algılamak ve belirlemek için videoyu otomatik olarak analiz etme yeteneğidir.

Bu teknik yetenek, eğlence, video alma ve video tarama, sağlık hizmetleri, perakende, otomotiv, ulaşım, ev otomasyonu, alev ve duman algılama ve güvenlik dahil olmak üzere çok çeşitli alanlarda kullanılmaktadır. Algoritmalar, genel amaçlı makinelerde yazılım olarak veya özel video işleme birimlerinde donanım olarak uygulanabilir.

Video içerik analizinde birçok farklı işlev uygulanabilmektedir. Video Hareket Algılama, sabit bir arka plan sahnesine göre hareketin algılandığı daha basit biçimlerden biridir. Daha gelişmiş işlevler, video izleme ve egomotion tahmini içerir.

Video içerik analizinin makinede oluşturduğu dahili temsile dayalı olarak, video özetleme, tanımlama, davranış analizi veya diğer durum farkındalığı biçimleri gibi başka işlevler oluşturmak mümkündür.

Video içerik analizi, iyi video girişine dayanmaktadır. Bu nedenle genellikle video gürültü azaltma, görüntü sabitleme, keskin olmayan maskeleme ve süper çözünürlük gibi video geliştirme teknolojileriyle birleştirilmektedir.

Video içerik analizi, 2000'li yılların ortalarında video içerik analizi ile geliştirilmiş ürünler piyasaya süren çok sayıda şirket ile nispeten yeni bir teknolojidir. Pek çok uygulama olsa da, farklı video içerik analizi çözümlerinin sicili büyük ölçüde farklılık göstermektedir. Hareket algılama, insan sayma ve silah algılama gibi işlevler, ticari olarak hazır ürünler olarak mevcuttur ve iyi bir geçmişe sahip olduklarına inanılmaktadır (örneğin, dsprobotics Flowstone gibi ücretsiz yazılımlar bile hareket ve renk analizini işleyebilir). COVID-19 pandemisine yanıt olarak birçok yazılım üreticisi, yüz maskesi algılama veya sosyal mesafe takibi gibi yeni halk sağlığı analizlerini tanıtmıştır.

Birçok alanda video içerik analizi, ya kameralara dağıtılmış (en uçta) ya da özel işleme sistemlerinde merkezileştirilmiş CCTV sistemlerinde uygulanmaktadır. Video Analizi ve Akıllı CCTV, güvenlik alanındaki video içerik analizi için ticari terimlerdir. Birleşik Krallık'ta BSIA, güvenlik alanında video içerik analizi için bir giriş kılavuzu geliştirmiştir. Video analizine ek olarak ve onu tamamlamak için ses analizi de kullanılabilir.

Video yönetim yazılımı üreticileri, mevcut video analiz modüllerinin yelpazesini sürekli olarak genişletmektedir. Yeni şüpheli takip teknolojisi ile bu deneğin tüm hareketlerini kolaylıkla takip etmek mümkündür: nereden geldikleri ve ne zaman, nerede ve nasıl hareket ettikleri. Belirli bir gözetim sistemi içinde, indeksleme teknolojisi, belirli bir süre boyunca veya belirli bir süre içinde kameraların bakış açıları içinde bulunan benzer özelliklere sahip kişileri bulabilmektedir. Genellikle sistem, benzer özelliklere sahip birçok farklı insan bulur ve bunları anlık görüntüler şeklinde sunmaktadır. Operatörün yalnızca izlenmesi gereken resimlere ve konulara tıklaması yeterlidir. Yaklaşık bir dakika içinde, belirli bir kişinin tüm hareketlerini izlemek ve hatta hareketlerin adım adım bir videosunu oluşturmak mümkündür.

Perakende sektöründe, video içerik analizi, mağaza içindeki alışveriş yapanları izlemek için kullanılır. Bu sayede mağaza tasarımı ve pazarlama optimizasyonları için faydalı olan mağazanın bir ısı haritası elde edilebilir. Diğer uygulamalar, bir ürüne bakarken bekleme süresini ve öğenin kaldırıldığını/bırakıldığını algılamayı içerir.

Ticari ortamda video içerik analizinin kalitesini belirlemek zordur. Kullanım durumu, uygulama, sistem konfigürasyonu ve bilgi işlem platformu gibi birçok değişkene bağlıdır. Ticari ortamlarda kalite hakkında objektif bir fikir edinmenin tipik yöntemleri arasında bağımsız kıyaslama ve belirlenmiş test yerleri bulunur.

Polis ve adli bilim adamları, suç faaliyetlerini araştırırken CCTV videosunu analiz ediyor. Polis, videodaki önemli olayları aramak ve şüphelileri bulmak için video içerik analizi yapan Kinesense gibi bir yazılım kullanır. Anketler, vakaların %75'ine kadarının CCTV içerdiğini göstermiştir. Polis, önemli olaylar için uzun videoları aramak için video içerik analiz yazılımı kullanır.

Video içerik analizi, bilgisayarlı görünün ve dolayısıyla yapay zekanın bir alt kümesidir. İki büyük akademik kıyaslama girişimi, i-LIDS video görüntüsünün küçük bir bölümünü kullanan TRECVID ve PETS Benchmark Data'dır. Takip, sol bagaj algılama ve sanal eskrim gibi işlevlere odaklanırlar. UCF101 gibi karşılaştırmalı video veri kümeleri, zamansal ve uzamsal görsel dikkati evrişimli sinir ağı ve uzun kısa süreli bellek ile birleştiren eylem tanıma araştırmalarına olanak tanır. Video analiz yazılımı ayrıca, görüntüleri kamuya açıklanacak şekilde daha kolay yeniden düzenlemek ve videolardaki olayları ve kişileri tanımlamak için vücuda takılan ve gösterge paneli kameralarından alınan görüntülerle eşleştiriliyor.

Avrupa Birliği, gömülü sistemlerde video içerik analitiğini polis ve ulaşım güvenliği veri tabanlarıyla bütünleştirmek için P-REACT adlı bir FP7 projesini finanse ediyor.

Video gözetimi için yapay zeka, insanları, araçları, nesneleri ve olayları tanımak için video gözetim kameralarından gelen ses ve görüntüleri analiz eden bilgisayar yazılım programlarını kullanır. Güvenlik müteahhitleri programı, kamera gözetimi ile korunan mülk için kameranın görüşü (örneğin çitle çevrili bir alan, bir park yeri gibi, ancak park yeri dışındaki kaldırım veya halka açık cadde değil) ve günün saatleri için (örneğin iş kapanışından sonra) programlanan kısıtlı alanları tanımlayan yazılımdır. Yapay zeka, günün o saatinde o bölgeye kimsenin girmesine izin verilmeyen "kural" setini ihlal eden bir kişi tespit ederse bir uyarı gönderir.