01
Kararı ve hata maliyetini tanımlama
Sistemin hangi kararı destekleyeceğini, kaçırılan olay ile yanlış alarmın operasyona etkisini ve sonucu kimin kullanacağını yazarız.
Ölçülebilir karar çerçevesi
Görüntü analitiği projeleri nasıl ölçülür ve doğrulanır?
Kısa cevap: Önce operasyon hedefini ve hata maliyetini tanımlar, temsilî veriyi ayırır, başarı eşiklerini testten önce yazar ve sonuçları hata örnekleriyle birlikte raporlarız. Tek bir doğruluk oranını saha başarısı gibi sunmayız.
Beş adımda doğrulama yöntemi
Bu yöntem, çözüm alanı ne olursa olsun ölçümün tekrarlanabilir ve kararın izlenebilir kalmasını amaçlar.
02
Temsilî veri kapsamını ayırma
Işık, açı, yoğunluk, ürün çeşidi ve benzeri saha değişkenlerini kaydeder; ayar için kullanılan örneklerle bağımsız değerlendirme örneklerini ayırırız.
03
Kabul ölçütlerini önceden yazma
Doğru tespit, kaçırma, yanlış alarm, işlem süresi ve cihaz yükü için kullanılacak ölçümleri ve eşikleri testten önce netleştiririz.
04
Saha koşulunda sınama
Çözümü hedef cihaz, gerçek kamera akışı ve planlanan bağlantı koşulunda çalıştırır; yalnızca masaüstü denemesine dayanmayız.
05
Sonuç, hata örneği ve sınırları raporlama
Toplam sonucu alt koşullara böler, başarısız örnekleri gösterir ve kanıtın hangi saha aralığında geçerli olduğunu açıkça belirtiriz.
Her raporda yanıtlanan dört soru
Rapor, yalnızca “çalıştı” demek yerine karar vericinin sonucu denetleyebilmesini sağlamalıdır.
Nerede ölçüldü?
Kamera, dönem, örnek sayısı ve çevresel koşullar açıkça kaydedilir.
Ne kadar iyi çalıştı?
Kararlaştırılan ölçütler, toplam ve önemli alt gruplar için ayrı sunulur.
Nerede zorlandı?
Kaçırmalar ve yanlış alarmlar örneklenir; yalnızca başarılı kareler gösterilmez.
Sonraki adım ne?
Yaygınlaştırma, yeni veriyle iyileştirme veya kapsamı daraltma seçeneklerinden biri önerilir.
Yöntemin sınırları
Bir pilotun kanıtlamadığı şeyleri de sonuç kadar görünür tutarız.
- Seçilen veri aralığı, görülmeyen tüm saha koşullarını temsil etmeyebilir.
- Işık, kamera açısı, ürün veya ziyaretçi yoğunluğu değiştiğinde sonuç değişebilir.
- Laboratuvar performansı, hedef cihazdaki gecikme ve ısıl davranışın yerine geçmez.
- Gizlilik ve mevzuat uygunluğu, kullanım amacı ile veri akışına göre ayrıca değerlendirilir.
- Ölçüm sonucu, operasyon kararının tek başına otomatikleştirilmesi gerektiği anlamına gelmez.
Yöntem, süreç ve teknoloji arasındaki fark
Yöntem başarının nasıl ölçüldüğünü; süreç projenin hangi adımlarla ilerlediğini; teknoloji cihaz, veri ve işletim tercihlerinin nedenini açıklar.
Pilot kapsamını görünSık sorulan doğrulama soruları
Ölçüm planı hazırlanırken en sık netleştirdiğimiz konular.
Başarı eşiğini kim belirler?
Eşik, operasyonun hata maliyeti ve kullanım koşulları birlikte değerlendirilerek proje sahibiyle belirlenir; Infereal tek bir genel doğruluk oranını her sahaya uygulamaz.
Tek bir doğruluk oranı yeterli mi?
Hayır. Kaçırılan olaylar, yanlış alarmlar, gecikme, cihaz yükü ve belirlenen saha alt grupları ayrı ayrı raporlanır.
Pilot sonucu tüm sahalar için garanti verir mi?
Hayır. Pilot yalnızca seçilen kamera, veri aralığı ve test koşulları için kanıt üretir; yeni ışık, açı veya yoğunluk koşulları yeniden doğrulama gerektirebilir.
Kabul raporunda ne yer alır?
Veri kapsamı, ölçüm tanımları, sonuçlar, hata örnekleri, performans sınırları, bilinen riskler ve yaygınlaştırma önerisi yer alır.
Ölçmeden yaygınlaştırmayın
Sahanızı, beklenen çıktıyı ve kabul koşullarını paylaşın; uygulanabilir bir doğrulama kapsamı oluşturalım.