Yeni bir AI müşteri desteği özelliğinin başarısını nasıl ölçersin?
Model cevap
Model cevapKullanıcı başarı metriklerini iş başarı metriklerinden ayırırdım. Kullanıcılar için: containment oranı (AI insan müdahalesi olmadan çözümledi mi?), etkileşim sonrası CSAT ve tekrar iletişim oranı. İş için: çözüm başına maliyet, insan temsilci olmadan çözülen ticket oranı ve çözüm süresi. Problem şu: AI ile müşteri desteğini fazla push'lamak kullanıcıların insana ihtiyaç duyduğu durumlarda CSAT'ı düşürebilir. Guardrail kurarım: containment iyileşse bile CSAT X'in altına düşemez.
Framework · İkili Metrik Modeli
- UKullanıcı metrikleri
Containment oranı, CSAT, tekrar iletişim oranı, çözüm memnuniyeti - Bİş metrikleri
Çözüm başına maliyet, deflection oranı, tasarruf edilen temsilci zamanı, SLA uyumu - GGuardrails
Minimum CSAT eşiği belirle, iş kazanımları kullanıcı yararından önce gelemez - TZaman boyutu
Kısa vadeli containment/uzun vadeli güven. Bunların ikisini de ölç
İlgili sorular
- Ürününün DAU'su bir gecede yüzde 20 düştü. Araştırmayı nasıl yaparsın?
- Yeni bir ödeme akışı için A/B testini nasıl kurarsın?
- Bir yemek teslimat uygulaması için north star metriğini nasıl tanımlarsın?
- Nicel ve nitel veriler arasındaki çelişen sinyalleri nasıl yönetirsin?
- Aktivasyon oranımız %40. Bu iyi mi kötü mü ve ne yaparsın?
Metrik & Analiz
Bu kategorideki case çalışmaları
Bu kategoride pratik yap