SinyalTalebi anlayın
Sesli yapay zeka ölçümü
AI'da kalma, çözüm ve aktarım: sesli yapay zekada en çok karıştırılan metrikler
Kısa bir çağrı kendiliğinden başarılı bir çağrı değildir. Müşterinin işinin tamamlanıp tamamlanmadığını, bir insana ihtiyaç olup olmadığını ve görüşmeden sonra ne olduğunu ölçün.
OPERASYON REHBERİİNCELENEBİLİR AKIŞ
Operasyon rehberi
UygulaDoğru kuralı işletin
SonuçSonraki adımı kayda geçirin
Sesli yapay zeka panelleri çoğu zaman cazip bir sayıyla açılır: AI'da kalma oranı (containment). Basit bir soruyu yanıtlıyor gibi görünür: kaç çağrı bir insana gitmeden bitti? Sorun şu ki arayan bir insana ulaşmadan pek çok nedenle ayrılabilir. Sorun çözülmüş olabilir, arayan işe yarar bir sonraki adımı kabul etmiş olabilir, sistem hata vermiş olabilir ya da kişi vazgeçmiş olabilir. Bütün bu sonuçları başarı saymak yanlış davranışı ödüllendirir.
DRING'in analitiği, kalite iş akışları ve Agent Factory'si en iyi üç ayrı kavram üzerinden anlaşılır: AI'da kalma, çözüm ve aktarım. Bu üçü tek bir karnede birbirine bağlanabilir, ama tek bir orana indirgenmemeli. Bu ayrım, özellikle bir şirket paketini büyütmeye, yeni bir iş akışı açmaya ya da bir agent politikasını değiştirmeye karar verirken önem kazanır.
AI'da kalma, kanalda ne olduğunu anlatır
AI'da kalma, çağrının o görüşmeye hiçbir insan temsilci katılmadan bittiği anlamına gelir. Bu bir kanal sonucudur, müşteri sonucu değil. Rutin bir sipariş durumu çağrısı hem AI'da kalmış hem çözülmüş olabilir. Başarısız bir doğrulama denemesinden sonra biten bir ödeme itirazı da AI'da kalmış sayılabilir, ama çözülmüş değildir. Olayı kesin tanımlayın: çağrıyı agent mı bitirdi, arayan mı kapattı, bir araç mı hata verdi, yoksa sistem dosyayı başka bir kanala mı taşıdı?
Arayanın vazgeçip kapatmasını ayrı tutun. Agent soruyu yanıtlamadan biten bir çağrı, olumlu bir AI'da kalma olarak sayılmamalı. Sessizliği, erken kapatmayı, aktarım talebini ve sistemin sonlandırmasını ayrı olaylar olarak izleyin. Net olay tanımları paneli daha dürüst kılar ve kalite ekibine inceleyeceği bir yer verir.
Çözüm, müşterinin işini anlatır
Çözüm, niyete ve gözlemlenebilir bir sonraki adıma bağlanmalı. Sipariş sorusunda bu, müşterinin güncel durumu öğrenmesi ve başka bir işleme gerek kalmaması olabilir. İade talebinde uygunluğun teyit edilmesi ve iade etiketinin gönderilmesi olabilir. Randevuda bir kaydın oluşturulup teyit edilmesi olabilir. Karmaşık bir destek konusunda ise çözüm, sorumlu ekibe başarıyla ulaşan bir insana devir gerektirebilir.
Her iş akışı için ayrı bir çözüm tanımı yazın. “Arayan teşekkür etti” ya da “çağrı iki dakikadan kısa sürdü” gibi tek bir evrensel kural kullanmayın. Kibar bir kapanış yanıtlanmamış bir soruyu gizleyebilir. Sonuç bir geri arama ya da uzman incelemesiyse, dosya o sonraki adım tamamlanana ya da bilinçli olarak kapatılana kadar açık kalmalı.
Aktarım kendiliğinden başarısızlık değildir
Aktarım doğru sonuç olabilir. Yöneticiyle görüşmek isteyen bir arayan, klinik bir soru soran bir hasta, şüpheli bir ödeme itirazı ya da bir güvenlik bildirimi eğitimli bir insana ihtiyaç duyabilir. Her aktarımı cezalandırmak, agent'ları eskalasyonu geciktirmeye ya da ona direnmeye iter. Bunun yerine aktarımın yerinde olup olmadığını ve devrin tamamlanıp tamamlanmadığını ölçün.
İşe yarar bir aktarım kimlik durumunu, niyeti, alınan bilgileri, denenen işlemi, eskalasyon nedenini, dili ve müşterinin beklentisini taşır. İnsan arayandan her şeyi tekrar etmesini istiyorsa, aktarım teknik olarak tamamlanmış ama operasyonel olarak zayıf olabilir. DRING'in devir tasarımı, bağlamın korunmasını sonucun bir parçası sayar.
Gösteriş tablosu değil, metrik ağacı kurun
En üst düzeyde hacmi, AI'da kalmayı, çözümü, aktarımı ve vazgeçmeyi raporlayın. Çözümün altında iş akışına özgü tamamlanmayı gösterin. Aktarımın altında aktarım nedenini, insana ulaşma oranını, dosyanın bir insana geçme süresini ve yeniden yapılan işi gösterin. Kalitenin altında bilgi doğruluğunu, politikaya uyumu, sonraki adımın netliğini ve müşteri geri bildirimini gösterin. Böylece bir yönetici hem verimliliği hem de özeni görebilir.
Kapsamı açıklayan paydalar kullanın. Tüm çağrılar üzerinden hesaplanan bir oran, küçük ama yüksek riskli bir iş akışını gizleyebilir. Sonuçları niyete, dile, kanala, müşteri segmentine, agent sürümüne ve döneme göre ayırın. DRING'in teknik altyapısı ses, WhatsApp, SMS ve e-postada 62 dili kapsıyor; bu yüzden dil bir dipnot değil, olağan bir raporlama boyutu olmalı. İstenen her dil ve iş akışı yine de canlıya çıkmadan önce gerçek yol üzerinde doğrulanmalı.
Çağrıdan sonraki zamanı da hesaba katın
Pek çok sonuç telefon kapandıktan sonra gerçekleşir. Bir mesaj teslim edilir, iade etiketi kullanılır, bir toplantıya katılınır, bir uzman döner ya da müşteri tekrar arar. İş akışına uygun bir sonuç penceresi ekleyin. Basit bir durum sorusunda aynı çağrıda tamamlanma yeterli olabilir. Geri aramada ise geri aramanın yapılıp yapılmadığını ve müşterinin hâlâ yardıma ihtiyacı olup olmadığını değerlendirin.
Çağrı sonrası durumu görünür tutmak için CRM'e geri yazmayı kullanın. Veri modeli rehberi, niyetin, işlemin, sorumlunun, zaman damgasının ve nihai sonucun neden ayrı alanlar olması gerektiğini anlatır. Böylece aylık sektör analizi, AI'da kalan hangi çağrıların sonradan yeniden açıldığını gösterebilir; bu da başarının olduğundan fazla sayıldığına işaret edebilir.
Metriklerin oyuna getirilmesine karşı önlem alın
Her metrik bir baskı yaratır. Ekipler yalnızca AI'da kalma oranıyla ödüllendirilirse çağrıları kısaltabilir, insana devirden kaçınabilir ya da çözümü fazla cömert tanımlayabilir. Karşı metrikler ekleyin: tekrar temas, şikayet, devir talebi, başarısız işlem, incelemede işaretlenen güvenlik sorunları ve müşteri eforu. Yalnızca en iyi çağrıları değil, sınıra yakın çağrıları da inceleyin.
Bir metriği iyileştirirken diğerine zarar vermeyen değişiklikleri test etmek için Agent Factory'yi kullanın. Yeni bir açılış AI'da kalma oranını yükseltirken netliği azaltabilir. Daha sıkı bir devir kuralı AI'da kalmayı düşürürken karmaşık durumlarda çözümü iyileştirebilir. Yayın kararları karnenin tamamına bakmalı.
Örnek karne
- AI'da kalma: çağrı insan katılımı olmadan bitti; vazgeçip kapatanlar ayrı raporlanır.
- Çözüm: iş akışına özgü tamamlanma, izin verilen sonuç penceresi içinde teyit edildi.
- Aktarım kalitesi: doğru yol, aktarılan bağlam ve dosyayı üstlenen bir insan.
- Müşteri eforu: tekrar anlatma, tekrar temas ve bir sonraki işe yarar adıma kadar geçen süre.
- Güvenlik ve politika: inceleyenin değerlendirdiği doğruluk, koruma kurallarına uyum ve eskalasyon kalitesi.
- Öğrenme: tekrar eden temalar, düzeltilen sonuçlar ve bir sonraki sürüme eklenen test senaryoları.
AI'da kalma, doğru yere konduğunda işe yarar. Size kanal yükü hakkında bir şey söyler. Çözüm, müşterinin işinin tamamlanıp tamamlanmadığını söyler. Aktarım, insan muhakemesinin nereye ait olduğunu ve kurumun bu geçişi iyi yapıp yapmadığını söyler. Üçü birlikte, sesli yapay zekaya dair tek bir manşet yüzdesinden çok daha inandırıcı bir tablo çizer.
Paydayı hikayenin parçası yapın
Paydası görünen bir metriğe güvenmek daha kolaydır. “Çözüm oranı”, çözülen çağrıların sunulan tüm çağrılara, yanıtlanan çağrılara, iş akışına uygun çağrılara ya da nihai sonuç penceresine ulaşan dosyalara oranı anlamına gelebilir. Bu kümeler farklı soruları yanıtlar. Paydayı, tarih aralığını, iş akışı kapsamını ve hariç tutulanları oranın hemen yanına yazın ki bir operasyon yöneticisi ayrı bir veri sözlüğü açmadan sonucu yorumlayabilsin.
Eğilim raporları için tanımı sabit tutun, iş akışı değiştiğinde ikinci bir görünüm yayınlayın. Örneğin yeni bir kimlik doğrulama adımı, tamamlanan sonuçları daha güvenilir kılarken aktarımları geçici olarak artırabilir. Yeni dönemi eski formüle zorla sığdırmak yerine değişikliği açıklayın. Net tanımlar ekibi metrik oyunlarından korur ve agent iyileştirmesi üzerine konuşmaları çok daha verimli hale getirir.
İleri okuma
Ekibinizin güvendiği bir metrik ağacı kurun
Formu gönderin; DRING sizi iki dakikada arar. Bir iş akışı getirin, AI'da kalmayı, çözümü, aktarımı ve takip kanıtını onun etrafında birlikte tanımlayalım.