Cara Mengukur Layanan Pelanggan AI: Enam Angka yang Menunjukkan Berhasil Tidaknya

Sebulan setelah menyalakan asisten AI, pemilik disodori satu angka: 4.200 pesan dijawab otomatis. Kedengarannya mengesankan, tetapi tidak menjawab satu pun pertanyaan yang penting. Apakah jawabannya benar? Apakah pelanggan mendapat yang dicarinya? Apakah penjualan naik, atau orang menyerah dan pergi? Untuk mengukur layanan pelanggan AI dengan benar, Anda butuh beberapa angka yang melihat hasilnya, bukan kesibukannya.

Mengapa jumlah pesan menyesatkan

AI yang membalas segalanya menghasilkan angka besar terlepas dari berguna tidaknya balasannya. Asisten yang menjawab pertanyaan yang salah dengan sopan, atau menahan pelanggan yang kesal di dalam putaran, tetap bagus dari sisi volume. Ukurlah apa yang dialami pelanggan dan apa yang diperoleh usaha.

Enam ukuran

1. Waktu respons pertama

Berapa lama pelanggan menunggu balasan berguna pertama.

Mengapa: di sinilah AI paling terlihat membantu, terutama di luar jam kerja.

Caranya: median waktu dari pesan pertama pelanggan sampai balasan pertama yang menjawabnya, dipisah antara jam kerja dan di luarnya.

Yang diwaspadai: tanda terima seketika yang disusul penantian panjang untuk jawaban sebenarnya. Ukur balasan yang berguna.

2. Selesai tanpa orang

Porsi percakapan yang kebutuhan pelanggannya terpenuhi tanpa manusia turun tangan.

Mengapa: menunjukkan seberapa banyak pekerjaan yang benar-benar diambil AI dari tim.

Caranya: percakapan yang ditutup AI tanpa serah terima dan tanpa pertanyaan lanjutan tentang topik yang sama dalam satu atau dua hari, dibagi seluruh percakapan.

Yang diwaspadai: menghitung percakapan sebagai selesai karena pelanggan berhenti membalas. Diam bisa berarti puas, bisa juga berarti pergi. Periksa dengan ukuran ketiga.

3. Ketepatan, dari sampel percakapan

Porsi balasan AI yang benar dan pantas.

Mengapa: inilah ukuran yang menjadi tumpuan semua ukuran lain, dan tidak bisa diserahkan ke otomasi.

Caranya: tiap minggu, baca tiga puluh sampai lima puluh percakapan yang dipilih acak. Untuk tiap balasan AI, tandai:

• Benar dan membantu.
• Benar, tetapi nada atau panjangnya kurang pas.
• Tidak lengkap.
• Salah.
• Semestinya diserahkan.

Laporkan persentase tiap kelompok. Simpan yang salah sebagai kasus uji.

Yang diwaspadai: hanya meninjau percakapan yang berjalan baik. Ambil sampel acak, dan tambahkan setiap keluhan.

4. Mutu serah terima

Seberapa baik AI meneruskan percakapan ke orang.

Mengapa: pelanggan yang butuh orang sering justru yang paling penting.

Caranya:

• Tingkat serah terima: porsi percakapan yang diteruskan.
• Waktu sampai diambil: berapa lama sebelum orang membalas.
• Serah terima yang terlewat: percakapan di mana pelanggan meminta orang atau jelas tidak puas dan tidak ada serah terima. Ditemukan lewat sampel mingguan.
• Serah terima yang tidak perlu: kasus yang diselesaikan orang dengan jawaban standar.

Yang diwaspadai: tingkat serah terima yang sangat rendah. Itu bisa berarti AI menahan percakapan yang semestinya dilepas.

5. Hasil bagi pelanggan

Apa yang terjadi sesudahnya.

Mengapa: layanan ada untuk mempertahankan dan memenangkan pelanggan.

Caranya: pilih yang cocok dengan usaha Anda:

• Konversi: porsi pertanyaan yang ditangani AI dan menjadi pesanan atau penawaran, dibandingkan dengan yang ditangani orang.
• Kontak berulang: porsi pelanggan yang menulis lagi tentang masalah yang sama dalam beberapa hari.
• Kepuasan: penilaian satu pertanyaan setelah percakapan.
• Keluhan yang menyebut bot.

Yang diwaspadai: skor kepuasan saja. Sedikit pelanggan yang mengisi, dan yang mengisi tidak mewakili. Gabungkan dengan perilaku.

6. Biaya per percakapan yang selesai

Berapa biaya AI untuk tiap percakapan yang diselesaikannya.

Mengapa: untuk dibandingkan dengan biaya orang menanganinya, dan untuk menyadari ketika biaya pemakaian merangkak naik.

Caranya: biaya AI bulanan, termasuk langganan dan pemakaian, dibagi jumlah percakapan yang selesai tanpa orang. Tambahkan waktu staf meninjau draf, bila Anda berjalan di mode draf.

Yang diwaspadai: membagi dengan seluruh pesan. Biaya per pesan terlihat sangat kecil dan tidak berkata apa-apa.

Untuk mode draf: satu angka lagi

Bila AI menyusun draf dan orang yang mengirim, pantau porsi draf yang dikirim tanpa suntingan, disunting, dan dibuang. Porsi draf tanpa suntingan yang terus naik adalah bukti yang Anda butuhkan sebelum mengizinkan pengiriman otomatis untuk satu jenis pertanyaan.

Membacanya bersama

• Cepat dan selesai, tetapi tidak tepat. Gabungan paling berbahaya. Berhenti dan benahi basis pengetahuannya.
• Tepat tetapi jarang selesai. AI benar tetapi tidak membantu. Sering kali balasannya tidak mengantar pelanggan ke langkah berikutnya.
• Tingkat selesai tinggi, kontak berulang tinggi. Percakapan ditutup, bukan diselesaikan.
• Tingkat serah terima rendah, keluhan menyebut bot. Aturan eskalasinya terlalu lemah.
• Angka bagus, konversi turun. Periksa nada dan apakah AI mengajak memesan.

Tidak ada satu angka pun yang bisa dipercaya sendirian.

Ambil angka dasar lebih dulu

Sebelum menyalakan AI, atau sedini mungkin, catat angka yang sama untuk tim manusia Anda: waktu respons, konversi dari pertanyaan ke pesanan, kontak berulang. Tanpa angka dasar Anda tidak bisa menyatakan AI membuat keadaan lebih baik.

Tinjauan mingguan

Dua puluh menit, bersama penanggung jawab layanan pelanggan:

1. Lihat keenam angka terhadap minggu lalu.
2. Baca ringkasan sampel: berapa yang benar, salah, serah terima terlewat.
3. Pilih dua masalah yang paling umum.
4. Putuskan perbaikannya: tambah jawaban yang kurang, ketatkan aturan, sesuaikan panduan gaya.
5. Masukkan percakapan yang gagal ke kumpulan uji.

Satu atau dua perbaikan seminggu, dijalankan terus, memperbaiki asisten lebih cepat daripada perombakan besar.

Kesalahan yang umum

• Melaporkan volume sebagai keberhasilan.
• Tidak pernah membaca percakapan nyata.
• Mempercayai AI menilai dirinya sendiri. Penilaian otomatis baru berguna setelah dicocokkan dengan penilaian manusia.
• Mengabaikan percakapan di luar jam kerja, ketika tidak ada yang mengawasi.
• Mengukur sekali saat peluncuran dan tidak lagi.
• Mengoptimalkan satu angka. Menaikkan tingkat selesai dengan mengurangi serah terima membuat pelanggan tidak senang.

Seperti apa yang baik

Tidak ada patokan universal, karena usaha dan pertanyaannya berbeda. Pola yang sehat adalah: waktu respons jauh lebih singkat dari sebelumnya, ketepatan di sampel mingguan tinggi dan stabil, serah terima cepat dan lengkap, konversi setidaknya setara dengan angka dasar manusia, dan biaya per percakapan yang selesai jelas di bawah biaya orang. Bila ketepatannya belum ada, sisanya tidak dihitung.

Polynusa menyimpan setiap percakapan, baik yang dijawab asisten AI maupun tim Anda, dalam satu kotak masuk lengkap dengan waktu respons dan hasilnya, sehingga sampel mingguan dan angkanya berasal dari tempat yang sama. Lihat halaman harga.

Ringkasan

Ukur waktu respons, selesai tanpa orang, ketepatan dari sampel mingguan, mutu serah terima, hasil bagi pelanggan, dan biaya per percakapan yang selesai. Baca bersama-sama, bandingkan dengan angka dasar sebelum peluncuran, dan benahi satu atau dua masalah tiap minggu. Ketepatan didahulukan.

FAQ

Apa metrik terpenting untuk layanan pelanggan AI?

Ketepatan, diperiksa dengan membaca sampel percakapan nyata tiap minggu. Jawaban cepat, yakin, dan salah lebih merugikan daripada jawaban lambat. Kecepatan dan volume baru berarti setelah Anda tahu jawabannya benar.

Berapa percakapan yang perlu ditinjau tiap minggu?

Tiga puluh sampai lima puluh cukup bagi usaha kecil untuk melihat pola. Pilih secara acak, dan tambahkan setiap percakapan yang berakhir dengan keluhan atau serah terima. Membaca percakapan nyata menemukan masalah yang tidak ditunjukkan dashboard mana pun.

Apakah tingkat otomasi yang tinggi selalu baik?

Tidak. Porsi besar percakapan yang ditangani tanpa orang hanya baik bila pelanggannya mendapat yang dibutuhkan. Bila otomasi naik sementara pertanyaan berulang, keluhan, atau penjualan yang hilang ikut naik, AI sedang menutup percakapan tanpa menyelesaikannya.