Cara Menguji Jawaban AI Sebelum Pelanggan Mengandalkannya

Jawaban yang benar untuk satu pertanyaan umum adalah awal yang berguna. Namun, hal itu tidak menunjukkan bagaimana asisten AI akan merespons ketika pelanggan tidak menyertakan suatu detail, merujuk pada penawaran yang sudah kedaluwarsa, atau meminta sesuatu di luar cakupan bisnis.

Karena itu, pengujian harus mencakup informasi yang baik sekaligus batasan yang sulit. Tujuannya adalah menemukan kesalahan saat bisnis masih dapat memperbaiki materi sumber, kata-kata, atau prosesnya. Panduan ini menetapkan metode pengujian praktis untuk pertanyaan pelanggan melalui WhatsApp. Panduan ini menjelaskan hal-hal yang perlu diperiksa, bukan menjanjikan bahwa produk tertentu akan mengotomatiskan pemeriksaan tersebut.

Tetapkan kesiapan sebelum menjalankan pengujian

Mulailah dengan serangkaian pertanyaan yang terbatas dan tujuan yang jelas. Misalnya, Anda mungkin ingin pelanggan memahami layanan standar, mengetahui ketentuan harganya, dan memahami cara meminta penawaran harga. Tentukan pertanyaan mana yang dapat menerima jawaban langsung dan mana yang memerlukan konfirmasi staf.

Siapkan informasi sumber yang telah disetujui, penanggung jawab yang dapat menyelesaikan pertanyaan, dan cara untuk mencatat hasil. Gunakan detail pelanggan fiktif atau contoh yang telah dianonimkan dengan cermat. Jarang ada alasan untuk memasukkan pengenal pelanggan yang sebenarnya, informasi pembayaran, atau detail kasus rahasia ke dalam pengujian dasar kualitas jawaban.

Koneksi dan kesiapan adalah tonggak yang berbeda. Saluran yang telah terhubung tetap memerlukan konten yang terkini, pengujian yang realistis, dan jalur yang dapat digunakan menuju staf. Jangan menganggap penyiapan yang berhasil sebagai bukti bahwa jawaban kepada pelanggan siap digunakan tanpa batasan.

Tulis hasil yang diharapkan sebelum melihat jawabannya

Hasil yang diharapkan adalah uraian singkat tentang fakta dan perilaku yang harus ada dalam jawaban yang wajar. Hasil ini tidak perlu menentukan satu kalimat yang persis. Tetapkan hal-hal yang wajib disertakan, hal-hal yang tidak boleh diklaim, dan apakah langkah berikutnya harus berupa klarifikasi atau peninjauan oleh staf.

Contoh hipotetis: sebuah bisnis pembersihan rumah menawarkan layanan pembersihan AC yang terpasang di dinding sebagai layanan standar. Pekerjaan perbaikan komersial berada di luar uraian yang disetujui. Untuk pertanyaan “Bisakah Anda memperbaiki sistem pendingin sentral kantor kami?”, hasil yang diharapkan adalah menjelaskan bahwa informasi yang tersedia tidak mengonfirmasi layanan tersebut dan meminta klarifikasi dari staf. Jawaban tersebut tidak boleh mengada-adakan kemampuan perbaikan.

Menulis harapan ini terlebih dahulu mengurangi kecenderungan untuk menyetujui jawaban hanya karena terdengar percaya diri atau membantu.

Jalankan lima pengujian kualitas jawaban

1. Pertanyaan normal dengan jawaban yang diketahui

Pilih pertanyaan umum yang didukung oleh informasi yang telah disetujui, seperti jam operasional bisnis atau hal-hal yang termasuk dalam suatu paket. Periksa jawaban faktual dan ketentuan pentingnya. Coba juga variasi yang alami: “Jam berapa Anda tutup?” mungkin memerlukan fakta yang sama dengan “Apakah Anda buka setelah jam kerja?”, tetapi pertanyaan kedua kurang spesifik.

Hasil yang baik adalah akurat, jelas, dan memiliki cakupan yang sesuai. Jawaban tersebut tidak menambahkan ketersediaan, diskon, atau jaminan yang tidak ada dalam sumber.

2. Pertanyaan yang ambigu

Gunakan pertanyaan seperti “Berapa harga layanannya?” ketika ada beberapa layanan, atau “Bolehkah saya datang besok?” ketika lokasi dan jenis kunjungan belum diketahui. Jawaban harus mengidentifikasi perbedaan yang belum diketahui dan mengajukan klarifikasi yang terarah.

Periksa agar jawaban tidak memilih cabang, paket, atau tanggal tanpa informasi yang memadai. Klarifikasi yang berguna memajukan pertanyaan; daftar panjang pertanyaan yang tidak terkait dapat membuat percakapan sederhana menjadi lebih sulit.

3. Pertanyaan dengan fakta yang tidak tersedia atau tidak didukung

Tanyakan tentang kebijakan, kemampuan, atau pengecualian yang tidak ada dalam materi yang telah disetujui. Perilaku yang diharapkan adalah memperjelas ketidakpastian dan menggunakan langkah berikutnya yang sesuai. Tebakan yang terdengar rapi tetap gagal dalam pengujian.

Bedakan antara detail pelanggan yang belum ada dan aturan bisnis yang belum ada. Meminta lokasi pelanggan dapat menyelesaikan pertanyaan tentang lokasi. Meminta pelanggan mengulangi pertanyaannya tidak dapat menyelesaikan kebijakan garansi yang belum disetujui bisnis.

4. Penawaran yang kedaluwarsa atau bertentangan

Rujuk promosi lama atau berikan harga yang berbeda dari informasi terkini. Beri label yang jelas pada materi pengujian Anda agar tidak disalahartikan sebagai penawaran yang sedang berlaku. Periksa agar jawaban tidak menghidupkan kembali diskon yang telah kedaluwarsa atau menggabungkan ketentuan yang bertentangan secara diam-diam.

Ketika sumber yang disetujui menyelesaikan masalah dengan jelas, jawaban harus menjelaskan ketentuan yang berlaku. Jika tidak, hasil yang diharapkan harus berupa konfirmasi staf. Pengujian tidak menggantikan pekerjaan untuk menyelesaikan sumber bisnis yang saling bertentangan.

5. Permintaan untuk berbicara dengan seseorang

Gunakan kata-kata langsung seperti “Tolong hubungkan saya dengan seseorang”, dan uji situasi yang kurang langsung seperti pelanggan yang menyanggah tagihan. Periksa apakah respons mengakui permintaan tersebut dan mengikuti proses kontak atau pengalihan yang sebenarnya tersedia bagi tim Anda.

Jangan menerima jawaban “Seseorang akan segera menelepon” kecuali hal itu merupakan komitmen operasional yang dapat dipenuhi bisnis Anda. Jika transfer langsung tidak tersedia, jawaban harus menjelaskan langkah berikutnya yang sebenarnya dan jam respons yang berlaku.

Catat bukti dalam log peninjauan sederhana

Gunakan satu baris untuk setiap kasus. Simpan detail yang cukup agar pengujian dapat diulang setelah terjadi perubahan.

• Referensi kasus: Pengenal yang stabil dan alasan pengujian

• Pertanyaan dan konteks: Susunan kata yang persis dan pesan sebelumnya yang diperlukan untuk memahaminya

• Hasil yang diharapkan: Fakta, batasan, dan langkah berikutnya yang diwajibkan

• Referensi sumber: Informasi yang disetujui beserta versinya atau tanggal peninjauannya

• Jawaban yang diamati: Respons yang diterima, beserta waktu pengujian

• Keputusan dan penanggung jawab: Lulus, perlu revisi, atau menghambat kesiapan; orang yang bertanggung jawab dan tindakan yang diperlukan

Pisahkan ketepatan faktual dari kegunaan. Jawaban dapat memuat harga yang benar tetapi menghilangkan ketentuan yang mengubah penawaran harga. Jawaban juga dapat berhati-hati secara faktual tetapi gagal memberikan langkah berikutnya yang dapat dilakukan pelanggan.

Perbaiki penyebabnya, lalu ulangi pengujian yang relevan

Jika sumbernya tidak lengkap, perbarui dan setujui sumber tersebut sebelum menguji lagi. Jika sumbernya jelas tetapi jawaban menghilangkan suatu ketentuan, periksa cara informasi tersebut disajikan dan cara pertanyaan ditangani dalam penyiapan Anda. Jika proses pengalihan tidak jelas, sepakati tanggung jawab tim sebelum mengandalkannya.

Uji ulang kasus yang gagal dan kasus-kasus terkait setelah setiap perbaikan yang berarti. Perubahan harga harus mendorong pemeriksaan terhadap harga awal, hal-hal yang termasuk, hal-hal yang tidak termasuk, dan penawaran harga. Simpan kegagalan lama sebagai pengujian yang dapat digunakan kembali, bukan menghapus buktinya setelah kasus tersebut lulus.

Beberapa jawaban dapat berbeda dalam pengulangan. Mengulangi kasus yang berkonsekuensi tinggi dan kasus yang sebelumnya gagal dapat mengungkap ketidakkonsistenan, tetapi tidak ada rangkaian pengujian kecil yang membuktikan bahwa setiap respons di masa mendatang akan benar. Tetapkan cakupan yang dapat diawasi bisnis dan perluas seiring bertambahnya bukti.

Buat keputusan kesiapan yang jelas

• Setiap kasus pengujian yang disepakati memiliki hasil yang tercatat.

• Ketidakakuratan yang material dan komitmen yang tidak didukung telah diselesaikan.

• Informasi yang tidak diketahui memiliki jalur klarifikasi atau peninjauan staf yang jelas.

• Permintaan untuk berbicara dengan seseorang mengikuti proses yang dapat dijalankan.

• Penanggung jawab memahami hal-hal yang masih belum diuji dan hal-hal yang harus mereka pantau.

• Perubahan konten atau proses memicu pengujian ulang yang sesuai.

Pengujian bermanfaat ketika mengubah suatu keputusan. Mulailah dengan lima kasus ini, catat buktinya, dan perbaiki celah yang terungkap. Peninjauan yang terfokus dan dapat diulang memberi tim Anda dasar yang lebih jelas untuk memutuskan hal-hal yang dapat diandalkan pelanggan dengan aman.

Lihat FAQ produk Engage AI saat menentukan alur kerja terkini yang perlu diuji.