Tutorial ini memandu Anda melalui proses pengujian performa model smart compose menggunakan simulator konsol Agent Assist. Jika mau, Anda juga dapat melakukan semua tindakan berikut dengan memanggil API secara langsung. Anda dapat menggunakan konsol untuk melatih model dan menguji performanya, tetapi perlu diketahui bahwa semua operasi runtime harus dilakukan dengan memanggil API secara langsung.
Sebelum memulai
- Jika Anda menggunakan set data percakapan yang tersedia secara publik, tinjau dokumentasi yang memandu Anda menggunakan resource ini.
- Jika Anda menggunakan data Anda sendiri, pastikan Anda telah membuat satu atau beberapa set data percakapan. Setidaknya satu set data percakapan diperlukan untuk pelatihan model.
- Buat dan deploy model smart compose serta kelola daftar izinya.
- Buat profil percakapan yang menyertakan model smart compose Anda. Anda harus membuat profil percakapan sebelum dapat menggunakan simulator.
Menguji model smart compose menggunakan simulator
Buka konsol Agent Assist dan klik opsi menu Conversation profiles di sisi kiri halaman:
Halaman profil percakapan menampilkan daftar profil percakapan Anda. Untuk menggunakan simulator, klik tiga titik vertikal di paling kanan profil percakapan yang ingin Anda uji, lalu klik Use simulator. Halaman simulator akan muncul:
Di simulator, Anda dapat menguji performa profil percakapan dengan memasukkan teks dan mengevaluasi saran yang ditampilkan. Jika profil percakapan Anda dikonfigurasi untuk mengaktifkan lebih banyak fitur daripada smart compose, Anda dapat memilih fitur yang akan disertakan dalam simulasi dengan mengklik tombol Options di kanan atas halaman simulator dan membuat pilihan. Pastikan smart compose dipilih.
Contoh berikut menguji performa model smart compose saat pelanggan menghubungi agen manusia untuk membatalkan pesanan. Smart compose adalah satu-satunya fitur yang diuji dalam contoh ini (semua opsi lainnya, seperti smart reply, tidak dicentang di menu Options).
Pelanggan memulai percakapan dengan mengetik Hi. Agen manusia mulai merespons dengan mengetik H. Saran smart compose muncul dalam warna abu-abu setelah huruf ini diketik:
Agen memiliki opsi untuk menekan tombol tab guna menerima saran smart compose atau terus mengetik. Setiap kali agen mengetik karakter baru atau menekan tab untuk menerima saran, saran smart compose baru akan muncul. Saran akan otomatis dibuat hingga kalimat selesai. Dalam contoh ini, agen menekan tab untuk memilih saran How can I help, yang menghasilkan saran lain untuk ditambahkan ke kalimat:
Agen menekan tab lagi untuk menerima saran you today? dan mengirimkan respons kepada pelanggan. Pelanggan membalas dengan I want to cancel my order. Agen mulai mengetik respons yang meminta nomor pesanan pelanggan. Mengetik D akan menampilkan saran Don't have the option to cancel your order, yang bukan pesan yang ingin dikirim agen:
Daripada menerima saran, agen terus mengetik. Do menampilkan saran yang sama dengan D, sehingga agen memasukkan spasi untuk melanjutkan kalimatnya. Spasi akan menampilkan saran Do you know the order, yang diterima agen dengan menekan tab. Agen menerima saran smart compose berikutnya, yaitu number? untuk menyelesaikan kalimat: Do you know the order number?:
Pelanggan merespons dengan nomor pesanannya. Kemudian, agen ingin meminta pelanggan untuk menunggu sementara agen mencari nomor pesanan. O menampilkan saran One moment yang diterima agen. Saran berikutnya adalah while I pull yang juga diterima, lalu up your order. yang juga diterima. Agen mengirimkan kalimat yang telah selesai kepada pelanggan:
Smart compose akan membuat saran baru setiap kali agen manusia mengetik karakter di kotak respons hingga agen mengakhiri interaksinya dengan pelanggan dan mengakhiri percakapan.
(Opsional). Smart compose dapat digunakan bersama dengan smart reply. Anda harus membuat profil percakapan yang mengonfigurasi model smart compose dan smart reply untuk menguji kedua fitur sekaligus menggunakan simulator. Jika Anda mencentang kedua fitur di menu drop-down Options, agen manusia akan melihat balon yang berisi saran teks smart reply di bawah kotak respons:
Agen dapat memilih saran smart reply untuk menyalinnya ke kotak respons. Jika agen memilih untuk menambahkan kalimat lain atau menambahkan karakter ke saran, smart compose akan memberikan saran untuk menyelesaikan kalimat agen.