Demo itu mudah, penerapan sebenar tidak, sebab itulah kebanyakan projek ejen AI tersekat di antara keduanya. Inilah yang benar-benar disampaikan oleh khidmat siap sedia, dan apa yang tidak.
Demo bukan hasil yang diserahkan
Demo sentiasa berjalan lancar. Seseorang menaip soalan, ejen menjawab dalam suara jenama, semua yang hadir mengangguk, projek pun diluluskan. Tiga bulan kemudian syarikat yang sama memiliki chatbot yang mengendalikan empat soalan yang ditunjukkan kepadanya dan menyerahkan segala yang lain kepada manusia yang kini lebih sibuk daripada sebelumnya. Jurangnya bukan kecerdasan. Model-model itu luar biasa dan bertambah baik lebih pantas daripada kemampuan sesiapa menulis tentangnya. Jurangnya ialah segala-galanya di sekeliling model yang dilangkau senyap oleh demo: sambungan kepada data pesanan sebenar anda, peraturan tentang apa yang boleh dijanjikan oleh ejen, penyerahan apabila ia tidak tahu, rekod tentang apa yang diberitahunya kepada pelanggan pada hari Selasa lalu. Khidmat siap sedia ialah janji tentang kerja di sekeliling itulah. Mengetahui apa yang termasuk, dan apa yang tiada vendor mampu sertakan untuk anda, ialah beza antara membeli sebuah sistem dan membeli sebuah demo berserta invois.
Apa yang sebenarnya anda bayar
Ejen yang berfungsi dalam persekitaran sebenar terdiri daripada empat perkara, dan hanya satu daripadanya ialah model. Pertama ialah pengetahuan: jawapan, dasar, harga dan kes luar biasa yang dibenarkan untuk dirujuk oleh ejen, disusun menjadi sumber yang boleh dipercayai untuk dibacanya. Kedua ialah sambungan, iaitu paip ke sistem tempat realiti berada, supaya ejen boleh menyemak pesanan sebenar dan bukan menerangkan pesanan secara umum. Ketiga ialah kelakuan: skop apa yang boleh dikatakannya, nada penyampaiannya, perkara yang wajib ditolaknya, dan saat ia mesti berhenti lalu menyerahkan perbualan kepada manusia. Keempat ialah operasi, iaitu separuh yang tidak menarik dan tiada siapa mendemonstrasikannya — pengelogan, pemantauan, kawalan kos, dan cara membetulkan ejen apabila ia tersilap tanpa membinanya semula. Khidmat siap sedia dinilai harganya berdasarkan empat perkara itu, bukan berdasarkan tetingkap sembang yang terletak di atasnya.
Mengapa binaan dalaman tersekat pada lapan puluh peratus
Kebanyakan syarikat yang mencubanya secara dalaman pergi lebih jauh daripada jangkaan, kemudian berhenti. Versi pertama siap dalam dua minggu dan terasa seperti kemenangan. Dua puluh peratus yang terakhir mengambil masa lebih lama daripada lapan puluh peratus yang pertama dan jarang disiapkan, kerana di situlah kerja yang menyusahkan berada: pelanggan yang bertanya dua soalan serentak, pertanyaan bercampur bahasa Inggeris dan Melayu, permohonan bayaran balik yang tidak boleh sekali-kali diluluskan sendiri oleh ejen, hari apabila sistem di belakangnya menukar format data dan tiada siapa perasan selama seminggu. Tiada satu pun daripadanya sukar secara bersendirian. Ia sekadar ekor panjang kes yang tidak menarik yang tidak mampu diutamakan oleh pasukan yang sibuk berbanding segala tanggungjawab lain. Hasilnya ialah ejen yang mengagumkan dalam mesyuarat tetapi tidak dipercayai dalam operasi, dipintas senyap oleh kakitangan yang lebih rela menjawab mesej itu sendiri daripada mengambil risiko dengan apa yang mungkin dikatakannya.
Ejen AI siap sedia: apa yang benar-benar diserahkan
Ejen AI siap sedia sepatutnya tiba sebagai sistem yang berfungsi dengan seorang pemilik, bukan prototaip disertai e-mel penyerahan. Dalam amalan, projek yang serius bermula dengan dokumen skop yang menyenaraikan tugas khusus yang akan dilakukan oleh ejen dan, sama pentingnya, tugas yang akan ditolaknya. Senarai penolakan itu ialah muka surat paling bernilai dalam projek, kerana ejen yang menjawab dengan yakin soalan yang sepatutnya diserahkan kepada manusia merugikan lebih banyak kepercayaan daripada sepuluh soalan yang dijawabnya dengan baik. Selepas itu, pembinaan menyusun sumber pengetahuan, menyambungkan data pesanan, tempahan atau CRM anda, dan menetapkan peraturan eskalasi yang menentukan bila manusia mengambil alih.
Kemudian datang bahagian yang memisahkan sistem daripada demo: pengujian terhadap perbualan sebenar dan bukan perbualan rekaan. Mesej lampau dimainkan semula melalui ejen, kegagalan dicatatkan, dan kelakuannya diperbetulkan sehingga kes kegagalan menjadi membosankan. Penerapan menyusul pada saluran yang sememangnya digunakan pelanggan anda, yang di Malaysia biasanya bermakna WhatsApp sebelum apa-apa lagi, dan ia bermula secara sempit — satu tugas yang jelas, dipantau rapat — bukannya di semua tempat serentak. Apa yang patut anda terima di penghujungnya ialah konfigurasi, log, dokumentasi dan keupayaan mengubahnya tanpa perlu menghubungi sesiapa. Jika vendor tidak mampu menyerahkan semua itu, mereka bukan membina ejen untuk anda; mereka menyewakan satu kepada anda.
Apa yang patut ada dalam skop, baris demi baris
Sebelum menandatangani apa-apa, pastikan projek itu merangkumi lima perkara ini, kerana jurangnya sentiasa berada di tempat yang sama:
- Skop bertulis tentang tugas dan penolakan, menamakan apa yang dikendalikan ejen dari hujung ke hujung dan apa yang wajib diserahkan kepada manusia serta-merta, tanpa kesamaran di antaranya.
- Sambungan sistem sebenar, supaya ejen membaca data pesanan, tempahan atau pelanggan yang hidup dan bukan cebisan statik yang menjadi lapuk dalam sebulan.
- Pengujian terhadap sejarah perbualan sebenar anda, bukan soalan contoh rekaan, dengan kes kegagalan didokumenkan dan diperbaiki sebelum pelancaran dan bukan ditemui oleh pelanggan.
- Pengelogan dan semakan penuh, bermakna setiap pertukaran mesej boleh diperiksa kemudian, supaya aduan dapat disemak terhadap apa yang sebenarnya dikatakan oleh ejen.
- Pemilikan ketika keluar, merangkumi konfigurasi, gesaan, pangkalan pengetahuan dan integrasi, supaya menukar rakan kongsi ialah satu keputusan dan bukan pembinaan semula.
Ejen AI siap sedia: soalan lazim
- Berapa lama masa diambil untuk menerapkan ejen AI siap sedia? — Satu tugas yang berskop kemas biasanya bergerak daripada skop kepada langsung dalam beberapa minggu dan bukan bulan, dan garis masanya lebih ditentukan oleh akses kepada sistem serta kandungan anda berbanding kerja AI itu sendiri.
- Adakah ejen akan menggantikan pasukan sokongan kami? — Ia sepatutnya menyerap jumlah pertanyaan berulang dan menyerahkan selebihnya dengan kemas, yang biasanya bermakna pasukan yang sama mengendalikan perbualan yang lebih sukar, bukan pasukan yang lebih kecil mengendalikan semuanya.
- Apa yang berlaku apabila ejen tidak tahu jawapannya? — Ejen yang dibina dengan betul akan mengaku dan menyerahkannya kepada manusia, kerana jawapan salah yang penuh yakin merugikan lebih banyak kepercayaan berbanding penyerahan yang jujur, dan kelakuan itu ialah keputusan reka bentuk dan bukan kebetulan.
- Adakah kami memiliki ejen itu pada akhir projek? — Konfigurasi, pangkalan pengetahuan dan integrasi sepatutnya menjadi milik penuh anda, dan mana-mana rakan kongsi yang enggan menulisnya hitam putih sedang menjual kebergantungan dan bukan keupayaan.
Teruskan membaca
Bina sesuatu yang
dipercayai.
Beritahu kami apa yang melambatkan perniagaan anda. Kami tunjukkan sistem yang membaikinya — dan secepat mana.