Seperti apa pilot pada umumnya
Seseorang di bisnis diminta untuk “melakukan sesuatu dengan AI”. Vendor atau tim internal memilih satu proses — faktur, klaim, keluhan — lalu membuat demo. Demo itu membaca PDF berbahasa Inggris yang rapi, mengisi kolom-kolomnya, dan menyarankan jawaban. Demonya lancar. Semua orang sepakat hasilnya mengesankan.
Enam bulan kemudian, itu masih sebuah demo. Tidak ada yang mematikannya; ia hanya tidak pernah menjadi cara pekerjaan dilakukan. Tim masih mengetik ulang, mengejar kekurangan, dan memutuskan dengan cara yang sama seperti sebelumnya.
Di kawasan ini, itulah hasil yang lazim, bukan pengecualian. Saat orang menjelaskannya, biasanya modelnya yang disalahkan: kurang akurat, belum siap untuk dokumen kami. Itu jarang alasan yang sebenarnya.
Empat hal yang dilewatkan
Input yang nyata. Demo membaca PDF yang rapi. Pekerjaan nyata datang berupa foto faktur dari ponsel, hasil pindai dengan stempel menutupi totalnya, pesan WhatsApp dengan tiga lampiran dan satu pesan suara, email yang sudah diteruskan dua kali. Pilot yang tidak pernah melihat input nyata belum benar-benar diuji.
Sistemnya. Sebuah keputusan membutuhkan fakta yang tidak ada di dokumen: apakah pemasok ini dikenal, apakah ada purchase order yang masih terbuka, apakah klaim ini pernah masuk sebelumnya, berapa yang dibayar pelanggan. Jika pilot tidak bisa membaca sistem akuntansi, sistem inti, atau CRM Anda, ia hanya bisa menebak. Jika ia tidak bisa menuliskan hasilnya kembali, tetap ada orang yang harus mengetiknya.
Bahasanya. Thai, Vietnam, Bahasa, Tagalog, dan Inggris, sering bercampur dalam satu halaman atau satu percakapan. Model yang membaca bahasa Inggris dengan baik dan bahasa lain seadanya akan gagal justru pada dokumen dan pesan yang membentuk sebagian besar volume.
Proses peninjauan dan persetujuan. Ada orang yang bertanggung jawab atas setiap keputusan. Pilot yang menghasilkan jawaban tanpa tempat bagi orang itu untuk memeriksa, mengoreksi, dan menyetujui tidak memberinya alasan untuk percaya, dan tidak memberinya cara untuk menjelaskan sebuah keputusan kepada auditor, regulator, atau pelanggan di kemudian hari.
Mengapa kualitas model jarang menjadi penyebabnya
Model saat ini membaca dokumen dengan baik, dan model kecil bisa di-tuning dengan dokumen dan bahasa Anda sendiri dengan biaya rendah. Ketika sebuah pilot gagal, hampir tidak pernah karena pembacaannya mustahil. Penyebabnya adalah pembacaan itu satu-satunya bagian yang dibangun.
Sisanya — koneksi ke sistem Anda, penanganan kanal yang berantakan, aturan yang sudah diikuti tim Anda, daftar keputusan, layar peninjauan, catatannya — adalah pekerjaan engineering yang tidak glamor. Itu juga sebagian besar pekerjaannya, dan itulah yang menentukan apakah hasilnya dipakai orang.
Apa yang sebenarnya dibutuhkan untuk “sampai ke produksi”
Sebuah proses sudah sampai ke produksi ketika kasus masuk lewat kanal yang nyata, agen menanganinya menggunakan sistem Anda yang nyata, keputusan ditulis kembali ke tempatnya, kasus yang meragukan diteruskan ke orang yang ditunjuk, dan setiap langkah tercatat cukup baik untuk menjawab “mengapa?” berbulan-bulan kemudian.
Dan satu hal lagi: seseorang yang berwenang sudah melihat angkanya — berapa banyak yang ditangani, seberapa sering keliru, berapa biaya masing-masing — dan memutuskan untuk mengaktifkannya. Tanpa keputusan itu, ia tetap sebuah pilot, sebaik apa pun kerjanya.
Bagaimana metode ini menjawab masing-masing
Petakan mendokumentasikan proses yang sebenarnya sebelum apa pun dibangun: setiap kanal tempat pekerjaan masuk, setiap sistem yang tersentuh, daftar keputusan, siapa yang memutuskan saat ini, dan apa yang dibutuhkan auditor. Tidak ada yang diasumsikan dari sampel yang rapi.
Ukur dijalankan pada 200–500 faktur, klaim, atau pengajuan lampau Anda, dalam bahasa Anda, dengan hasil yang sudah diketahui. Asesmen menunjukkan berapa porsi yang akan ditangani agen, di mana ia akan keliru, dan berapa nilainya, sebelum Anda berkomitmen pada pembangunan. Jika angkanya tidak masuk, kami akan mengatakannya.
Uji paralel membangun koneksi, aturan, dan layar tinjauan, lalu berjalan pada data nyata berdampingan dengan tim Anda tanpa ada yang dieksekusi. Peninjau Anda melihat setiap langkah; Anda melihat angkanya setiap minggu.
Aktifkan adalah keputusan Anda, satu jenis keputusan demi satu. Pembayaran dan pengembalian dana tetap di tangan orang sampai angkanya berkata lain.
Tidak ada yang canggih dari semua ini. Ini adalah pekerjaan yang dilewatkan sebagian besar pilot.