Banyak perusahaan sudah menyetujui proyek AI pertamanya. Ada yang memasang asisten untuk membalas pertanyaan pelanggan, ada yang memakai AI untuk membaca invoice pemasok. Beberapa bulan kemudian, pemilik bisnis bertanya apakah proyek itu sepadan dengan biayanya, dan tidak ada yang bisa menjawab dengan yakin. Penyebabnya hampir selalu sama. Tidak ada yang mencatat kondisi sebelum AI dipasang.
Mengukur ROI proyek AI sebenarnya tidak rumit, asalkan disiapkan sejak awal. Artikel ini membahas apa yang perlu diukur, bagaimana menyusun pilot yang adil, dan kesalahan yang sering membuat angka ROI terlihat lebih baik atau lebih buruk dari kenyataannya.
Mulai dari baseline
Baseline adalah gambaran proses Anda hari ini, sebelum ada AI. Tanpa baseline, setiap klaim penghematan hanya perkiraan. Ambil satu proses yang ingin dibantu AI, lalu catat selama beberapa minggu kerja normal:
- Berapa banyak pekerjaan yang masuk, misalnya jumlah invoice, tiket, atau pesan pelanggan per hari.
- Berapa lama satu pekerjaan diselesaikan, dari mulai dikerjakan sampai selesai.
- Berapa sering terjadi kesalahan atau revisi.
- Berapa lama pelanggan atau tim lain menunggu hasilnya.
- Siapa yang mengerjakan dan berapa jam kerja yang terpakai.
Catatan ini tidak harus sempurna. Spreadsheet sederhana yang diisi admin setiap hari sudah jauh lebih berguna daripada ingatan. Contohnya, klinik yang ingin memakai AI untuk membalas pertanyaan jadwal dokter cukup mencatat jumlah chat per hari dan berapa lama pasien menunggu balasan pertama.
Cara mengukur ROI proyek AI
ROI yang jujur melihat beberapa sisi sekaligus. Fokus hanya pada penghematan waktu sering menyesatkan.
Waktu yang dihemat
Bandingkan waktu per pekerjaan sebelum dan sesudah AI. Hitung juga waktu yang dipakai untuk memeriksa hasil AI, karena waktu review ini sering dilupakan. Setelah itu, cari tahu waktu yang dihemat dipakai untuk apa. Jika staf admin bisa menangani lebih banyak pesanan tanpa lembur, itu manfaat nyata. Jika waktunya tidak terpakai untuk hal lain, penghematan itu belum menjadi nilai bagi bisnis.
Kualitas hasil
AI yang cepat tetapi sering salah justru menambah pekerjaan. Ukur tingkat kesalahan dengan cara yang sama seperti saat baseline, misalnya jumlah invoice yang salah input atau jawaban pelanggan yang perlu dikoreksi. Siapkan sekumpulan contoh nyata dengan jawaban yang benar, lalu uji AI secara berkala terhadap contoh tersebut.
Adopsi
Fitur AI yang tidak dipakai tidak menghasilkan apa-apa. Lihat berapa banyak staf yang benar-benar memakainya setiap minggu dan untuk berapa banyak pekerjaan. Adopsi yang rendah biasanya memberi petunjuk, entah alurnya merepotkan, hasilnya kurang dipercaya, atau staf belum dilatih.
Biaya
Biaya proyek AI lebih dari tagihan API. Masukkan biaya pengembangan atau langganan, biaya API per bulan, waktu tim untuk review dan perawatan, serta biaya memperbaiki kesalahan. Biaya API juga naik seiring volume, jadi hitung biaya per pekerjaan, tidak hanya total bulanan.
Setelah keempat sisi ini tercatat, rumus ROI-nya sederhana. Nilai manfaat dikurangi total biaya, lalu dibagi total biaya. Bagian yang sulit adalah memberi nilai rupiah pada manfaat seperti balasan pelanggan yang lebih cepat. Sepakati cara menghitungnya bersama pemilik bisnis sebelum pilot dimulai, supaya tidak diperdebatkan setelah hasilnya keluar.
Menyiapkan pilot yang adil
Pilot adalah uji coba terbatas sebelum AI dipakai di seluruh perusahaan. Pilot yang adil memberi jawaban yang bisa dipercaya, baik hasilnya bagus maupun tidak. Langkah berikut bisa Anda pakai:
- Pilih satu proses dengan volume cukup dan hasil yang mudah diukur.
- Tetapkan metrik dan target sebelum pilot dimulai, lalu jangan diubah di tengah jalan.
- Pakai data dan pengguna nyata, termasuk kasus yang sulit dan dokumen yang berantakan.
- Jika memungkinkan, jalankan kelompok pembanding yang tetap bekerja dengan cara lama.
- Jalankan cukup lama untuk melewati satu siklus kerja penuh, termasuk hari sibuk.
- Catat semua biaya, termasuk jam kerja tim untuk menyiapkan dan memeriksa.
- Akhiri dengan keputusan yang jelas: lanjut, ubah, atau hentikan.
Menghentikan pilot yang tidak berhasil juga hasil yang berharga. Anda mendapat jawaban dengan biaya kecil, sebelum investasi yang lebih besar.
Kesalahan yang membuat angka ROI menyesatkan
Beberapa kesalahan muncul berulang kali di berbagai perusahaan. Yang pertama adalah menghitung penghematan dari demo. Demo memakai contoh yang rapi, sedangkan pekerjaan sehari-hari penuh dokumen buram dan pertanyaan yang tidak terduga. Kedua, membandingkan periode yang berbeda musimnya. Distributor yang membandingkan bulan menjelang Lebaran dengan bulan biasa akan mendapat angka yang tidak berarti apa-apa.
Kesalahan ketiga adalah menganggap jam yang dihemat otomatis menjadi uang. Selama jumlah staf dan beban kerja tidak berubah, nilai sebenarnya ada pada apa yang bisa dikerjakan tim dengan waktu tambahan itu. Terakhir, banyak tim mengabaikan biaya jangka panjang. Model diperbarui, prompt perlu disesuaikan, dan kualitas perlu dipantau setelah rilis. Semua itu bagian dari biaya.
Proyek AI yang terukur sejak awal
Lewat layanan Integrasi AI, Averoa membangun fitur AI di dalam aplikasi dan proses yang sudah Anda jalankan, dengan evaluasi memakai data nyata dan kontrol biaya model sejak awal. Kami bisa membantu Anda menyusun baseline dan pilot sebelum proyek diperluas.
