Studi Kasus

Pilot berhasil dan rollout tidak

Pilot berhasil karena semua pihak yang terlibat menyadari bahwa itu adalah pilot. Sifat-sifat yang membuatnya berhasil — audiens yang toleran, korpus kecil, perbaikan manual di tepi-tepi — adalah sifat-sifat yang tidak dapat diwariskan oleh rollout.

Jarak yang tidak ada rencana

Pilot selesai dengan baik. Sebuah kelompok sukarelawan menggunakan sistem selama satu kuartal dan melaporkan bahwa itu menghemat waktu mereka. Keputusan diambil untuk menggelar sistem tersebut ke semua orang. Dalam sebulan, penggunaan sistem hanya sebagian kecil dari apa yang diprediksi oleh pilot dan kelompok pilot membela alat yang sebagian besar organisasi telah diam-diam meninggalkan.

Sistem tidak berubah. Populasi berubah, dan populasi tidak pernah menjadi bagian dari desain.

Tiga sifat yang pilot tidak bisa beritahu tentang

Sukarelawan toleran. Orang-orang yang memilih untuk bergabung dalam pilot tertarik dengan kesuksesannya, dan mereka mengkompensasi kegagalan dengan mengulangi, mencoba lagi, dan memeriksa hasil. Tidak ada dalam perilaku mereka yang memberitahu apakah kualitas yang sama bertahan pada pengguna yang diberitahu untuk menggunakan alat dan tidak memiliki minat pada kesuksesannya.

Perbaikan manual adalah persyaratan yang tidak terlihat. Selama pilot, seseorang mengunggah dokumen lagi, memperbaiki prompt, atau memperbaiki entri indeks dengan tangan setiap minggu. Intervensi tersebut menjaga kualitas yang diukur tetap tinggi sementara menyembunyikan pekerjaan teknik yang diperlukan untuk penggelaran. Inventori yang jujur adalah daftar apa yang dilakukan manusia di sekitar sistem, dan setiap item adalah either otomatis atau diterima sebagai biaya permanen.

Adopsi diukur salah. Survei kepuasan mengukur antusiasme, yang pilot miliki dalam jumlah berlebih. Apa yang memprediksi penggelaran adalah repetisi: bagian pengguna yang kembali tanpa dipicu dalam minggu-minggu berturut-turut, dan bagian alur kerja target yang sebenarnya berpindah ke alat daripada diduplikasi di sekitarnya.

Apa yang harus dikumpulkan sebelum keputusan penggelaran

  • Pengguna yang kembali setiap minggu, bukan total pengguna. Pilot dengan tiga puluh partisipan dan lima yang kembali adalah produk lima orang dengan penonton antusias.
  • Daftar tertulis dari setiap intervensi manual yang dilakukan selama pilot, dengan pemilik dan keputusan untuk masing-masing.
  • Tingkat kegagalan pada pengguna yang paling tidak seperti kelompok pilot — mereka yang bergabung terlambat, atau yang ditambahkan karena reorganisasi daripada karena mereka meminta.
  • Biaya pilot pada skala penggelaran, termasuk beban dukungan yang saat ini jatuh pada tim pilot sebagai efek sampingan dari antusiasme mereka.
  • Satu alur kerja, didefinisikan dengan cukup sempit sehingga kesuksesan tidak ambigu, daripada platform yang diharapkan menyerap beberapa.

Menggelar secara terus-menerus

Penggelaran masih biasanya keputusan yang tepat; kesalahan adalah menganggapnya sebagai perluasan dari hal yang sama daripada penerapan baru dengan populasi baru. Jalankan dalam kohort, pertahankan instrumentasi yang mengukur pengguna yang kembali selama pilot, dan staf kohort pertama dengan perhatian yang sama seperti yang diterima pilot. Mode kegagalan bukanlah produk yang buruk, melainkan pilot yang baik yang salah dianggap sebagai bukti tentang orang asing.

Yang bisa Anda lakukan sekarang

  • Pilot berhasil sebagian karena peserta mentolerir batang kualitas yang lebih rendah
  • Setiap perbaikan manual yang diterapkan selama pilot adalah kebutuhan yang belum dibangun
  • Ukur adopsi selama pilot, bukan kepuasan