5.8 Riset desain dan uji kegunaan

Tinjauan dan motivasi

Riset pengguna adalah disiplin mempelajari orang yang Anda bangun untuknya: tujuan mereka, konteks, tugas, dan rintangan yang menjegal mereka. Nilai intinya adalah pengurangan risiko. Kesalahan termahal dalam perangkat lunak bukan bug atau tenggat terlewat; melainkan membangun hal yang salah dengan baik, lalu menemukan setelah peluncuran bahwa tak ada yang membutuhkannya atau tak ada yang dapat memakainya. Riset membeli turun risiko itu dengan murah, sebelum Anda menuangkan rekayasa ke arah yang ternyata salah. Bab 5.1 meletakkan fondasi UX; bab ini mendalami dua mesin yang menjaga fondasi itu tetap jujur, riset generatif yang memberi tahu apa yang dibangun dan riset evaluatif yang memberi tahu apakah yang Anda bangun benar-benar berfungsi.

Bagi tim besar taruhannya berlipat. Ketika banyak skuad merilis ke satu produk, masing-masing membuat taruhan tentang pengguna setiap sprint, dan tanpa kebiasaan riset bersama taruhan itu sekadar opini yang mengenakan kostum keyakinan. Arus kecil dan stabil bukti memberi semua orang kenyataan yang sama untuk diperdebatkan, sehingga debat berakhir dengan “mari kita tonton beberapa pengguna” alih-alih dengan siapa yang paling senior atau paling lantang. Riset juga berpindah: satu studi yang dijalankan baik dapat mengoreksi asumsi selusin tim sekaligus, jika Anda menangkap dan membagikannya dengan baik.

Enterprise dan pemerintah menaikkan standar lagi. Perangkat lunak enterprise sering punya pengguna terikat yang tidak dapat berhenti, sehingga perkakas yang tak dapat dipakai dibayar dalam galat, pelatihan, dan jam hilang alih-alih churn yang terlihat di dasbor. Layanan pemerintah menjangkau seluruh publik, termasuk orang dalam krisis, pada ponsel lama, dengan kepercayaan diri digital rendah, atau tanpa pilihan lain. Banyak standar layanan digital nasional kini mewajibkan riset pengguna justru karena alasan ini, karena formulir yang tak dapat diselesaikan siapa pun menolak orang tunjangan yang menjadi hak mereka. Di sini riset bukan basa-basi. Ia cara Anda menepati janji publik.

Prinsip utama

Riset mengurangi risiko membangun hal yang salah; paling murah sebelum Anda membangun, bukan sesudah.
Riset generatif menemukan masalah yang tepat; riset evaluatif memeriksa solusi. Anda butuh keduanya.
Tonton apa yang dilakukan orang, bukan hanya yang mereka katakan; preferensi yang dinyatakan dan perilaku nyata menyimpang.
Metode kualitatif menjelaskan mengapa; metode kuantitatif mengukur berapa banyak. Padukan.
Kecil dan berkelanjutan mengalahkan jarang dan berat. Beberapa pengguna setiap minggu belajar lebih banyak daripada satu studi besar setahun.
Temuan Anda hanya sekadar representatif seperti pesertanya, jadi rekrut dengan sengaja, termasuk pengguna disabilitas dan sulit dijangkau.
Wawasan yang hidup di dek slide satu tim hilang. Tangkap riset agar seluruh organisasi dapat memakainya ulang.
Bias merayap lewat pertanyaan mengarahkan dan sintesis berharap-harap; rancang melawannya dengan sengaja.

Rekomendasi

Pisahkan riset generatif dari riset evaluatif

Eksplisitlah tentang pertanyaan mana yang Anda ajukan, karena metodenya berbeda. Riset generatif (atau penemuan) bersifat terbuka dan menjelajahi ruang masalah sebelum Anda punya solusi: Apa yang sebenarnya ingin dicapai orang? Di mana pengalaman saat ini menyakitkan? Apa yang mereka siasati? Riset evaluatif menguji desain spesifik terhadap tugas: Dapatkah orang menyelesaikannya, dan di mana mereka tersandung? Mencampuradukkan keduanya membuang keduanya. Menjalankan sesi uji kegunaan yang diskrip ketat ketika Anda belum memahami masalah memberi Anda jawaban mengilap untuk pertanyaan yang salah, sementara obrolan tak terstruktur ketika Anda perlu memvalidasi alur checkout membuat Anda menebak. Namai pertanyaan riset lebih dulu, lalu pilih metode, dan umpankan temuan generatif ke penemuan produk (bab 10.14) di mana peta jalan benar-benar dibentuk.

Cocokkan metode dengan pertanyaan

Tidak ada metode serba guna, hanya kecocokan. Wawancara pengguna memunculkan motivasi, model mental, dan riwayat, dan ia kuda beban Anda untuk penemuan. Contextual inquiry, di mana Anda mengamati orang mengerjakan pekerjaan nyata di lingkungan mereka sendiri, mengungkap siasat dan gangguan yang tak pernah disebut orang di ruang rapat. Survei mengukur sikap dan frekuensi di populasi besar tetapi tidak dapat menjelaskan alasan di baliknya, dan menghukum desain pertanyaan yang ceroboh dengan brutal. Card sorting dan tree testing menurunkan dan memvalidasi arsitektur informasi dari model mental pengguna: card sorting meminta orang mengelompokkan dan melabeli konsep, sementara tree testing memeriksa apakah mereka dapat menemukan sesuatu dalam struktur yang diusulkan. Studi diari menangkap perilaku yang terungkap selama hari atau minggu, seperti onboarding atau pembentukan kebiasaan, yang tak dapat dilihat satu sesi. Heuristik sederhana: pakai wawancara dan contextual inquiry untuk memahami orang, card sorting dan tree testing untuk menstrukturkan informasi, survei dan studi diari untuk melihat lintas waktu dan skala, dan uji kegunaan untuk memeriksa desain.

Jalankan uji kegunaan lebih awal, sering, dan kecil

Uji kegunaan adalah metode evaluatif berpengungkit tertinggi, dan Anda dapat memulainya dengan sketsa kertas jauh sebelum kode ada. Heuristik terkenalnya adalah sekitar lima pengguna per putaran memunculkan sebagian besar masalah kegunaan yang parah dan jelas, jadi lebih baik menjalankan tiga putaran lima seiring desain berevolusi daripada satu studi besar lima belas di akhir. Pahami batas heuristik itu, namun. Lima pengguna cukup hanya untuk satu kelompok homogen yang menemukan masalah besar; ia tidak mengukur tingkat keberhasilan, tidak mencakup segmen pengguna berbeda (setiap kelompok yang berbeda secara berarti membutuhkan segelintir sendiri), dan tidak menangkap isu langka-tetapi-parah. Pilih pengujian termoderasi ketika Anda ingin menyelidiki penalaran, beradaptasi seketika, dan menangani tugas kompleks atau sensitif, dan pengujian tak termoderasi ketika Anda ingin kecepatan, volume, jangkauan geografis, dan biaya lebih rendah untuk alur lugas. Kebanyakan tim matang menjalankan keduanya: termoderasi untuk memahami, tak termoderasi untuk mengonfirmasi pada skala besar.

Tulis tugas dan pertanyaan yang tidak mengarahkan saksi

Studi Anda hanya sekadar tepercaya seperti protokolnya, dan cara tercepat merusaknya adalah memberi isyarat jawaban yang Anda harapkan. Beri peserta tujuan realistis, bukan instruksi: katakan “Anda baru pindah rumah dan perlu memperbarui alamat Anda” alih-alih “klik tombol Edit Profil dan ubah alamat Anda.” Tanyakan tentang perilaku masa lalu alih-alih niat masa depan, karena “apakah Anda akan memakai ini?” andal menghasilkan kebohongan sopan sementara “ceritakan tentang terakhir kali Anda melakukan ini” menghasilkan fakta. Hindari pertanyaan yang mengasumsikan kesimpulannya sendiri, dan waspadai bias konfirmasi, kecenderungan manusia memperhatikan dan mengingat bukti yang mendukung apa yang sudah dipercaya. Peneliti yang menulis desain tidak boleh diam-diam melatih peserta menuju keberhasilan, dan tim yang menonton harus mencatat apa yang terjadi sebelum memperdebatkan artinya. Ketika Anda memisahkan desain dan komunikasi tugas dari desain produk (bab 5.4), Anda mendapat sinyal lebih bersih.

Rekrut peserta yang benar-benar mewakili pengguna Anda

Temuan mewarisi bias perekrutan Anda. Jika Anda hanya menguji dengan sukarelawan yang percaya diri, terhubung, dan nyaman teknologi, Anda akan mengirim sesuatu yang berfungsi indah bagi orang yang nyaris tak butuh bantuan dan gagal bagi orang yang paling membutuhkannya. Definisikan segmen Anda, lalu rekrut terhadapnya dengan sengaja, termasuk pengguna disabilitas yang bergantung pada teknologi bantu (bab 5.3) dan kelompok sulit dijangkau seperti orang dalam krisis, orang dengan kepercayaan diri digital rendah, pengguna lebih tua, dan yang berada pada koneksi lambat atau perangkat lama. Menjangkau peserta ini memakan upaya lebih dan sering kemitraan dengan organisasi komunitas, insentif yang tepat, dan logistik fleksibel, tetapi melewatkannya tidak membuat pengguna itu lenyap; ia hanya memindahkan penemuan ke produksi, di mana jauh lebih mahal dan jauh lebih merugikan. Saring dengan cermat agar Anda mendapat anggota sejati segmen alih-alih penguji profesional yang mempermainkan insentif.

Sintesiskan temuan menjadi keputusan, bukan sekadar laporan

Pengamatan mentah bukan wawasan. Kerja sintesis adalah mengubah tumpukan catatan sesi menjadi sejumlah kecil keputusan yang dapat ditindaklanjuti tim. Affinity mapping, mengelompokkan pengamatan individual menjadi tema (praktik di balik diagram afinitas), adalah langkah standar untuk membuat pola terlihat lintas sesi. Untuk studi yang berat wawancara, analisis tematik ringan menjaga Anda jujur tentang tema mana yang sebenarnya didukung data. Gulung pola tahan lama ke model bersama dari bab 5.1, persona berbasis bukti dan peta perjalanan, agar wawasan berlipat alih-alih menguap. Ujian sintesis yang baik sederhana: apakah keputusan berubah? Studi yang menghasilkan dek indah dan tak ada butir peta jalan yang berubah adalah teater. Akhiri setiap studi dengan daftar temuan berperingkat singkat dan tindakan yang direkomendasikan untuk masing-masing.

Lakukan triangulasi riset kualitatif dengan analitik dan eksperimen

Riset kualitatif dan data kuantitatif menjawab dua separuh pertanyaan yang sama, dan masing-masing menutup titik buta yang lain. Riset menjelaskan mengapa pengguna berperilaku demikian tetapi hanya melihat segelintir orang di ruangan; analitik dan eksperimen (bab 7.4) melihat seluruh populasi tetapi tidak dapat menjelaskan motivasi atau menangkap masalah orang yang tak pernah menjadi pengguna. Pakai sebagai lingkaran: analitik menunjukkan penurunan, riset menjelaskannya, desain ulang mengatasinya, dan eksperimen mengukur apakah perbaikan menggerakkan angka. Ketika sinyal kualitatif dan kuantitatif tidak sepakat, perlakukan kontradiksi sebagai petunjuk alih-alih gangguan, karena biasanya salah satunya mengukur sesuatu yang tidak Anda sadari. Tak satu sumber pun adalah bos yang lain; keputusan datang dari membaca keduanya bersama.

Bangun operasi riset agar riset berskala

Begitu lebih dari dua tim melakukan riset, hambatan berhenti menjadi metode dan menjadi logistik: perekrutan, penjadwalan, persetujuan, insentif, penyimpanan catatan, dan menemukan studi kuartal lalu sebelum seseorang mengulangnya. Operasi riset (ResearchOps) adalah praktik menjadikan mesin itu andal. Investasikan pada repositori wawasan yang dapat dicari agar temuan ditandai, dapat ditemukan, dan dapat dipakai ulang lintas tim; sistem manajemen peserta yang menghormati persetujuan, privasi, dan seberapa sering Anda menghubungi orang; dan irama riset reguler agar studi menjadi kebiasaan stabil alih-alih perebutan. Mendemokratisasi riset, membiarkan non-peneliti menjalankan sebagian studi, layak dilakukan tetapi hanya dengan pagar pembatas: templat, pelatihan, dan tinjauan, agar Anda menskalakan volume pembelajaran tanpa menskalakan volume protokol buruk dan kesimpulan bias.

Trade-off: kelebihan dan kekurangan

Metode	Terbaik untuk	Kelebihan	Kekurangan
Wawancara pengguna	Penemuan, motivasi	Mengapa yang dalam, fleksibel, murah dimulai	N kecil, rawan bias pewawancara
Contextual inquiry	Perilaku dunia nyata	Mengungkap siasat dan konteks	Memakan waktu, sulit dijadwalkan
Survei	Sikap pada skala besar	N besar, dapat dikuantifikasi	Tidak dapat menjelaskan mengapa, mudah ditulis buruk
Card sorting dan tree testing	Arsitektur informasi	Membumikan struktur pada model mental	Cakupan sempit, butuh analisis cermat
Studi diari	Perilaku seiring waktu	Menangkap pola longitudinal	Putus tinggi, upaya peserta
Uji kegunaan termoderasi	Memahami desain	Menyelidiki, adaptif, kaya	Lebih lambat, lebih mahal, berat penjadwalan
Uji kegunaan tak termoderasi	Mengonfirmasi pada skala besar	Cepat, murah, luas secara geografis	Tanpa tindak lanjut, dangkal pada tugas kompleks

Ketegangan pusatnya adalah kedalaman versus skala, dan penyelesaiannya pengurutan alih-alih pemilihan. Gunakan metode dalam, kualitatif, N-kecil untuk memahami dan menghasilkan hipotesis, lalu gunakan metode luas, kuantitatif untuk mengukur dan mengonfirmasi. Ketegangan kedua adalah kecepatan versus ketelitian: riset ringan berkelanjutan menjaga tim belajar setiap minggu, tetapi kecepatan yang sama yang membuatnya berharga membuatnya mudah memotong sudut pada perekrutan dan protokol. Selesaikan dengan mencocokkan ketelitian dengan keterbalikan. Belanjakan kehati-hatian metodologis nyata pada keputusan yang mahal dibalik (alur inti, arsitektur informasi, taruhan platform) dan bergeraklah cepat dan longgar pada detail yang dapat Anda ubah sprint berikutnya.

Pertanyaan untuk didiskusikan dengan tim Anda

Ketika kita membuat taruhan produk, potongan riset terkecil apa yang akan mengubah pikiran kita, dan apakah kita bersedia menjalankannya sebelum berkomitmen? Tim menyukai riset secara prinsip dan melewatkannya di bawah tekanan tenggat, jadi pertanyaan sebenarnya apakah bukti punya wewenang atas peta jalan sama sekali. Putuskan di muka apa yang dihitung sebagai bukti yang menyangkal, karena studi yang akan Anda abaikan apa pun hasilnya membuang waktu semua orang dan merupakan bentuk teater. Ini paling penting untuk keputusan yang mahal dibalik, di mana seminggu penemuan sepele dibanding berbulan-bulan membangun hal yang salah. Bawa keputusan saat ini dan sebut, keras-keras, temuan yang akan membuat Anda berganti arah. Jika tak ada temuan yang dapat mengubahnya, Anda tidak melakukan riset, Anda mengumpulkan penghiburan, dan Anda harus entah berkomitmen dengan jujur atau membuka kembali keputusan itu.
Apakah orang yang kita uji benar-benar tampak seperti orang yang memakai produk, terutama yang paling kesulitan? Nyaman merekrut sukarelawan yang percaya diri, terhubung, dan tersedia, dan kenyamanan itu menghasilkan pembacaan yang memuji dan palsu tentang seberapa dapat dipakai produk Anda sebenarnya. Pengguna yang paling membutuhkan perangkat lunak berfungsi baik, pengguna disabilitas, orang dalam krisis, orang dengan kepercayaan diri digital rendah, biasanya yang tersulit direkrut, sehingga mereka diam-diam jatuh dari sampel kecuali Anda memperjuangkan mereka. Tarik demografi peserta dari tiga studi terakhir Anda dan letakkan di samping basis pengguna nyata atau kewajiban layanan publik Anda. Jika condong ke pengguna yang mudah dijangkau, keyakinan Anda keliru, dan Anda harus memperbaiki jalur perekrutan, bermitra dengan organisasi komunitas, dan menyesuaikan insentif sebelum memercayai putaran temuan lain.
Di mana temuan riset kita hidup, dan dapatkah tim lain menemukan dan memakainya ulang enam bulan dari sekarang? Dalam organisasi besar pertanyaan yang sama diriset berulang kali karena tak ada yang dapat menemukan jawaban yang sudah dibayar tim pertama, yang pemborosan murni berkostum ketelitian. Putuskan siapa yang memiliki repositori wawasan, bagaimana studi ditandai dan diringkas, dan apa tulisan minimum yang layak agar menangkap temuan cukup cepat sehingga orang benar-benar melakukannya. Pertimbangkan apa yang terjadi pada persetujuan dan privasi peserta saat temuan dipakai ulang dan dibagikan, karena pemakaian ulang tanpa kehati-hatian adalah masalah kepatuhan dan kepercayaan. Bawa satu keputusan terbaru dan coba telusuri bukti di baliknya. Jika Anda tidak dapat menemukan studi dalam beberapa menit, riset Anda menguap lebih cepat daripada yang Anda hasilkan.
Ketika kita mengutip aturan “sekitar lima pengguna,” berapa segmen berbeda yang sebenarnya dilayani produk ini, dan apakah kita menguji sampel nyata masing-masing? Heuristik lima pengguna menjadi jebakan ketika produk punya beberapa kelompok pengguna yang berbeda secara berarti, karena lima peserta dari satu kelompok tidak memberi tahu apa-apa tentang yang lain, namun angka itu dikutip seolah satu putaran menyelesaikan urusan semua orang. Bagi tim besar yang merilis ke produk bersama, segmen berlipat cepat: peran, wilayah, perangkat, kebutuhan aksesibilitas, dan tingkat keahlian berbeda, dan setiap kelompok yang berbeda secara berarti membutuhkan segelintir sendiri. Tekanan yang bersaing adalah biaya dan jadwal, karena menguji setiap segmen setiap putaran itu mahal, jadi putuskan segmen mana yang membawa risiko terbanyak, cakup itu setiap putaran, dan rotasi sisanya. Bawa peta segmen aktual Anda dan jumlah peserta per segmen dari putaran terbaru, dan jujurlah kelompok mana yang tak pernah Anda tonton. Dalam pengaturan enterprise dan pemerintah, di mana pengguna terikat dan kewajiban layanan publik berarti segmen yang diabaikan tidak dapat sekadar churn, segmen tak teruji adalah populasi yang Anda kecewakan diam-diam, dan celah itu termasuk dalam rencana sebagai cakupan eksplisit alih-alih statistik yang dirata-ratakan.
Siapa yang boleh menjalankan studi di sini, dan apa yang menghentikan penggemar tak terlatih menghasilkan omong kosong yang yakin pada skala besar? Mendemokratisasi riset memungkinkan lebih banyak tim belajar lebih cepat, tetapi tanpa templat, pelatihan, dan tinjauan ia juga menskalakan protokol bias, pertanyaan mengarahkan, dan sintesis berharap-harap, sehingga volume pembelajaran dan volume kesimpulan buruk naik bersama. Ketegangannya antara throughput dan kepercayaan: salurkan segalanya lewat segelintir peneliti dan mereka menjadi hambatan, buka gerbang tanpa pagar pembatas dan Anda membanjiri organisasi dengan temuan yang tak seharusnya ditindaklanjuti. Putuskan jenis studi mana yang aman didelegasikan, seperti tes tugas tak termoderasi cepat, versus mana yang menuntut tangan terlatih, seperti topik sensitif, peserta rentan, atau taruhan arsitektur informasi, dan bawa templat, langkah tinjauan, dan audit jujur studi swalayan terbaru untuk melihat berapa yang akan selamat dari pemeriksaan. Untuk enterprise besar atau badan pemerintah, tambahkan sudut pengadaan dan privasi: perkakas riset bersama sering dibeli, dan platform swalayan yang memungkinkan siapa pun menghubungi peserta tanpa pelacakan persetujuan adalah insiden kepatuhan yang menunggu terjadi, sehingga pagar pembatas sama banyaknya tentang penanganan data yang sah seperti kualitas metode.
Ketika analitik dan wawancara kita menceritakan kisah berlawanan tentang fitur yang sama, bagaimana tim ini memutuskan mana yang dipercaya? Sinyal kualitatif dan kuantitatif menjawab dua separuh satu pertanyaan, dan memperlakukan kontradiksi di antaranya sebagai gangguan untuk diselesaikan dengan senioritas membuang petunjuk paling berguna yang Anda punya, karena biasanya satu sumber mengukur sesuatu yang tidak Anda sadari. Bagi organisasi besar risikonya tribalisme: tim data yang hanya memercayai dasbor dan tim riset yang hanya memercayai sesi, masing-masing menepis yang lain alih-alih membaca keduanya bersama. Bawa ketidaksepakatan nyata terbaru, penurunan dari analitik diletakkan di samping alasan dari riset, dan telusuri lingkaran analitik menunjukkan di mana, riset menjelaskan mengapa, dan eksperimen mengukur apakah perbaikan menggerakkan angka. Dalam konteks enterprise dan pemerintah, di mana satu metrik dapat menggerakkan pendanaan atau komitmen publik, namai di muka siapa yang menengahi ketika keduanya tidak sepakat dan bukti apa yang menutup argumen, agar keputusan bertumpu pada pembacaan triangulasi alih-alih fungsi mana pun yang punya advokat paling lantang di ruangan.

Lensa sektor

Startup. Dengan segelintir orang dan tanpa landasan untuk dibuang, perlakukan riset sebagai asuransi termurah yang dapat Anda beli, bukan fase. Minta pendiri menjalankan lima sesi termoderasi pada prototipe kertas sebelum menulis banyak kode, membingkai tugas sebagai tujuan alih-alih instruksi, dan biarkan apa yang Anda tonton membunuh atau mengarahkan ulang gagasan selagi masih sketsa. Lewati repositori dan panel; seluruh intinya belajar cukup cepat untuk menghindari membangun hal yang salah.

Bisnis kecil. Anda kemungkinan tidak punya peneliti khusus dan anggaran ketat, jadi bersandarlah pada perkakas pengujian tak termoderasi berbiaya rendah dan wawancara ringan alih-alih fungsi riset berstaf. Ketika membeli perangkat lunak uji kegunaan, pilih perkakas yang menangani perekrutan dan persetujuan untuk Anda, karena membangun mesin itu sendiri jarang layak pada skala Anda. Uji beberapa alur yang membuat atau kehilangan pelanggan, dan disiplinlah menulis tugas yang tidak mengarahkan saksi, karena protokol buruk membuang anggaran kecil yang Anda punya.

Enterprise. Dengan banyak skuad yang merilis ke produk bersama, kendalanya tata kelola: repositori wawasan yang dapat dicari, panel peserta terkelola dengan pelacakan persetujuan, dan irama riset agar studi menjadi kebiasaan alih-alih perebutan. Demokratisasi riset dalam pagar pembatas templat, pelatihan, dan tinjauan agar volume berskala tanpa menskalakan protokol buruk, dan pastikan temuan ditandai dan dapat diaudit agar dua skuad tidak pernah membayar dua kali untuk menjawab pertanyaan yang sama. Perlakukan data peserta sebagai teregulasi: retensi, persetujuan, dan frekuensi kontak semuanya butuh kebijakan.

Pemerintah. Banyak standar layanan digital nasional mewajibkan riset pengguna dan tunduk pada penilaian, jadi perlakukan sebagai gerbang yang harus dilewati layanan, dengan bukti. Aturan pengadaan membentuk perkakas dan pemasok perekrutan Anda, transparansi berarti mendokumentasikan dengan siapa Anda menguji dan apa yang Anda temukan, dan akuntabilitas publik berarti merekrut pengguna tersulit dijangkau, termasuk peserta assisted-digital dan disabilitas, karena layanan yang mengecualikan mereka menolak orang hak mereka. Simpan catatan jelas persetujuan dan metode agar penilai, auditor, atau publik dapat melihat riset itu nyata.

Contoh

Startup. Startup enam orang yang membangun perangkat lunak biaya untuk pekerja lepas yakin fitur andalannya adalah pemindaian struk otomatis, dan telah membangun versi kasar. Sebelum berinvestasi lebih jauh, dua pendiri menjalankan lima sesi uji kegunaan termoderasi dengan pekerja lepas nyata memakai prototipe kertas, membingkai tugas sebagai tujuan (“catat kopi yang baru Anda klaim sebagai biaya”) alih-alih instruksi. Empat dari lima mengabaikan pemindaian sepenuhnya dan mengetik jumlah dengan tangan, karena kecemasan nyata mereka bukan kecepatan entri data melainkan apakah biaya akan selamat dari audit pajak. Tim memutar produk di sekitar kategorisasi siap-audit dan jejak kertas yang jelas, menjalankan dua putaran kecil lagi seiring beriterasi, dan mengubah uji coba gratis yang macet menjadi pelanggan berlangganan, semua dengan biaya seminggu sketsa dan percakapan.

Enterprise. Sebuah perusahaan logistik global membakukan perangkat lunak gudang dan mendirikan fungsi operasi riset permanen untuk menjaga puluhan skuad produk tetap jujur. Mereka membangun repositori wawasan bertag, panel staf gudang terkelola yang telah menyetujui sesi berkala, dan irama riset dua mingguan. Ketika dua skuad secara independen mengusulkan mendesain ulang alur pemindaian yang sama, pencarian repositori memunculkan contextual inquiry dari kuartal sebelumnya yang menunjukkan bahwa sarung tangan dan kondisi gudang dingin, bukan tata letak layar, menggerakkan sebagian besar galat pindai. Satu temuan yang dipakai ulang itu mengarahkan kedua skuad ke target ketuk lebih besar dan interaksi ramah sarung tangan, menghindari penemuan terduplikasi, dan terukur memotong salah pindai begitu dikirim.

Pemerintah. Sebuah layanan kesehatan nasional yang mendesain ulang layanan pemesanan janji temunya memperlakukan riset pengguna sebagai wajib di bawah standar layanan digitalnya, bukan opsional. Di samping uji kegunaan termoderasi dengan sampel demografis luas, tim menjalankan sesi assisted-digital dengan orang yang biasanya mengandalkan kerabat atau asisten perpustakaan, dan merekrut peserta disabilitas yang memakai pembaca layar dan akses sakelar (bab 5.3) lewat kemitraan dengan lembaga amal. Pengujian mengungkap bahwa jargon klinis dalam judul bagian membuat pengguna lebih tua dan berkepercayaan diri lebih rendah meninggalkan sebelum mencapai hambatan nyata. Menyusun ulang konten di sekitar tujuan bahasa sederhana pasien, lalu mengonfirmasi peningkatan dengan studi tak termoderasi pada skala besar dan perbandingan analitik langsung (bab 7.4), menaikkan pemesanan swalayan yang berhasil dan mengurangi beban pusat panggilan, memperbaiki biaya melayani maupun kesetaraan akses.

Kasus bisnis: motivasi, ROI, dan TCO

Imbal hasil riset datang dari tiga tuas. Pertama, pemborosan yang dihindari: menangkap arah salah selama seminggu penemuan alih-alih setelah satu kuartal rekayasa adalah penghematan terbesar dan paling kurang dihitung, justru karena pembangunan yang sia-sia tidak pernah terjadi dan karenanya tak pernah muncul di laporan. Kedua, keberhasilan lebih tinggi: lebih banyak pengguna menyelesaikan tugas bernilai, yang muncul sebagai konversi di produk konsumen dan sebagai produktivitas serta galat lebih sedikit dalam pengaturan enterprise di mana pengguna terikat. Ketiga, biaya melayani lebih rendah: layanan yang dapat dipakai menghasilkan lebih sedikit kontak dukungan, lebih sedikit pelatihan, dan lebih sedikit kesalahan hilir untuk dikoreksi.

Total biaya kepemilikan harus menimbang biaya melakukan riset terhadap biaya melewatkannya. Biaya melakukannya terlihat dan sederhana: peneliti, perekrutan dan insentif, perkakas, repositori, dan waktu dalam jadwal. Biaya melewatkannya lebih besar tetapi tersebar di anggaran lain: transaksi ditinggalkan, tiket dukungan, hari pelatihan, desain ulang terlambat yang mahal, peluncuran gagal, dan, di sektor publik, pengecualian warga serta paparan hukum dan reputasi yang menyusul. Karena biaya ini bersembunyi di dukungan, pelatihan, dan operasi alih-alih lini produk, pimpinan rutin meremehkannya, itulah persis mengapa riset tampak opsional sampai peluncuran gagal.

Untuk mengajukan kasus, kaitkan riset dengan angka yang sudah diawasi eksekutif: tingkat penyelesaian dan konversi, biaya per transaksi, volume dukungan, waktu pelatihan, dan tingkat galat serta pengerjaan ulang. Jalankan satu sebelum-dan-sesudah kecil yang diinstrumentasi pada alur nyata, tunjukkan pergerakannya, dan ekstrapolasikan di seluruh portofolio. Bingkai riset sebagai pengurangan risiko pada keputusan tak terbalikkan, bahasa yang menggema dengan pemangku kepentingan keuangan dan tata kelola yang mungkin tak pernah membaca laporan kegunaan tetapi memahami taruhan yang bisa salah.

Anti-pola dan jebakan

Teater riset: studi dijalankan untuk membenarkan keputusan yang sudah dibuat, dengan temuan diam-diam diabaikan ketika merepotkan.
Mengarahkan saksi: tugas dan pertanyaan yang memberi isyarat jawaban yang diinginkan, menghasilkan data memuji yang tak bermakna.
Sintesis bias konfirmasi: hanya mendengar pengamatan yang cocok dengan rencana dan membuang sisanya.
Kekeliruan lima pengguna: memperlakukan “sekitar lima pengguna” sebagai hukum universal, mengabaikan bahwa ia mengasumsikan satu segmen dan hanya menemukan isu parah, bukan tingkat keberhasilan.
Perekrutan kenyamanan: menguji siapa pun yang mudah dijangkau, sehingga pengguna disabilitas dan sulit dijangkau lenyap dari sampel.
Memercayai preferensi yang dinyatakan: percaya “ya, saya akan memakai itu” alih-alih menonton apa yang benar-benar dilakukan orang.
Kuburan wawasan: temuan terkubur di slide satu tim, sehingga pertanyaan yang sama diriset berulang-ulang.
Demokratisasi tanpa pagar pembatas: membiarkan siapa pun menjalankan studi tanpa templat atau tinjauan, menskalakan protokol bias dan kesimpulan goyah.
Tribalisme kualitatif-versus-kuantitatif: memilih sumber data favorit dan menepis yang lain alih-alih melakukan triangulasi.

Model kematangan

Tingkat 1, Memulai: Riset ad hoc atau tidak ada, dan keputusan bertumpu pada opini dan senioritas. Uji kegunaan, jika terjadi, adalah sekali jalan reaktif sebelum peluncuran dengan siapa pun yang ada, dan temuan jarang mengubah apa pun.
Tingkat 2, Mengembangkan: Beberapa tim menjalankan uji kegunaan dan wawancara sesekali, tetapi perekrutan berdasarkan kenyamanan, protokol informal, dan wawasan tinggal di dek tersebar. Praktik sangat bervariasi dari skuad ke skuad, dan riset adalah fase yang dipotong di bawah tekanan jadwal.
Tingkat 3, Membakukan: Riset generatif dan evaluatif terdokumentasi dan dijalankan berkelanjutan lintas tim, memberi makan prioritisasi lewat proses bersama. Perekrutan menargetkan segmen nyata termasuk pengguna disabilitas dan sulit dijangkau, repositori wawasan yang dapat dicari ada, sintesis menghasilkan keputusan berperingkat, dan operasi riset mengelola irama, templat, dan peserta di seluruh organisasi.
Tingkat 4, Mengelola: Program riset diukur terhadap garis dasar. Tim melacak cakupan segmen pengguna, tingkat keberhasilan dan penyelesaian tugas, waktu dari wawasan ke perubahan yang dikirim, dan efek hilir pada volume dukungan, waktu pelatihan, serta tingkat galat dan pengerjaan ulang, dan menetapkan ambang yang memicu tindakan ketika metrik tergelincir. Pemakaian ulang repositori dan kualitas studi dipantau, sehingga pimpinan dapat melihat imbal hasil yang dihasilkan riset alih-alih mengasumsikannya.
Tingkat 5, Mengorkestrasi: Riset adalah lingkaran triangulasi berkelanjutan dengan analitik dan eksperimen, menutup dari wawasan ke perubahan yang dikirim ke efek terukur, dan terintegrasi dengan strategi produk dan perencanaan risiko di seluruh organisasi. Riset yang didemokratisasi berjalan aman dalam pagar pembatas, temuan berlipat dan beradaptasi seiring produk dan penggunanya bergeser, dan riset terbukti membentuk strategi, bukan hanya layar.

Gagasan untuk didiskusikan

Berapa banyak penemuan yang “cukup” sebelum berkomitmen pada pembangunan, dan siapa yang berwenang mengatakan kapan Anda sudah belajar cukup?
Ketika analitik dan wawancara menceritakan kisah berlawanan tentang fitur yang sama, bagaimana tim harus memutuskan mana yang ditindaklanjuti?
Di mana garis antara mendemokratisasi riset secara bertanggung jawab dan membiarkan antusiasme tak terlatih menghasilkan studi bias pada skala besar?
Bagaimana Anda mengukur imbal hasil studi yang nilainya adalah kesalahan yang karenanya tak pernah Anda buat dan tak pernah dapat Anda tunjuk?
Apa cara etis meriset bersama orang dalam krisis atau keadaan rentan tanpa menambah beban mereka?
Haruskah riset pengguna wajib, seperti dalam standar layanan pemerintah, menjadi gerbang yang dapat memblokir peluncuran, dan siapa yang menegakkannya?

Poin-poin utama

Riset ada untuk mengurangi risiko membangun hal yang salah, dan paling murah sebelum Anda membangun.
Pisahkan riset generatif (temukan masalah yang tepat) dari riset evaluatif (periksa solusi); pilih metode dari pertanyaan.
“Sekitar lima pengguna” menemukan sebagian besar isu parah dalam satu segmen per putaran, tetapi tidak mengukur keberhasilan atau mencakup kelompok berbeda.
Tulis tugas sebagai tujuan realistis, tanyakan tentang perilaku masa lalu, dan rancang melawan pertanyaan mengarahkan dan bias konfirmasi.
Rekrut peserta yang benar-benar mewakili pengguna Anda, termasuk orang disabilitas dan sulit dijangkau, atau temuan Anda diam-diam salah.
Sintesiskan menjadi keputusan berperingkat, bukan dek; ujiannya apakah keputusan benar-benar berubah.
Lakukan triangulasi riset kualitatif dengan analitik dan eksperimen, dan tangkap temuan dalam repositori bersama agar pembelajaran berlipat.

Referensi dan bacaan lanjutan

Erika Hall, Just Enough Research
Steve Krug, Rocket Surgery Made Easy
Jakob Nielsen, Usability Engineering
Mike Kuniavsky, Observing the User Experience
Steve Portigal, Interviewing Users
Tomer Sharon, Validating Product Ideas: Through Lean User Research
Hugh Beyer dan Karen Holtzblatt, Contextual Design
Donna Spencer, Card Sorting: Designing Usable Categories
Kathy Baxter, Catherine Courage, dan Kelly Caine, Understanding Your Users
Kate Towsey, Research That Scales: The Research Operations Handbook
Nielsen Norman Group, artikel tentang uji kegunaan, ukuran sampel, dan metode riset
UK Government Digital Service, Service Manual: panduan riset pengguna