Analisis dan critical thinking

Requirement

Kesepakatan tentang apa yang sebenarnya diminta, sebelum pekerjaannya dimulai.

Framing

Merumuskan masalah sebelum menghitung: keputusan apa yang dibantu, siapa yang memutuskan, apa yang perlu dijawab.

'bikin dashboard penjualan' diubah jadi 'toko mana yang perlu tambahan stok sebelum Lebaran?'

Problem statement

Kalimat singkat tentang apa yang salah, seberapa besar, dan kapan harus beres.

Response time keluhan memburuk kuartal ini dan harus pulih sebelum akhir tahun.

5W1H

Enam pertanyaan dasar untuk menggali masalah: what, who, when, where, why, how.

Apa yang turun, di cabang mana, sejak kapan, siapa yang terdampak, kenapa, bagaimana.

Keputusan

Pilihan yang diambil orang yang berwenang, yang sekaligus menanggung akibatnya.

Cari supplier yang mau mengunci harga, atau tetap beli harian.

Premortem

Membayangkan keputusan sudah gagal, lalu menulis penyebabnya sebelum mulai.

"Enam bulan lagi program ini gagal total. Kenapa?"

Critical thinking

Kebiasaan mempertanyakan data dan kesimpulan: dari mana asalnya, masuk akal tidak, adakah penjelasan lain.

Bertanya apakah penjualan turun karena promo berhenti atau karena memang bulan sepi.

Helicopter view

Melihat masalah dari atas secara menyeluruh sebelum masuk ke detail, supaya pola besarnya terlihat.

Melihat tren penjualan setahun penuh sebelum membedah satu bulan yang turun.

Root cause analysis

Menelusuri akar penyebab masalah, tidak berhenti di gejala yang terlihat.

Harga naik, ternyata stok menipis, ternyata pengiriman tertahan di jalur laut.

Connecting the dots

Menghubungkan beberapa informasi yang terpisah sampai terlihat satu penjelasan utuh.

Menyambungkan penjualan yang turun dengan biaya iklan yang dipangkas di bulan yang sama.

Hipotesis

Dugaan sementara yang diuji dengan data, dan hasilnya bisa terbukti atau gugur.

Dugaan: penjualan turun karena iklan dipotong. Analis lalu mengeceknya di data marketing.

Asumsi

Hal yang dianggap benar tanpa dicek dulu, karena itu perlu ditulis supaya bisa diuji.

Menganggap semua cabang buka setiap hari, lalu ternyata ada cabang yang tutup tiap Minggu.

Confirmation bias

Kecenderungan hanya mencari data yang mendukung dugaan sendiri dan mengabaikan data yang membantah.

Yakin penjualan turun karena iklan, lalu hanya membuka data marketing.

Bias

Kemiringan yang membuat hasil pengukuran menyimpang ke satu arah secara sistematis.

Correlation

Juga disebut: korelasi

Dua hal yang bergerak bersamaan.

Penjualan es krim naik bersamaan dengan kasus tenggelam.

Causation

Juga disebut: kausalitas, sebab-akibat

Satu hal benar-benar menyebabkan hal lain.

Confounder

Faktor ketiga yang tersembunyi dan menggerakkan dua hal sekaligus.

Es krim dan kasus tenggelam sama-sama naik di musim panas.

Cross-check

Mencocokkan angka atau informasi dengan sumber atau cara hitung lain sebelum dipercaya.

Mencocokkan angka dari AI dengan hitungan manual di spreadsheet.

Metric

Juga disebut: metrik

Angka yang diukur berulang dengan cara yang sama tiap kali.

Jumlah pesanan per hari di satu cabang, dihitung tiap pagi dari data kasir kemarin.

KPI

Metric yang dipilih sebagai penentu berhasil atau tidaknya sebuah tim.

Diagramnya: Dashboard bercerita

North star

Satu metric utama yang paling dekat dengan nilai yang diterima pelanggan, sekaligus jadi patokan bersama tim.

Untuk aplikasi belajar: jumlah pelajaran yang selesai per pekan, bukan jumlah download.

Input metric

Angka yang bisa digerakkan tim, dan kalau angka ini naik, north star ikut naik.

Persentase pengunjung baru yang membuka halaman produk, sebagai input untuk sesi yang berakhir dengan pembelian.

Metric tree

Gambar pohon yang memecah satu angka utama jadi angka-angka yang menggerakkannya, sampai ke angka yang bisa diubah tim.

Omzet warung = jumlah pembeli x rata-rata belanja per pembeli.

Guardrail metric

Metric pendamping yang menjaga supaya metric utama tidak dikejar dengan cara yang merusak.

Tiket closed per hari, dijaga dengan jumlah tiket yang di-reopen.

Success metric

Angka yang menunjukkan keputusan berhasil, dengan titik awal dan target yang jelas.

Booking Non Refund yang sudah diaudit: dari 0 ke 200, dengan hasil per kategori.

Target

Angka yang ingin dicapai dalam periode tertentu, sekaligus pembanding untuk menilai angka aktual.

Realisasi penjualan bulan ini dibandingkan target bulanannya.

Baseline

Juga disebut: nilai dasar

Angka pembanding sebelum ada perubahan apa pun.

Tanpa baseline, kenaikan penjualan setelah campaign tidak bisa dibedakan dari kenaikan yang memang selalu terjadi tiap Desember.

Diagramnya: Siklus ML

Goodhart's law

Begitu satu angka dijadikan target, orang mengejar angkanya sampai angka itu tak lagi mengukur hal yang dimaksud.

Tim CS dinilai dari tiket yang ditutup, lalu tiket ditutup walau masalahnya belum selesai.

Periode

Rentang waktu yang dipakai untuk menghitung. Kalau periodenya berbeda, kesimpulannya bisa ikut berbeda.

Titik panas 2015: 178.578, 2023: 52.156; pilihan tahun pembanding mengubah cerita (NASA FIRMS).

Coverage

Seberapa banyak yang tercatat: berapa pasar, berapa bulan, siapa saja.

Harga beras medium Jan 2026 dari 44 pasar, Feb 2026 dari 214 pasar (data WFP).

Tren

Arah gerak angka dari waktu ke waktu: naik, turun, atau datar.

Harga cabai naik pelan selama beberapa bulan berturut-turut.

Seasonality

Juga disebut: musiman

Pola naik turun yang berulang mengikuti kalender.

Penjualan naik tiap Ramadan dan turun tiap Januari. Membandingkan Desember dengan Januari tanpa mengingat ini menghasilkan kesimpulan yang keliru.

Diagramnya: Dashboard bercerita

Year on year (YoY)

Membandingkan angka satu periode dengan periode yang sama tahun lalu, supaya pengaruh musim tidak menipu.

Penjualan Ramadan tahun ini dibandingkan Ramadan tahun lalu.

EDA

Exploratory data analysis: menjelajah data sebelum mulai menganalisis, misalnya cek jumlah baris, nilai kosong, dan sebaran.

Cek jumlah baris, nilai kosong per kolom, sebaran harga, dan satu grafik tren.

Distribusi

Gambaran cara nilai-nilai dalam data menyebar, lebih dari sekadar titik tengahnya.

Dua kelas bisa punya rata-rata nilai sama, sementara nilai di kelas pertama merata dan di kelas kedua terbelah dua.

Rata-rata (mean)

Seluruh nilai dijumlahkan lalu dibagi banyaknya.

Median

Nilai yang persis di tengah setelah semuanya diurutkan.

Untuk gaji, median hampir selalu lebih jujur daripada rata-rata, karena tidak tertarik oleh angka tertinggi.

Rata-rata gabungan

Rata-rata dua kelompok yang ditimbang dengan jumlah anggota masing-masing. Kalau ukuran kelompoknya beda, merata-ratakan dua rata-rata begitu saja hasilnya salah.

(428 x 10,58 + 86 x 18,89) / 514 = 11,97, bukan (10,58 + 18,89) / 2 = 14,73.

Persentil

Posisi sebuah nilai dibanding sisanya, dinyatakan dalam persen.

Persentil 90 berarti sembilan puluh persen nilai berada di bawahnya.

Kuartil

Titik yang membagi data terurut jadi empat bagian sama banyak. Q1 di seperempat bawah, Q3 di tiga perempat.

Kemiskinan kab/kota 2019: Q1 6,66% dan Q3 14,76% (INDO-DAPOER).

IQR

Interquartile range, jarak antara kuartil pertama dan ketiga. Nilai di atas Q3 + 1,5 x IQR biasa ditandai outlier.

Kemiskinan kab/kota 2019: batas atas 26,91%, jadi 36 dari 514 kab/kota ditandai outlier (INDO-DAPOER).

Standar deviasi

Ukuran seberapa jauh angka-angka biasanya menyebar dari rata-ratanya. Makin besar angkanya, makin beragam datanya.

Waktu tempuh ke kantor yang kadang 30 menit, kadang 90 menit punya standar deviasi besar.

Outlier

Juga disebut: pencilan

Nilai yang jauh menyimpang dari sisanya.

A/B test

Percobaan yang membagi orang jadi dua kelompok acak untuk melihat versi mana yang lebih baik.

Separuh pengunjung melihat tombol biru, separuh melihat tombol hijau.

Sampel

Sebagian kecil yang diambil untuk mewakili keseluruhan.

RCT

Randomized controlled trial, yaitu percobaan yang membagi kelompok secara acak. Untuk menguji sebab-akibat, inilah cara yang paling kuat.

Sekolah diundi untuk menerima program atau tidak, lalu hasilnya dibandingkan.

Randomisasi

Membagi peserta ke kelompok dengan undian, supaya kedua kelompok setara sejak awal.

Pembagian kelompok memakai lempar koin, supaya pilihan manajer tidak ikut menentukan.

Control group

Juga disebut: kelompok kontrol

Kelompok yang tidak mendapat perlakuan, sebagai pembanding untuk kelompok yang mendapat perlakuan.

Cabang yang tidak ikut program diskon, dibandingkan dengan cabang yang ikut.

Balance check

Mengecek apakah kelompok perlakuan dan kontrol sudah mirip sebelum perlakuan diberikan, misalnya dengan membandingkan rata-ratanya.

RCT gaji guru: semua selisih variabel sekolah dan guru sebelum perlakuan di bawah 0,1 standar deviasi.

Signifikansi statistik

Ukuran seberapa kecil kemungkinan sebuah selisih muncul cuma karena kebetulan.

Standard error

Seberapa besar satu angka hasil hitungan bisa bergoyang karena kebetulan kalau datanya diambil ulang dari orang lain.

Dua headline Upworthy dengan sekitar 12.000 tampilan per headline: selisih CTR -0,42 poin persen, standard error-nya sekitar 0,19 poin persen.

Distribusi normal

Bentuk sebaran seperti lonceng: kebanyakan nilai dekat ke tengah, makin jauh makin jarang. Sekitar 95% nilai ada dalam jarak 1,96 standard error dari tengah.

Angka 1,96 di rumus confidence interval 95% berasal dari distribusi normal.

Z-score

Juga disebut: skor z

Selisih yang diukur dalam satuan standard error: berapa kali goyangan wajar. Makin jauh dari 0, makin kecil kemungkinan selisih itu kebetulan.

Z = -2,26 untuk dua headline Upworthy, lebih jauh dari batas 1,96.

P-value

Juga disebut: nilai p

Kalau sebenarnya tidak ada beda, seberapa sering selisih sebesar ini atau lebih besar tetap muncul karena kebetulan. Jadi p-value tidak sama dengan peluang hipotesis benar.

P-value 0,0235 untuk dua headline Upworthy: sekitar 2 dari 100 kali.

Confidence interval

Juga disebut: selang kepercayaan

Rentang nilai yang masuk akal untuk angka sebenarnya. Kalau rentang selisihnya mencakup nol, belum tentu ada beda.

Dua headline Upworthy: selisih CTR -0,06 poin persen, rentang 95%-nya -0,60 sampai 0,49, jadi belum beda.

Multiple testing

Makin banyak uji yang dilakukan, makin banyak "pemenang" yang muncul hanya karena kebetulan.

Arsip Upworthy mencatat 32.487 eksperimen headline. Kalau uji sebanyak itu dijalankan, sebagian "pemenangnya" hampir pasti hasil kebetulan.

Funnel

Juga disebut: corong

Urutan tahap yang dilalui pelanggan, dari banyak orang di awal sampai sedikit yang selesai.

Kunjungan, lihat produk, masuk keranjang, bayar.

Konversi

Persentase orang yang lanjut dari satu tahap ke tahap berikutnya.

Dari 100 orang yang masuk keranjang, 30 membayar: konversinya 30%.

CTR

Click-through rate: berapa persen orang yang melihat sesuatu lalu mengekliknya.

Headline Upworthy dengan kata Women ditampilkan 11.839 kali dan diklik 285 kali: CTR 2,41%.

Poin persen

Selisih dua persentase, dihitung dengan pengurangan biasa. Berbeda dengan kenaikan persen, yang dihitung relatif terhadap angka awal.

CTR 2,0% naik ke 2,5% = naik 0,5 poin persen, atau naik 25% relatif.

Cohort

Sekelompok orang yang mulai pada waktu yang sama, lalu diikuti bersama-sama.

Semua pengguna yang mendaftar Januari diikuti selama enam bulan, terpisah dari yang mendaftar Februari.

Retention

Juga disebut: retensi

Berapa banyak pelanggan yang masih kembali atau masih aktif sesudah waktu tertentu.

Pelanggan yang belanja lagi sebulan setelah belanja pertamanya.

Churn

Pelanggan yang berhenti, kebalikan dari retention.

Pelanggan internet rumah yang tidak memperpanjang langganan bulan ini.

Python

Bahasa pemrograman yang banyak dipakai untuk mengolah data, menulis skrip pipeline, dan membangun model.

Beberapa baris Python menghitung ulang total yang dibuat di spreadsheet.

pandas

Library Python untuk mengolah tabel: membaca file, menyaring, mengelompokkan, dan menggabung.

pd.read_csv("harga.csv") membaca file CSV jadi tabel.

DataFrame

Tabel di dalam pandas, dengan baris dan kolom seperti di spreadsheet.

df.shape menampilkan (321209, 15) untuk data titik panas NASA FIRMS tiga tahun.

groupby

Perintah pandas untuk mengelompokkan baris lalu menghitung ringkasan per kelompok, padanan GROUP BY di SQL.

Titik panas 2015 per bulan: puncaknya September, 64.080 titik (NASA FIRMS).

merge

Perintah pandas untuk menggabung dua tabel lewat kolom kunci, padanan JOIN di SQL.

Harga WFP di-merge dengan tabel pasar lewat market_id: 337.046 baris sebelum dan sesudah.

assert

Perintah Python yang berhenti dengan error kalau syaratnya tidak terpenuhi, sehingga bisa jadi alarm otomatis.

assert len(df) == 321209 berhenti kalau jumlah baris berubah.

Notebook (Jupyter, Colab)

Dokumen kerja berisi kode, hasil, dan catatan berurutan, jadi orang lain bisa membaca dan mengulang langkahnya.

Notebook EDA berisi sel kode dan grafik, diselingi catatan pengecekan.

Sel

Satu kotak di notebook. Sel kode untuk dijalankan, sel teks untuk catatan.

Shift+Enter menjalankan sel yang sedang dipilih.

Reproducibility

Analisis bisa diulang orang lain dengan data dan langkah yang sama, dan hasilnya sama.

Rekan menjalankan notebook Anda dari awal sampai akhir dan mendapat angka yang sama.