Membersihkan data teknis: salah satuan, salah ketik, duplikat, data hilang, pencilan dan aturan jangkauan antarkuartil, uji Grubbs, kapan data boleh dibuang, dan jejak perubahan
Rekap air bulanan laundry rumah sakit menunjukkan pemakaian naik 30 persen karena satu hari tercatat 438 meter kubik, sepuluh kali hari lain, dan manajer langsung memanggil kontraktor untuk mencari bocor. Angka itu ternyata koma desimal yang terlewat saat diketik, tetapi hari dengan pemakaian sepuluh kali lipat juga bisa nyata. Bab ini menjelaskan jenis kesalahan dalam data teknis, pemeriksaan rentang dan kewajaran, duplikat dan data hilang, imputasi sederhana dan batasnya, pencilan dengan pagar 1,5 kali jangkauan antarkuartil dan diagram kotak, uji Grubbs dan efek penutupan, kapan data boleh dibuang, dan jejak perubahan. Sembilan contoh kerja dan enam latihan memakai data air, suhu, gas, dan arus pompa.
Rekap konsumsi air September dari laundry sebuah rumah sakit sampai di meja manajer bagian umum dengan tanda merah: 1.700 m³, naik sekitar 30 persen, dan air per kilogram linen melonjak dari sekitar 42 menjadi 54,5 liter (angka latihan). Grafik harian di lampiran memperlihatkan sebabnya: tanggal 14 tercatat 438 m³, sedangkan hari-hari lain berkisar 40 sampai 47 m³. Manajer menduga pipa bocor di bawah lantai dan meminta kontraktor plambing datang esok paginya.
Teknisi jaga membuka buku catatan meter di ruang pompa. Untuk tanggal 14 operator menulis 43,8; koma desimalnya terlewat ketika angka diketik ke lembar kerja. Kontraktor batal dipanggil. Teknisi itu tetap mencatat di laporannya bahwa hari dengan pemakaian sepuluh kali lipat bisa saja nyata, misalnya karena katup pengisian tangki macet terbuka, sehingga angka seperti itu tidak boleh dihapus hanya karena tampak aneh. Bab ini menjelaskan cara memeriksa angka yang mencurigakan sampai sebabnya jelas, lalu memperbaikinya dengan cara yang dapat dilacak.
Batas pembahasan
Bab ini membahas kumpulan data yang sudah ada: jenis kesalahan, pemeriksaan kewajaran, duplikat, data hilang dan imputasi, pencilan dengan pagar jangkauan antarkuartil dan diagram kotak, uji Grubbs, keputusan membuang data, dan jejak perubahan. Pencegahan kesalahan di formulir, jejak audit formulir digital, dan ukuran mutu data dibahas di Bab 9 tentang catatan lapangan; rerata, simpangan baku, dan metode kuartil di Bab 2 tentang ringkasan data; konversi di Bab 3 · Satuan & Matematika tentang satuan; celah dan penanda waktu rekaman pencatat di Bab 12 tentang data deret waktu; pencilan pada garis regresi di Bab 7 tentang regresi; titik di luar batas kendali di Bab 3 tentang kontrol proses. Sumbernya adalah tiga narasi disiplin, dua atlas sumber Arstema, buku statistik terbuka OpenStax, dan halaman NIST yang terbaca lewat cuplikan, ditambah pengetahuan umum yang ditandai di peta sumber. Semua data dalam contoh adalah angka latihan.
Jenis kesalahan dan tanda khasnya
Narasi Workshop dan Layanan Lapangan mengutip buku manual perbaikan elektronika bahwa galat pemakai adalah sumber masalah ketiga dalam pengukuran. Narasi Teknik Elektro dan Elektronika mengutip buku dasar instrumentasi dan pengukuran bahwa galat sistematis selalu berasal dari pengetahuan atau pemakaian sensor yang keliru. Narasi Satuan dan Pengukuran mengutip buku matematika operator sistem air bahwa menghitung dengan tangan itu melelahkan dan rawan salah.
Pembersihan data (data cleaning) adalah pekerjaan memeriksa, menandai, dan memperbaiki kesalahan dalam kumpulan data yang sudah terkumpul dengan cara yang tercatat dan dapat diulang. Atlas sumber komputasi Arstema menempatkan pembersihan sebagai satu langkah tetap dalam siklus kerja ilmu data, sesudah pengambilan data beserta asal-usulnya dan sebelum analisis eksploratif. Pembersihan yang baik tidak membuat data tampak rapi; ia membuat data jujur. Setiap jenis kesalahan meninggalkan pola yang dapat dikenali (pengetahuan umum):
| Jenis | Tanda khas | Pemeriksaan pertama |
|---|---|---|
| Salah satuan | Sekelompok nilai berbeda dengan faktor tetap, misalnya 14,5 (psi dan bar), 1.000 (L dan m³, kWh dan MWh), atau pola °F dan °C | Bandingkan rasio dengan faktor konversi; lihat sumber baris itu |
| Koma desimal hilang atau bergeser | Nilai tepat 10 atau 100 kali tetangganya | Lihat catatan asli |
| Digit tertukar | 26,4 di antara nilai sekitar 62; 25.756 di antara 25.312 dan 25.398 | Lihat catatan asli; periksa selisih berurutan |
| Duplikat | Baris dengan waktu dan identitas yang sama; jumlah baris lebih dari yang seharusnya | Hitung baris per hari atau per bulan |
| Data hilang | Sel kosong, nol, atau kode seperti 9999 | Bedakan kosong dari nol |
| Nilai mustahil | Kelembapan relatif di atas 100 persen, pH 15, debit negatif, angka meter kumulatif yang turun | Batas fisik besaran |
Narasi Satuan dan Pengukuran mengutip buku yang sama bahwa besaran dan simbol dalam persamaan harus dinyatakan dalam satuan yang serupa. Kesalahan satuan biasanya muncul ketika dua sumber digabung, misalnya catatan manual dalam bar dan ekspor pencatat dalam psi. Cara mengonversi satuan ada di Bab 3 · Satuan & Matematika tentang konversi; di sini yang penting adalah mengenali sekelompok angka yang berasal dari satuan lain.
Pemeriksaan rentang dan kewajaran
Pemeriksaan kewajaran (plausibility check) adalah pengujian setiap nilai terhadap batas fisik, batas proses, dan hubungan dengan besaran lain sebelum nilai dipakai untuk menghitung. Ada empat lapis pemeriksaan (pengetahuan umum):
- Batas fisik: kelembapan relatif 0 sampai 100 persen, pH 0 sampai 14, tekanan mutlak tidak negatif, angka meter kumulatif tidak turun kecuali meter diganti.
- Batas proses dan alat: rentang ukur sensor, suhu yang mungkin dicapai pemanas, debit paling besar pompa. Nilai di luar rentang ukur sensor tidak dapat dipercaya walaupun mungkin secara fisik.
- Laju perubahan: suhu air di tangki besar tidak naik 20 °C dalam satu menit. Lompatan secepat itu menandai kesalahan baca, gangguan sinyal, atau pergantian sensor.
- Konsistensi antarbesaran: suhu keluar pemanas lebih tinggi daripada suhu masuk; tidak ada pemakaian air pada hari laundry tutup; jumlah pemakaian harian sama dengan selisih angka meter kumulatif; jumlah sub-meter tidak melebihi meter induk.
Lapis keempat paling kuat untuk data energi dan air. Bila pemakaian harian dihitung dari selisih pembacaan meter kumulatif, satu pembacaan yang salah ketik menghasilkan dua hari aneh berurutan, satu terlalu tinggi dan satu negatif, sedangkan jumlah keduanya tetap benar (Contoh 3).
Duplikat dan data hilang
Duplikat (duplicate record) adalah baris data yang mewakili pengukuran atau kejadian yang sama lebih dari sekali. Duplikat biasanya lahir dari dua ekspor yang digabung, dari pencatat yang mengirim ulang data setelah sambungan pulih seperti dibahas di Bab 12 tentang data deret waktu, atau dari lembar yang diketik dua orang. Duplikat menaikkan total tetapi hampir tidak mengubah rata-rata, sehingga mudah lolos. Cara menemukannya adalah menghitung baris per hari atau per bulan dan mencari kunci yang sama: tanggal, jam, dan identitas alat.
Data hilang tidak diisi nol, karena nol adalah nilai. Pemakaian air nol pada hari kerja berarti laundry tidak memakai air, dan rata-rata yang menghitungnya menjadi terlalu rendah (Contoh 5). Data hilang ditandai kosong, alasannya dicatat bila diketahui, dan setiap ringkasan menyebut berapa data yang dipakai, seperti diminta Bab 9 tentang mutu data. OpenStax menyebut data yang tidak lengkap dan data tanpa konteks sebagai bentuk pemakaian data yang menyesatkan.
Sebab hilangnya data juga penting. Data yang hilang secara acak, misalnya karena baterai pencatat habis, tidak membuat ringkasan bias. Data yang hilang karena alasan yang berkaitan dengan nilainya, misalnya pencatat yang mati setiap kali panel terlalu panas, membuat panel tampak lebih dingin daripada kenyataan (pengetahuan umum).
Imputasi sederhana dan batasnya
Imputasi (imputation) adalah pengisian nilai yang hilang dengan nilai perkiraan supaya perhitungan dapat diteruskan. Cara sederhana yang umum (pengetahuan umum):
- Selisih meter kumulatif: bila meter mempunyai angka kumulatif, total pemakaian di seluruh celah diketahui pasti; hanya pembagiannya per hari yang diperkirakan.
- Interpolasi linear di antara dua nilai tetangga, untuk besaran yang berubah lambat seperti suhu tangki.
- Nilai terakhir dibawa maju, untuk setelan atau status yang jarang berubah.
- Rata-rata hari sejenis, misalnya rata-rata hari kerja lain pada minggu yang sama.
Penalaran editorial memberi tiga batas. Pertama, nilai hasil imputasi selalu ditandai dan metodenya dicatat. Kedua, imputasi boleh dipakai untuk tampilan atau total energi, tetapi tidak untuk bukti kepatuhan; catatan suhu ruang dingin yang hilang tidak diisi untuk menunjukkan bahwa suhu selalu dalam batas. Ketiga, imputasi menyembunyikan kejadian di dalam celah, misalnya penurunan suhu saat pemanas mati (Contoh 9).
Pencilan, pagar 1,5 IQR, dan diagram kotak
Pencilan potensial (potential outlier) adalah nilai yang jauh berbeda dari sebagian besar nilai lain dalam kumpulan data yang sama sehingga perlu diselidiki. OpenStax menjelaskan bahwa nilai seperti ini dapat berupa kesalahan, suatu kelainan, atau justru kunci untuk memahami data. Bab 2 sudah membahas pengaruh nilai ekstrem pada rerata dan simpangan baku; bab ini memberi cara menandainya.
Aturan paling sederhana memakai jangkauan antarkuartil (IQR, rentang antarkuartil di Bab 2). Pagar pencilan (outlier fence) adalah batas bawah dan batas atas yang dihitung dari kuartil pertama, kuartil ketiga, dan jangkauan antarkuartil; nilai di luar batas ditandai untuk diperiksa. Menurut OpenStax, nilai dicurigai sebagai pencilan potensial bila letaknya lebih dari 1,5 kali IQR di bawah kuartil pertama atau di atas kuartil ketiga, dan pencilan potensial selalu memerlukan penyelidikan lanjut:
dan adalah kuartil pertama dan ketiga, dan IQR memakai satuan data. Kuartil di bab ini dihitung dengan metode median separuh data, sama dengan Bab 2 dan OpenStax. Banyak analis juga memakai pagar luar pada jarak 3 kali IQR untuk pencilan jauh, yang dikenal sebagai aturan Tukey (pengetahuan umum).
Aturan pagar tahan terhadap pencilan karena kuartil hampir tidak bergeser oleh satu atau dua nilai jauh, dan tidak menganggap data normal. Kelemahannya: pada data yang memang menceng, misalnya waktu perbaikan, aturan ini menandai banyak nilai wajar di ekor panjang.
Diagram kotak (box plot) adalah grafik yang menggambarkan minimum, kuartil pertama, median, kuartil ketiga, dan maksimum sekumpulan data pada satu garis bilangan berskala. Menurut OpenStax, kotak membentang dari kuartil pertama sampai kuartil ketiga dan kumis menjulur ke nilai terkecil dan terbesar; sebagian diagram menandai pencilan dengan titik sehingga kumisnya tidak sampai ke minimum dan maksimum, dan diagram kotak harus dimulai dengan garis bilangan berskala.
Uji Grubbs dan efek penutupan
Aturan kasar yang sering dipakai adalah menandai nilai yang lebih dari dua atau tiga simpangan baku dari rata-rata. OpenStax menyebut dua simpangan baku sebagai aturan praktis, bukan aturan kaku, dan mencatat bahwa pencilan dapat membuat simpangan baku sangat besar. Di situlah kelemahannya: pencilan ikut memperbesar ukuran yang dipakai untuk menilainya.
Uji Grubbs (Grubbs' test) adalah uji statistik untuk memeriksa apakah nilai paling jauh dalam sekumpulan data yang kira-kira berdistribusi normal merupakan satu pencilan. Menurut e-Handbook NIST yang terbaca lewat cuplikan, uji ini menguji hipotesis tidak ada pencilan melawan tepat satu pencilan, statistiknya adalah simpangan mutlak terbesar dari rata-rata dalam satuan simpangan baku sampel, dan ada versi satu sisi untuk nilai terkecil atau terbesar. Dokumentasi perangkat lunak NIST menekankan bahwa uji ini menganggap data normal, sehingga kenormalan diperiksa lebih dulu. Bentuk baku statistik dan nilai kritis dua sisinya (pengetahuan umum):
setiap nilai, rata-rata, dan simpangan baku sampel, dalam satuan data; jumlah data; kuantil atas distribusi t untuk peluang dengan derajat bebas; tidak bersatuan. Nilai dianggap pencilan bila . Untuk taraf 5 persen dua sisi, nilai kritis hasil hitungan penyusun adalah 2,020 untuk 7 data, 2,127 untuk 8, 2,290 untuk 10, 2,412 untuk 12, 2,548 untuk 15, dan 2,708 untuk 20. Menurut sumber sekunder, uji ini tidak dianjurkan untuk 6 data atau kurang.
Efek penutupan (masking) adalah keadaan ketika dua pencilan atau lebih saling menyembunyikan sehingga uji pencilan tidak menandai satu pun. Dua nilai jauh yang berdekatan menaikkan rata-rata dan simpangan baku bersama-sama, sehingga masing-masing tampak kecil (Contoh 8). Untuk keadaan seperti ini e-Handbook NIST menganjurkan uji Tietjen-Moore atau uji simpangan terstudentisasi ekstrem umum (GESD) bila mungkin ada lebih dari satu pencilan. Dokumentasi perangkat lunak NIST menggambarkan cara berulang, membuang satu nilai lalu menguji lagi; cara ini tetap rawan penutupan karena langkah pertamanya bisa gagal. Penalaran editorial untuk pekerjaan lapangan: pakai aturan pagar untuk menandai, Grubbs hanya sebagai pemeriksaan kedua untuk satu nilai, dan selalu cari sebab fisiknya.
Kapan data boleh dibuang dan kapan tidak
OpenStax memberi aturan yang jelas: periksa penyebab pencilan; bila ada kesalahan, perbaiki bila mungkin atau hapus; bila datanya benar, biarkan, karena pencilan tidak selalu dihapus dan kadang memuat informasi berharga.
Penalaran editorial menerjemahkan aturan itu menjadi empat keputusan:
- Koreksi bila kesalahan terbukti dan nilai benarnya diketahui dari catatan asli, foto layar, atau angka meter kumulatif, seperti koma desimal pada kasus pembuka.
- Tandai dan keluarkan dari perhitungan bila kesalahan terbukti tetapi nilai benarnya tidak diketahui, misalnya sensor yang terbukti lepas dari dudukannya. Nilai tetap disimpan di data asli.
- Pertahankan dan laporkan bila tidak ada bukti kesalahan. Arus pompa yang naik, pemakaian air malam hari yang terus muncul, atau suhu air panas yang turun dapat menjadi tanda awal kerusakan bantalan, bocor, atau pemanas bermasalah.
- Laporkan dua versi bila penyebab belum pasti dan keputusan bergantung pada nilai itu. OpenStax menyarankan peneliti mencatat bahwa data dihapus beserta alasannya, atau menyajikan hasil dengan dan tanpa data itu.
Satu aturan tidak dapat ditawar: nilai yang melanggar batas keselamatan atau higiene tidak dibersihkan sebagai pencilan. Suhu ruang dingin yang tinggi atau tekanan uap di atas batas adalah temuan yang dilaporkan menurut prosedur, walaupun hanya satu dari seratus catatan (penalaran editorial).
Jejak perubahan dan versi data
Atlas sumber energi dan air Arstema meminta data asli disimpan tanpa diubah, dan konversi serta visualisasi dilakukan pada salinan yang terdokumentasi beserta satuan dan cara transformasinya. Koreksi tanpa menghilangkan nilai lama dan jejak audit formulir sudah dibahas di Bab 9 tentang catatan lapangan. Untuk kumpulan data yang dibersihkan, prinsip itu menjadi tiga lapis (penalaran editorial):
- Data mentah dalam berkas atau lembar yang hanya dibaca, persis seperti diterima.
- Data bersih sebagai salinan dengan kolom tambahan untuk tanda mutu, misalnya "asli", "dikoreksi", "imputasi", "dikeluarkan".
- Jejak perubahan yang mencatat setiap perubahan.
Jejak perubahan (change log) adalah catatan berurutan tentang setiap perubahan pada kumpulan data, yang memuat baris yang diubah, nilai lama, nilai baru, alasan, bukti, nama pengubah, dan tanggal. Dengan tiga lapis ini orang lain dapat mengulang pembersihan dari data mentah dan sampai pada data bersih yang sama. Bila aturan pembersihan diubah, data bersih dibuat ulang dari data mentah, bukan ditambal di atas versi lama.
Contoh kerja
Contoh 1: satuan tercampur. Catatan tekanan uap harian memuat 7,2; 7,0; 104; 7,1; 102; 6,9 (angka latihan). Rasio 104 terhadap 7,2 adalah 14,4, dekat faktor konversi psi ke bar sebesar 14,50. Bila dikonversi, bar dan bar, sejalan dengan hari lain. Kedua baris berasal dari ekspor pencatat yang memakai psi. Nilai dikonversi di data bersih dengan tanda "dikoreksi: satuan", dan pengaturan ekspor diperbaiki.
Contoh 2: koma desimal pada kasus pembuka. Dua puluh sembilan hari lain berjumlah 1.262 m³. Dengan 438 m³, total bulan 1.700 m³; dengan nilai benar 43,8 m³, total 1.305,8 m³. Kenaikan semu . Dengan linen 31.200 kg sebulan, air per kilogram turun dari 54,5 menjadi 41,9 L/kg setelah koreksi. Rasio 438 terhadap 43,8 tepat 10, tanda khas koma yang terlewat.
Contoh 3: pembacaan meter yang salah ketik. Pembacaan meter kumulatif empat hari tercatat 25.312; 25.756; 25.398; 25.443 m³. Selisih harian menjadi 444, minus 358, dan 45 m³. Pemakaian negatif mustahil, sedangkan jumlah dua hari pertama, 86 m³, wajar. Pembacaan kedua seharusnya 25.356 (digit 3 terbaca 7), sehingga pemakaian menjadi 44, 42, dan 45 m³. Koreksinya tetap memerlukan bukti dari catatan asli atau foto meter.
Contoh 4: duplikat setelah dua ekspor digabung. Gas laundry Januari sampai Juni 648, 662, 721, 645, 736, dan 743 GJ, linen 42, 45, 48, 44, 50, dan 52 ton. Totalnya 4.155 GJ dan 281 ton, intensitas GJ/ton. Ekspor kedua memuat Juni sekali lagi, sehingga gas menjadi 4.898 GJ sedangkan linen dari sistem lain tetap 281 ton, dan intensitas semu 17,43 GJ/ton, naik 17,9 persen. Hitungan baris per bulan menemukan Juni ganda.
Contoh 5: data hilang yang diisi nol. Pemakaian air tujuh hari: 44, 46, kosong, 45, 43, 47, 44 m³. Bila sel kosong diisi nol, rata-ratanya 38,4 m³ per hari; rata-rata enam hari terukur 44,8 m³. Imputasi rata-rata memberi total minggu m³ dengan tanda "imputasi". Bila selisih angka meter kumulatif seminggu tersedia, misalnya 313 m³, total itu yang dipakai, dan hari yang hilang memakai m³.
Contoh 6: pagar 1,5 IQR. Suhu air panas di titik pakai sebuah hotel, 12 catatan (°C): 61,8; 62,4; 62,1; 61,5; 62,9; 62,2; 61,9; 26,4; 62,6; 62,0; 62,3; 61,7. Separuh bawah data terurut adalah 26,4 sampai 62,0, jadi ; separuh atas 62,1 sampai 62,9, jadi . IQR 0,60 °C, pagar dalam 60,85 dan 63,25 °C, pagar luar 59,95 dan 64,15 °C. Nilai 26,4 berada jauh di luar pagar luar.
Contoh 7: uji Grubbs pada data yang sama. Rata-rata 12 catatan 59,15 °C dan simpangan bakunya 10,32 °C, padahal 11 catatan lain berada di antara 61,5 dan 62,9 °C. , lebih besar daripada untuk 12 data, jadi 26,4 dinyatakan pencilan. Tanpa nilai itu rata-rata 62,13 °C dan simpangan baku 0,41 °C. Dugaan paling masuk akal adalah digit tertukar dari 62,4, tetapi dugaan bukan bukti: bila catatan asli menunjukkan 26,4, nilai itu nyata dan katup pencampur atau pemanasnya diperiksa. Laporan "rata-rata 59 °C, di bawah target" keliru dalam kedua kemungkinan.
Contoh 8: efek penutupan. Sepuluh bacaan sensor: 50,1; 49,8; 50,3; 49,9; 50,0; 50,2; 49,7; 50,1; 58,9; 59,2. Rata-rata 51,82 dan simpangan baku 3,82, sehingga , di bawah ; uji Grubbs tidak menandai apa pun. Aturan pagar memberi , , IQR 0,4, dan pagar atas 50,9, sehingga 58,9 dan 59,2 ditandai. Bila 59,2 dibuang lebih dulu, 58,9 baru terdeteksi ( terhadap untuk 9 data). Dua nilai berdekatan seperti ini sering berasal dari satu keadaan lain, misalnya sensor kedua.
Contoh 9: batas interpolasi. Pencatat suhu tangki air panas merekam tiap 15 menit: pukul 10.00 sebesar 61,8 °C, pukul 10.15 hilang, pukul 10.30 sebesar 62,6 °C. Interpolasi linear memberi °C untuk pukul 10.15. Buku harian ruang ketel mencatat pemanas mati pukul 10.05 sampai 10.25, sehingga suhu pukul 10.15 tidak diketahui dan mungkin jauh lebih rendah. Sel itu tetap kosong dengan catatan kejadian, dan nilai interpolasi tidak dipakai untuk menyatakan suhu tangki selalu di atas batas.
Kondisi berhenti
Hentikan pembersihan dan serahkan keputusan kepada penanggung jawab data, penyelia, atau pemilik alat ukur bila:
- Nilai yang menyimpang mungkin menunjukkan bahaya, seperti suhu ruang dingin tinggi, tekanan uap di atas batas, atau bau gas. Laporkan menurut prosedur lebih dulu; jangan menunggu data selesai dibersihkan.
- Data adalah bukti kepatuhan, tagihan, atau kontrak. Koreksi hanya oleh pemilik data dengan persetujuan tertulis penanggung jawab.
- Penyebab nilai menyimpang tidak dapat dipastikan dan keputusan bergantung padanya. Sajikan dua versi dan minta keputusan.
- Kesalahan berulang pada satu alat, tanda alat rusak atau kalibrasinya bergeser. Serahkan kepada pemilik register kalibrasi.
- Ada permintaan menghapus atau mengubah data supaya laporan tampak baik. Tolak dan sampaikan kepada atasan penanggung jawab.
- Duplikat atau celah berasal dari sistem pemasok atau sistem tagihan. Minta data ulang dari pemilik sistem; jangan menambal sendiri.
Salah tafsir yang sering terjadi
- "Pencilan pasti salah, jadi dibuang saja." Pencilan dapat berupa kesalahan, kejadian langka yang nyata, atau tanda awal kerusakan. Periksa sebabnya dulu.
- "Nilai yang kurang dari tiga simpangan baku dari rata-rata pasti wajar." Pencilan ikut memperbesar simpangan baku, dan dua pencilan dapat saling menutupi seperti di Contoh 8.
- "Sel kosong lebih rapi diisi nol." Nol adalah nilai; mengisi nol menurunkan rata-rata dan total.
- "Uji Grubbs dapat diulang sampai tidak ada pencilan." Uji ini dirancang untuk satu pencilan pada data kira-kira normal; pengulangan rawan penutupan dan membuang data yang sah.
- "Data cukup diperbaiki langsung di berkas asli." Data asli disimpan utuh; perbaikan dibuat di salinan dengan jejak perubahan.
- "Di luar pagar 1,5 IQR berarti terbukti salah." Pagar hanya menandai nilai untuk diperiksa; bukti datang dari catatan asli, alat, dan keadaan lapangan.
Hubungan dengan bab lain
Bab 9 tentang catatan lapangan mencegah kesalahan saat data dicatat; bab ini menangani yang tetap lolos. Ringkasan data ada di Bab 2, konversi satuan di Bab 3 · Satuan & Matematika, asal celah dan duplikat pencatat di Bab 12, residu regresi di Bab 7, dan sinyal diagram kendali di Bab 3. Data bersih menjadi bahan garis dasar energi di Bab 15 tentang verifikasi penghematan, KPI laundry di Bab 20 · Laundry tentang konsistensi operasi, dan grafik di Bab 16 tentang menyajikan data.
Latihan dan pembahasan
- Catatan suhu air cuci utama (°C): 85; 84; 185; 86; 85. Apa dugaan Anda tentang 185, dan berapa nilainya bila dugaan itu benar?
- Arus motor pompa (A) 10 hari: 12,1; 12,4; 12,3; 12,6; 12,2; 12,5; 12,4; 14,9; 12,3; 12,2. Hitung kuartil, IQR, dan pagar 1,5 IQR. Bolehkah 14,9 dibuang?
- Untuk data soal 2, hitung dan bandingkan dengan untuk 10 data. Apa yang perlu diperiksa sebelum hasil uji ini dipercaya?
- Pemakaian air enam hari (m³): 38; 41; 0; 40; 39; 42. Hari ketiga adalah hari pencatat mati, bukan hari laundry tutup. Hitung rata-rata dengan dan tanpa nol, dan jelaskan mana yang dipakai.
- Dari 120 catatan suhu ruang dingin dapur, satu bernilai 14 °C dan lainnya 2 sampai 4 °C. Seorang staf ingin membuangnya sebagai pencilan. Apa keputusan yang benar?
- Tuliskan isi satu baris jejak perubahan untuk koreksi 438 menjadi 43,8 m³ pada kasus pembuka.
Kunci jawaban beralasan
- Nilai 185 hampir pasti dalam °F, karena °C sama dengan catatan lain. Sumber baris itu diperiksa lebih dulu, misalnya ekspor pencatat dengan satuan lain, sebelum nilainya dikonversi dan diberi tanda "dikoreksi: satuan".
- Data terurut memberi A, A, IQR 0,3 A, pagar 11,75 dan 12,95 A, dan pagar luar atas 13,4 A. Nilai 14,9 ditandai, tetapi tidak dibuang tanpa sebab: arus motor yang naik dapat berarti bantalan rusak, impeler tersumbat, atau tegangan turun, sehingga pompa diperiksa lebih dulu.
- Rata-rata 12,59 A dan simpangan baku 0,825 A, sehingga , lebih besar daripada 2,290. Uji ini menganggap data kira-kira normal dengan satu pencilan, jadi sebaran sembilan nilai lain diperiksa dulu, dan hasilnya tetap tidak menjawab apakah pompa rusak.
- Dengan nol rata-ratanya m³, tanpa nol m³. Karena hari ketiga hilang dan bukan nol, yang dipakai adalah 40,0 m³ dari lima hari dengan catatan satu hari tidak terukur, dan total diambil dari selisih meter kumulatif bila ada.
- Catatan 14 °C tidak dibuang, karena nilai yang melanggar batas higiene adalah temuan, bukan pencilan. Penyelia memeriksa catatan asli, alat ukur, dan keadaan ruang dingin saat itu, lalu nilai, sebab, dan tindakannya dilaporkan menurut prosedur keamanan pangan dapur.
- Baris jejak perubahan memuat tanggal data (14 September), kolom pemakaian air, nilai lama 438 m³, nilai baru 43,8 m³, alasan "koma desimal terlewat saat pengetikan", bukti berupa halaman buku catatan meter ruang pompa, nama pengubah, dan tanggal perubahan. Dengan isi itu orang lain dapat memeriksa ulang koreksinya tanpa harus bertanya.
Referensi
Sumber luar
- OpenStax: Introductory Statistics 2eopenstax.org
- NIST e-Handbook 1.3.5.17.1, Grubbs' Test for Outliersitl.nist.gov
- NIST Dataplot, dokumentasi uji Grubbsitl.nist.gov
- Grubbs's test (sekunder)en.wikipedia.org
Bab terkait
- Satuan, dimensi, konversi, dan angka pentingSatuan & Matematika · Bab 3
- Variasi, distribusi, dan ringkasan dataData & Pengukuran · Bab 2
- Lembar periksa dan catatan lapangan digital: rancangan formulir, lembar tally, nilai ukur dan batas, tanda tangan dan jejak audit, formulir digital, foto dan penanda waktu, mutu data dan cadanganData & Pengukuran · Bab 9
- Data deret waktu dari pencatat data dan pengendali: laju sampel dan aliasing, resolusi dan kuantisasi, rata-rata bergerak dan penyaringan, penanda waktu dan sinkronisasi, celah data, dan membaca log mesinData & Pengukuran · Bab 12
- Korelasi dan regresi: diagram pencar, koefisien korelasi, garis kuadrat terkecil, residu, koefisien determinasi, kurva kalibrasi, dan batas ekstrapolasiData & Pengukuran · Bab 7
- Tren, kontrol proses, dan keputusan berbasis buktiData & Pengukuran · Bab 3
- Mengukur dan memverifikasi penghematan energi: garis dasar, batas pengukuran, normalisasi terhadap produksi dan cuaca, regresi garis dasar, jumlah kumulatif CUSUM, ketidakpastian penghematan, dan laporanData & Pengukuran · Bab 15
- Konsistensi operasi: repeatability, kalibrasi, log, audit, KPI, dan peran manusiaLaundry · Bab 20
- Menyajikan data teknis: memilih jenis grafik, skala dan sumbu, grafik yang menyesatkan, tabel yang mudah dibaca, dasbor indikator kinerja, dan laporan satu halaman untuk manajemenData & Pengukuran · Bab 16
Uji diri · 3 soal
Cek pemahaman sebelum berpindah bab
Tulis jawaban dengan kata-kata Anda sendiri, lalu bandingkan dengan pembahasan dari latihan asli bab ini. Sistem tidak menebak benar-salah jawaban terbuka; Anda yang menilai bagian mana yang sudah dipahami.
Catatan suhu air cuci utama (°C): 85; 84; 185; 86; 85. Apa dugaan Anda tentang 185, dan berapa nilainya bila dugaan itu benar?
Arus motor pompa (A) 10 hari: 12,1; 12,4; 12,3; 12,6; 12,2; 12,5; 12,4; 14,9; 12,3; 12,2. Hitung kuartil, IQR, dan pagar 1,5 IQR. Bolehkah 14,9 dibuang?
Untuk data soal 2, hitung dan bandingkan dengan untuk 10 data. Apa yang perlu diperiksa sebelum hasil uji ini dipercaya?
Bab terdekat
Urutan baca menurut rak: Data & Pengukuran · Bab 14.
Urutan baca menurut rak: Data & Pengukuran · Bab 12.