Langsung ke konten utama

Data Preparation

 

 
Data Preparation adalah proses mengubah data mentah menjadi format yang dapat dianalisis dan diproses dengan lebih efisien. Berikut adalah penjelasan tentang konsep-konsep yang terkait dengan Data Preparation: 

  1. Raw Data (Data Mentah): Ini adalah data dalam format aslinya, seperti yang diperoleh dari sumber data. Data mentah belum diproses atau diubah dan mungkin berisi kesalahan, nilai yang hilang, atau format yang tidak konsisten.
  2. Structured Data (Data Terstruktur): Data yang diorganisir dalam format tertentu, seperti baris dan kolom dalam tabel relasional atau dokumen dengan skema tetap. Structured data memudahkan analisis dan pemrosesan lebih lanjut.
  3. Data Preprocessing (Pemrosesan Awal Data): Ini adalah langkah awal dalam Data Preparation, di mana data mentah diubah menjadi format yang lebih bersih dan terstruktur. Ini meliputi tugas seperti pembersihan data, penanganan nilai yang hilang, penghapusan duplikat, dan normalisasi data.
  4. Exploratory Data Analysis (EDA): Setelah preprocessing, EDA dilakukan untuk memahami karakteristik data, mengidentifikasi pola, dan menemukan wawasan awal. EDA melibatkan visualisasi data, perhitungan statistik deskriptif, dan analisis korelasi.
  5. Insight, Report & Visual Graph: Insight atau Wawasan adalah pemahaman atau wawasan yang diperoleh dari analisis data. Ini dapat berupa pola, tren, hubungan, atau penemuan lain yang relevan dengan tujuan analisis. Laporan atau Report adalah cara untuk mengomunikasikan insight yang diperoleh dari analisis data. Laporan dapat berupa dokumen tertulis, presentasi, atau dashboard yang berisi ringkasan, visualisasi, dan rekomendasi. Visual Graph atau Grafik Visual adalah representasi visual dari data, seperti grafik batang, garis, lingkaran, atau plot. Grafik visual membantu mengomunikasikan informasi dan pola dalam data dengan cara yang mudah dipahami secara visual.

Dalam proses Data Preparation, data mentah diubah menjadi data terstruktur melalui langkah-langkah preprocessing. Setelah itu, Exploratory Data Analysis dilakukan untuk memperoleh wawasan awal. Insight yang diperoleh kemudian dikomunikasikan melalui laporan dan grafik visual untuk membantu pengambilan keputusan atau tindakan lebih lanjut.

Komentar

Postingan populer dari blog ini

Data Transform

  Transformasi data merupakan proses mengubah format, skala, atau representasi data dari bentuk awalnya menjadi bentuk yang lebih sesuai atau lebih mudah untuk diproses, dianalisis, atau dimodelkan. Tujuannya adalah untuk meningkatkan kualitas data, mengurangi kekacauan, atau menyesuaikan data agar cocok dengan kebutuhan analisis atau pemodelan yang akan dilakukan. Beberapa teknik transformasi data umum meliputi: Normalisasi: Mengubah nilai-nilai dalam dataset ke skala yang relatif, sering kali antara 0 dan 1, untuk memastikan bahwa semua variabel memiliki pengaruh yang seimbang dalam analisis. Standardisasi: Mengubah nilai-nilai dalam dataset sehingga memiliki mean 0 dan deviasi standar 1, sehingga mendukung perbandingan antar variabel yang memiliki unit yang berbeda. Transformasi Logaritmik: Menggunakan logaritma alami atau logaritma lainnya untuk mengubah distribusi data yang tidak normal atau cenderung mendekati distribusi normal. Transformasi Box-Cox: Menggunakan tr...