@mr_oomen @deeptech_id Hmm, setau saya beberapa data BPS yg public bisa diakses langsung kok dari websitenya. Namun, kalo udah data yg bener2 milik negara dan bisa dianggap confidential, tampaknya bukan hal remeh utk kita rakyat biasa mengaksesnya secara cuma-cuma
@ffh_64 @deeptech_id (5) Kalau buku, saya kurang tahu, namun kalau mau cari2 di internet, googling, banyak kok bahas MV di Medium, Stackoverflow, Blog2 tentang R, Python, data analytics, dan sejenisnya :D
@ffh_64 @deeptech_id (4) Misal pakai mean / median / mode value utk mengisi MVnya, jika kurang memuaskan, bisa menggunakan clustering melihat dari variabel lainnya, maka biasanya nilai dari MVnya seharusnya berapa/apa, dan masih banyak lg, cek stackoverflow aja banyak kok :D
@ffh_64 @deeptech_id (3) Jika jumlah baris datanya sedikit, khawatir jika hapus baris yg ada MVnya bisa mengubah karakter/distribusi datasetnya, ada bbrp metode yg biasa digunakan, lbh tepat pakai yg mana dari analyst-nya masing2 yg lebih tahu
@ffh_64 @deeptech_id (2) Jika jumlah baris data yg dimiliki sangat banyak sedangkan MVnya hanya sedikit, simpelnya tinggal dihapus aja :D karena seharusnya tidak berpengaruh signifikan terhadap distribusi / karakter dataset yg dimiliki
@ffh_64 @deeptech_id (1) istilah "mengestimasi MissingValue(MV)" tampaknya kurang tepat, mungkin lbh tepat jika "apa yang perlu kita lakukan jika data yg dimiliki ada / banyak MVnya?" Nah kalo gini, tergantung kondisi data yg dimiliki
@pradyaaaa@deeptech_id Iya, TSA ranah DA juga kok. Secara umum, semua analisis deksriptif dan inferentif, serta sebagian analisis prediktif, juga pelaksanaan AB test ranah DA juga lho!
@llmanifesto@deeptech_id (2) Untuk tips, harus banyak2 cara pakai function / library yg bisa membantu mengerjakan hal tersebut.. Jika memang tidak ada sepengetahuan si Analyst-nya, mau gak mau ya memang harus manual banget XD
@llmanifesto@deeptech_id (1) Data kan ada beberapa tipe ya, seperti numeric, integer, boolean, string, date, dll. Biasanya yang paling sulit buat saya ya string, karena pembersihannya benar2 manual kalau tidak ada pola yang benar2 jelas dari data tersebut.
@deeptech_id Sejauh yang saya tahu, terkait pengolahan data ini, baik Data Analyst ataupun Data Scientist melakukan proses yang mirip2, yang berbeda hanya di jenis analisis dan output yang dihasilkan dari analisisnya.
@deeptech_id Langkah2 dalam proses pengolahan datanya tentunya ambil datanya dulu XD. Kalau sudah, biasanya datanya belum tentu sudah siap untuk dianalisis, oleh karena itu perlu "dibersihkan" terlebih dahulu. Setelah itu, baru deh dianalisis sesuai kebutuhan dan metode yang diinginkan