• Data Mining

Category Archives: Data Mining

Sedot Data KPU III: Sedot data Pilpres, Pileg dan DPD serta sedot juga lampiran C1nya, bisa perwilayah dan SeIndonesia

By | | , ,
Leave a comment

Sekarang sudah lengkap , bisa Pilpres, Legislatif Pusat, DPRD I, II serta DPD, bisa perwilayah dan Nasional, misalnya perprovinsi, perkab/perkota/perkecamatan/perdesa. anda tinggal edit di Querynya, caranya baca : Sedot Data KPU II: Sedot data Pilpres per-Wilayah Jika mau SeIndonesia tinggal delete di Querynya “Filtered Rows” di langkah ke-2 Ini penampakannya   … Continue reading →

Update Chromedriver secara manual jika error selenium “Session Not Created”

By | | , , ,
Leave a comment
Update Chromedriver secara manual jika error selenium “Session Not Created”

Untuk Chrome versi 115 keatas maka lokasi selenium-chromedriver dipindah ke lokasi baru yaitu :  https://googlechromelabs.github.io/chrome-for-testing/ (lokasi lama: https://chromedriver.chromium.org/downloads), hal ini sebenarnya tidak masalah jika kita menggunakan Internet selain Intranet/Lan kantor.  Cuman sayangnya Internet kantor melarang kita connect ke https://github.com/ mungkin dipikir saudaranya pornhub.com wkwkwkwkw Akibatnya program pasti error jika terdapat … Continue reading →

Studi Kasus: Sedot Data Pelaku pasar Bappebti (Badan Pengawas Perdagangan Berjangka Komoditi)

By | | , , , , ,
Leave a comment

Badan Pengawas Perdagangan Berjangka Komoditi beralamat di https://bappebti.go.id/ Disini yang akan kita ambil adalah data pelaku pasar Data hasil bisa didonlot di https://drive.google.com/file/d/15KQ9yu5Rr3kRF1AlJNasyFFfdKu1_RTk/view?usp=sharing Pialang Berjangka, https://bappebti.go.id/pialang_berjangka/list_pialang?order=asc&offset=0&limit=1000000 Pialang Berjangka yang Dicabut Izinnya, https://bappebti.go.id/pialang_berjangka_cabut/list_pialang?order=asc&offset=0&limit=1000000 Wakil Pialang Berjangka, https://bappebti.go.id/pialang_berjangka_wakil_pialang/list_wakil_pialang?order=asc&offset=0&limit=1000000 Pedagang Berjangka, https://bappebti.go.id/pedagang_berjangka/list_pedagang?sort=Nama&order=asc&offset=0&limit=1000000 Kantor Cabang Pialang Berjangka, https://bappebti.go.id/pialang_berjangka_kantor_cabang/list_pialang?order=asc&offset=0&limit=1000000 Bank Umum Penyimpan Margin, Dana Kompensasi, … Continue reading →

Studi Kasus: Sedot Data Perusahaan di MODI ESDM (Minerba One Data Indonesia)

By | | , , , , , , , , ,
Leave a comment
Studi Kasus: Sedot Data Perusahaan di MODI ESDM (Minerba One Data Indonesia)

Jika kita membuka halaman https://modi.esdm.go.id/, maka akan kita dapatkan banyak data minerba disitu antara lain: Penerimaan Negara Dana Bagi Hasil Investasi Dana Pengembangan Masyarakat Produksi Batubara Penjualan Batubara Logam Timah dll Sebelum sedot update dulu ke versi 07 Agustus 2022 Disini kita akan mencoba menarik data perusahaan yang terdaftar di … Continue reading →

Aplikasi IDX Template versi Selenium : Cara mudah sedot data profil emiten BEI dari idx.co.id via VBA dan PowerQuery versi Selenium

By | | , , , , , ,
Leave a comment
Aplikasi IDX Template versi Selenium : Cara mudah sedot data profil emiten BEI dari idx.co.id via VBA dan PowerQuery versi Selenium

Ini adalah alat sedot IDX/ Bursa Efek Indonesia versi baru karena yang lama/versi IE diblock oleh idx.co.id. Versi selenium menggunakan Chrome yaitu Browser yang jauh lebih canggih daripada IE Continue reading →

Studi Kasus: Database Sekretariat Pengadilan Pajak (Jadwal, Daftar Putusan, Daftar Risalah Keputusan dll)

By | | , , , , , ,
Leave a comment

Jika kita buka data Sekretariat Pengadilan Pajak maka ada banyak data yang bisa kita sedot yaitu antara lain : JADWAL SIDANG RUS Pemeriksaan RUS Pengucapan Daftar Putusan Diucap Daftar Putusan Kembali Pos DAFTAR PUTUSAN Daftar Putusan Daftar Risalah Putusan Data tersebut berupa file JSON yang sangat mudah untuk disedot jika … Continue reading →

Cara mudah menCopas Table dari Halaman Website

By | | , , ,
Leave a comment
Cara mudah menCopas Table dari Halaman Website

Jika kita ingin mengambil data misalnya table dari suatu halaman website maka penulis akan ajari cara gampang, kadang suatu table tidak gampang untuk dicopas, misalnya http://www.pajakita.net/p/wilayah-kerja-kantor-pelayanan-pajak.html Jika kita coba copas maka hasilnya sangat mengecewakan Solusinya : Cara I. Gunakan Inspect di Browser Buka link diatas Jika sudah maka cari lokasi … Continue reading →

Cara efektif mensave hasil search/pencarian di Google

By | | , ,
Leave a comment

Jika kita ingin menarik banyak data dari internet, misalnya data LPSE (Layanan Pengadaan Secara Elektronik) kita memerlukan link LPSE seluruh Indonesia. Data Link ini bisa kita sedot menggunakan Google Search, Nah hasil search ini bisa kita save sebagai csv yang dengan mudah bisa kita convert ke Excel. Ini Contoh hasilnya … Continue reading →

Studi Kasus : Menarik data dalam jumlah banyak – Data TBS Disbun Sumut

By | | , , , , ,
Leave a comment
Studi Kasus : Menarik data dalam jumlah banyak – Data TBS Disbun Sumut

Jika kita membuka web Dinas perkebunan Sumatera Utara di : http://disbun.sumutprov.go.id/harga-komoditas/web/index.php maka kita bisa mendapatkan banyak data, namun bagaimana jika ingin mengambil data tersebut dengan cepat agar kita bisa buat Database? Kita contohkan database Rekapitulasi Penetapan Harga TBS Kelapa Sawit yang bisa kita tarik dari alamat : http://disbun.sumutprov.go.id/harga-komoditas/web/index.php?r=site%2Flaporan-mingguan&id=298 untuk mengambil … Continue reading →