• Data Mining

Category Archives: Data Mining

Sedot Data KPU III: Sedot data Pilpres, Pileg dan DPD serta sedot juga lampiran C1nya, bisa perwilayah dan SeIndonesia

By | | , ,
Leave a comment

Sekarang sudah lengkap , bisa Pilpres, Legislatif Pusat, DPRD I, II serta DPD, bisa perwilayah dan Nasional, misalnya perprovinsi, perkab/perkota/perkecamatan/perdesa. anda tinggal edit di Querynya, caranya baca : Sedot Data KPU II: Sedot data Pilpres per-Wilayah Jika mau SeIndonesia tinggal delete di Querynya “Filtered Rows” di langkah ke-2 Ini penampakannya   … Continue reading →

Update Chromedriver secara manual jika error selenium “Session Not Created”

By | | , , ,
Leave a comment
Update Chromedriver secara manual jika error selenium “Session Not Created”

Untuk Chrome versi 115 keatas maka lokasi selenium-chromedriver dipindah ke lokasi baru yaitu :  https://googlechromelabs.github.io/chrome-for-testing/ (lokasi lama: https://chromedriver.chromium.org/downloads), hal ini sebenarnya tidak masalah jika kita menggunakan Internet selain Intranet/Lan kantor.  Cuman sayangnya Internet kantor melarang kita connect ke https://github.com/ mungkin dipikir saudaranya pornhub.com wkwkwkwkw Akibatnya program pasti error jika terdapat … Continue reading →

Aplikasi Sedot Data Merchant/Toko Tokopedia dengan e-Audit Utilities dan Power Query

By | | , , , , ,
Leave a comment
Aplikasi Sedot Data Merchant/Toko Tokopedia dengan e-Audit Utilities dan Power Query

Aplikasi disini adalah sebenarnya File Excel yang sudah dilengkapi dengan Template Links Tokopedia dan Fungsi Power Query yang sangat memudahkan dalam konversi data web menjadi Excel dimana kita hanya perlu melakukan Refresh Query dan semua data akan tersaji dengan sempurna, dilengkapi juga dengan fungsi agar otomatis menyesuaikan folder tempat data … Continue reading →

Studi Kasus: Sedot Data Pelaku pasar Bappebti (Badan Pengawas Perdagangan Berjangka Komoditi)

By | | , , , , ,
Leave a comment

Badan Pengawas Perdagangan Berjangka Komoditi beralamat di https://bappebti.go.id/ Disini yang akan kita ambil adalah data pelaku pasar Data hasil bisa didonlot di https://drive.google.com/file/d/15KQ9yu5Rr3kRF1AlJNasyFFfdKu1_RTk/view?usp=sharing Pialang Berjangka, https://bappebti.go.id/pialang_berjangka/list_pialang?order=asc&offset=0&limit=1000000 Pialang Berjangka yang Dicabut Izinnya, https://bappebti.go.id/pialang_berjangka_cabut/list_pialang?order=asc&offset=0&limit=1000000 Wakil Pialang Berjangka, https://bappebti.go.id/pialang_berjangka_wakil_pialang/list_wakil_pialang?order=asc&offset=0&limit=1000000 Pedagang Berjangka, https://bappebti.go.id/pedagang_berjangka/list_pedagang?sort=Nama&order=asc&offset=0&limit=1000000 Kantor Cabang Pialang Berjangka, https://bappebti.go.id/pialang_berjangka_kantor_cabang/list_pialang?order=asc&offset=0&limit=1000000 Bank Umum Penyimpan Margin, Dana Kompensasi, … Continue reading →

Studi Kasus: Sedot Data Perusahaan di MODI ESDM (Minerba One Data Indonesia)

By | | , , , , , , , , ,
Leave a comment
Studi Kasus: Sedot Data Perusahaan di MODI ESDM (Minerba One Data Indonesia)

Jika kita membuka halaman https://modi.esdm.go.id/, maka akan kita dapatkan banyak data minerba disitu antara lain: Penerimaan Negara Dana Bagi Hasil Investasi Dana Pengembangan Masyarakat Produksi Batubara Penjualan Batubara Logam Timah dll Sebelum sedot update dulu ke versi 07 Agustus 2022 Disini kita akan mencoba menarik data perusahaan yang terdaftar di … Continue reading →

Aplikasi IDX Template versi Selenium : Cara mudah sedot data profil emiten BEI dari idx.co.id via VBA dan PowerQuery versi Selenium

By | | , , , , , ,
Leave a comment
Aplikasi IDX Template versi Selenium : Cara mudah sedot data profil emiten BEI dari idx.co.id via VBA dan PowerQuery versi Selenium

Ini adalah alat sedot IDX/ Bursa Efek Indonesia versi baru karena yang lama/versi IE diblock oleh idx.co.id. Versi selenium menggunakan Chrome yaitu Browser yang jauh lebih canggih daripada IE Continue reading →

Studi Kasus: Database Sekretariat Pengadilan Pajak (Jadwal, Daftar Putusan, Daftar Risalah Keputusan dll)

By | | , , , , , ,
Leave a comment

Jika kita buka data Sekretariat Pengadilan Pajak maka ada banyak data yang bisa kita sedot yaitu antara lain : JADWAL SIDANG RUS Pemeriksaan RUS Pengucapan Daftar Putusan Diucap Daftar Putusan Kembali Pos DAFTAR PUTUSAN Daftar Putusan Daftar Risalah Putusan Data tersebut berupa file JSON yang sangat mudah untuk disedot jika … Continue reading →

Cara mudah menCopas Table dari Halaman Website

By | | , , ,
Leave a comment
Cara mudah menCopas Table dari Halaman Website

Jika kita ingin mengambil data misalnya table dari suatu halaman website maka penulis akan ajari cara gampang, kadang suatu table tidak gampang untuk dicopas, misalnya http://www.pajakita.net/p/wilayah-kerja-kantor-pelayanan-pajak.html Jika kita coba copas maka hasilnya sangat mengecewakan Solusinya : Cara I. Gunakan Inspect di Browser Buka link diatas Jika sudah maka cari lokasi … Continue reading →

Studi Kasus: Sedot data Pengadaan (LPSE) Nasional berdasarkan NPWP Pemenang tender

By | | , , , , , ,
Leave a comment

Jika kita buka web Pusat Informasi Pengadaan nasional yang beralamat di : http://202.43.173.69:8080/ maka kita akan dapatkan data LPSE se-Indonesia, jadi kita ternyata bisa ambil data WP KPP kita yang pernah menang di lelang pengadaan Nasional, ini bisa jadi sumber data (mungkin) yang lumayan berguna.  Dengan Web ini maka kita tidak perlu capek2 mengambil data dari Masing LPSE2 baik ditingkat pemda atau kementerian/lembaga satu persatu Continue reading →

Studi Kasus: Sedot Penjualan Product dari Bukalapak Seller dan Convert ke Excel

By | | , , , , , , , ,
Leave a comment
Studi Kasus: Sedot Penjualan Product dari Bukalapak Seller dan Convert ke Excel

Bukalapak adalah salah satu e-Commerce di Indonesia, berikut kita ajarkan cara sedot penjualan produk dari salah satu seler di BL, caranya sama dengan Toped atau Shopee, namun ada tricks agar bisa sukses sedot data karena BL memerlukan Access Token rahasia agar mau disedot dan access ini hanya berlaku beberapa menit. … Continue reading →