Web Scraping Kalodata.com - Data Tersedia Public Tapi Tidak Saling Terhubung

Web Scraping Kalodata.com - Data Tersedia Public Tapi Tidak Saling Terhubung

Web Scraping Kalodata.com - Data Tersedia Public Tapi Tidak Saling Terhubung
Jumat, 08 September 2023

Bebarapa waktu kemarin sempat dapat tugas (dibaca : project) untuk dapat melakukan otomasi pada salah satu situs yang terkorelasi dengan tiktok, yaitu kalodata.com, sepintas jika dilihat, situs ini bergerak pada bidang analisa e-commerce yang berfokus pada aplikasi media sosial tiktok.


Tentunya dengan semakin tingginya penggunaan tiktok di indonesia, juga semakin memperkaya data yang tersedia yang ada di platform tersebut, maka hadirlah situs kalodata.com untuk mempermudah analisa bisnis yang bisa digunakan oleh para pelaku bisnis.


Saya sendiri tidak tahu apakah kalodata.com ini adalah anak perusahaan dari bytedance yang menaungi tiktok juga atau tidak, yang pasti didalam situs tersebut kita bisa mendapatkan informasi langsung yang sangat akurat yang terkait dengan tiktok.


Beberapa data luar biasa yang disediakan adalah :

  • Informasi terkait top seller tiktok
  • Informasi terkait para top kreator tiktok
  • Informasi produk yang dijual di tiktok
  • Informasi livestream yang dilakukan di tiktok
  • Informasi video yang sedang trend di tiktok


Tentunya dengan segudang data yang disajikan ini, bisa menjadi insight bagi para pegiat bisnis di tiktok. Informasi yang disediakan juga gratis jika kamu sudah melakukan pendaftarn akun disitus tersebut dan trial selama 7hari dengan limit batas maximal 10kali pencarian perhari.

Yaps, model bisnis mereka adalah dengan memainkan limitasi data, tentunya jika kamu butuh data yang lebih banyak, tidak cukup bukan hanya melakukan 10 pencarian?

Setelah mempelajari sana sini terkait dengan fitur yang ada, saya masih melihat terputusnya antar informasi yang ada, sehingga mau tidak mau dengan hanya limit 10kali perhari pencarian dan sedang mengkoneksikan antar data, ditengah perjalanan saya harus melamun menunggu besok karena limit sudah terpenuhi.. 👽

ternyata masalah ini juga ditemukan oleh pegiat bisnis yang menggunakan situs kalodata.com untuk analisa, bahkan dengan kondisi akun berbayar.

saya tidak tahu persis fitur apa yang dibatasi walaupun akun sudah berbayar, karena akun berbayar sendiri ada berbagai macam jenisnya

jika dilihat dari rincian akun berbayar, saya melihat fasilitas reporting hanya ada pada akun berbayar tertinggi, dan sepertinya report tersebut juga terbatas yang belum tentu sesuai keinginan pelaku bisnis, yang artinya jika ingin report custom, pelaku bisni harus mengkoneksikan ulang antar data dan ini jadi mematahkan kemudahan yang diberikan oleh akun dengan biaya tertinggi.

maka jika report custom adalah kebutuhannya, saya rasa akun basic saja sudah cukup dan ini juga adalah tugas yang saya terima waktu itu, yaitu membuat database relasional berdasarkan data yang ada dan menghasilkan raw report custom.

secara awam :
saya ingin melihat data kompetitor saya (filter base on kategori produk mereka), mulai dari produk apa yang mereka jual secara siginifikan sehingga revenue mereka bisa tinggi, siapa konten kreator yang ikut andil dalam penjualan mereka (dibaca : profile konten kreator hingga agensi mereka), atau kesempatan bisnis product apa yang mungkin bisa diambil yang belum banyak diambil oleh kompetitor, atau siapa konten kreator dengan angagement tertinggi namun belum banyak dipakai kompetitor.

sehingga jika kita simpulkan pertanyaan-pertanyan ini, harusnya kita bisa gali lebih dalam dengan menggabungkan semua fitur yang ada di kalodata.com menjadi sebuah database dan melakuan relasi antar data.


disinilah kita bisa berkreasi sebagai pegiat otomasi data, karena hampir tidak mungkin kalau kita klak klik data manual satu-satu dan menggabungkannya dengan tanpa id (fyi : nama bisnis/produk/koten kreator bisa saja sama, maka kita memerlukan id).


sebagai bahan referensi, saya menggunakan axios untuk bypass cookie, menggunakan boostrap sebagai tampilan karena saya sangat minim sekali terkait seni/design 👀 (liat aja deh dibawah, meskipun sudah dibantu boostrap, tetep kaku banget.. haha 😂 tapi yang penting fungsi kan? 😁), datatables untuk memudahkan download/preview data dalam bentuk tabel, manajemen database menggunakan SQLite, dan tentunya bahasa JavasScript sebagai pegangan dalam bercoding untuk membangun itu semua 👻👻

tentunya tombol-tombol yang ada dan data yang ditampilkan disesuaikan oleh permintaan user, semakin banyak fungsi yang dibutuhkan, tentunya saya semakin sering garuk-garuk kepala... hahaha 👻👻👻


kalau kamu merasa terbantu dengan artikel ini, yuk traktir penulis, agar lebih semangat sharing berbagai hal di blog ini ^_^
via link berikut ya :

Kamu juga bisa request custom aplikasi dan otomasi data dengan memberikan rinci fitur apa yang kamu inginkan dengan mulai harga Rp. 50.000,- segera klik link ini ya :
kalau kamu merasa terbantu dengan artikel ini, yuk traktir penulis, agar lebih semangat sharing berbagai hal di blog ini ^_^
via link berikut ya :
Trakteer Saya
Kamu juga bisa request custom aplikasi dan otomasi data dengan memberikan rinci fitur apa yang kamu inginkan dengan mulai harga Rp. 50.000,- segera klik link ini ya :
Web Scraping Kalodata.com - Data Tersedia Public Tapi Tidak Saling Terhubung
4/ 5
Oleh

yuu.. kita budayakan berkomentar.. bersilaturahmi itu memperpanjang umur... ^_^