SCAREPE TOKO PEDIA DENGAN PYTHON

kita akan belajar scraping tokopedia. disini kita akan menggunakan tools yang di buat oleh orang lain untuk scrape data toko di tokopedia

kalian bisa cloning atau download tools nya, setelah download kalian masuk ke folder scrapy-tokopedia, tools ini memanfaatkan framework scrapy

jika kalian ingin tau lebih lanjut silahkan kunjungi dokumentasi resminya disini

jika sudah kalian instal requirements nya dengan perintah

sebelumnya kalian harus sudah instal python versi 3.x , untuk yang belum silahkan cek di artikel sebelum-sebelumnya

jika sudah selesai install requirement nya dan tidak terjadi error bisa lanjut ke tahap selanjutnya

lalu kalian buka folder scrape-tokopedia dengan text editor disini saya mengunakan visual studio code, masuk ke folder tokopedia lalu ke folder spiders disana kalian akan menemukan file promo.py

disini adalah script untuk scrape data promo yang ada di tokopedia

lalu jalankan dengan perintah

tunggu sampai proses nya selesai , lalu lihat akan ada file baru bernama result_promo.json

data json nya sudah dapat tinggal kalian olah sedemikian supaya bisa jadi ouput yang menarik

saya mengunakan pandas untuk menampilkan nya menjadi tabel, kalian bisa cek di artikel sebelumnya cara mengunakan pandas

sekian dulu dari saya semoga bermanfaat

Terimakasih



Komentar

Posting Komentar

Postingan populer dari blog ini

MEMBUAT PROGRAM PESANAN MENU RESTORAN PADA PYTHON

Gambar
      Pada artikel kali ini saya akan membuat program python yaitu program pesan menu makanan di python, untuk memnuhi tugas dari pak ulir pemograman back end. BERIKUT RUNNING PROGRAMNYA  Deklarasi Variable     fungsinya sebagai  alokasi memory untuk menyimpan nilai-nilai. Ibarat wadah atau tempat sementara yang digunakan untuk menyimpan data dimana dapat diambil sewaktu-waktu tergantung kebutuhan. Print        fungsinya sebagai  alokasi memory untuk menyimpan nilai-nilai. Ibarat wadah atau tempat sementara yang digunakan untuk menyimpan data dimana dapat diambil sewaktu-waktu tergantung kebutuhan. While      Perulangan while pada python adalah proses pengulangan suatu blok kode program  selama sebuah kondisi terpenuhi   [1] .      Singkatnya, perulangan while adalah  perulangan yang bersifat  indefinite  alias tidak pasti , atau bahkan tidak terbatas  [2] . IF/ELIF/EL...
Baca selengkapnya

Membuat Fake Server Menggunakan JSON-Server dan NodeJs dengan Menginstall NPM

Gambar
    Menjalankan NodeJs dan JSON-SERVER untuk membuat server tiruan Diblog kali kallli ini, saya akan membahas cara menjalankan JSON-SERVER dengan NPM pada VSC. Langkah-langkahnya yaitu sebagai berikut : 1. Install Nodejs terlebih dahulu pada link: https://nodejs.org/en/download/      2. Jika sudah di download, buka CMD untuk mengecek versi Nodejs, ketikkan  node -v  lalu enter      3. Selanjutnya untuk mengecek versi npm ,  ketikkan  npm --version      4. Kemudian ketik  npm install -g json-server  lalu enter      5. Selanjutnya buatlan folder baru dengan nama  fake-server           6. Kemudian buka folder baru tersebut pada Visual Studio Code, dan buat file baru pada folder tersebut     dengan nama  data.json      7. Lalu masukkan codingan ke visual studio code dari https://code.tutsplus.com/id/tutorials...
Baca selengkapnya

Web Scraping dengan Library BeautifulSoup dan Requests

Gambar
  S craping  halaman web atau dalam Bahasa Inggrisnya  web   scraping ,  adalah teknik yang digunakan untuk mengambil isi dari sebuah halaman web secara spesifik, misalnya link, teks, gambar, tabel dan lain-lain. Dengan bantuan  library  beautifulsoup dan requests, pekerjaan mengambil data dari sebuah halaman web menjadi sangat mudah. Pada artikel kali ini saya akan mempraktikkan secara sederhana mengenai cara kerja dari beautifulsoup dan requests. Untuk mempraktekkan data scraping, kita butuh bahasa pemograman Python. Untuk itu kita perlumemastikal interopreter python sudah ter-install di komputer kita. Baik kita langsung lanjut saja ke pembahasan Instalasi BeautifulSoup     Pertama kita install library beautifulsoup (bs4) dengan perintah pip3.9 install bs4 Setelah muncul tulisan seperti gambar di bawah ini kita bisa langsung kelangkah selanjutnya yaitu import beautifulsoup Import Beautifulsoup Kemudian import beautifulsoup dengan...
Baca selengkapnya