Crawl
Crawl
Added List Crawl
Ketika melakukan crawling, ada beberapa pengaturan yang harus dilakukan yang dimana harus membutuhkan pengetahuan terkait HTML dan CSS. Klik button add pada sisi kanan dan mengisi requirement isian, lalu klik button submit untuk menyimpan pengaturan.
- Beberapa isian data yang harus dilengkapi, sebagai berikut :
- Url index, yang harus dilengkapi yaitu alamat website dari media terkait (url)
- Tag index dilakukan dengan membaca code dari url media terkait (inspecting)
- Server crawler, alamat IP server yang digunakan untuk melakukan crawling
- Nama Media, nama media yang akan di crawling
- Status, untuk mengaktifkan pengaturan yang akan ditambahkan
- Batas Baris, parameter untuk mengambil jumlah berita
Berikut ini, contoh pengaturan media yang akan di crawling.
- Menampilkan data agar lebih detail perlu mengisi requirement isian data yang berada pada menu tag dengan menyesuaikan code pada halaman website media terkait.
- Judul, untuk menampilkan judul berita/post dari media.
- Penulis, untuk menampilkan penulis berita/post.
- Topik, untuk menampilkan topik berita/post.
- Gambar/icon, untuk menampilkan gambar berita/post.
- Isi, untuk menampilkan konten berita/post.
- Format tanggal, menentukan format penulisan tanggal kemudian disesuaikan dengan penulisan yang ada pada BigSpider.
- Tanggal, untuk menampilkan keterangan tanggal yang ada pada berita/post.
Berikut ini, contoh pengaturan yang telah dilakukan.
- Setelah requirement isian data telah diisi, untuk memastikan pengaturan yang telah berjalan dengan benar dapat dilakukan pengujian tes hasil. Klik button tes yang berada pada sisi bawah, maka secara otomatis sistem akan mengambil data sesuai dengan pengaturan.
Berikut ini, hasil tes dari pengaturan yang telah dilakukan.
Searching
Fitur searching dapat digunakan untuk pencarian media.
Actions
Manajemen list media BigSpider, ada dua fitur yang dapat digunakan dalam pengaturan media yaitu melakukan Edit Media dan menghapus list Media existing.