Website crawler

  • Whatsapp
Website crawler

Source Code : Website crawler

Bacaan Lainnya

Perayap Situs web kami dapat mengimpor situs web untuk dirayapi. Ini akan mendapatkan url halaman, teks halaman, ukuran halaman, domain halaman, url halaman awal, judul halaman. Tidak perlu mengunduh file dan gambar html. Perayap kami disimpan oleh teks.

Semua data yang dirayapi akan disimpan ke folder keluaran dan file sql yang disimpan. Contoh: yahoo.com.sql

Pertama kali meluncurkan crawler maka diperlukan kata sandi. Tapi jangan khawatir ini sudah ditulis di crypt.txt

Crawlernya adalah – crawler / scraper berbasis Windows – Multithreaded – Dioptimalkan untuk performa. – Kedalaman dan cakupan perayapan. – Cepat. Karena ditulis oleh C # – Termasuk file sumber

Pos terkait

Tinggalkan Balasan

Alamat email Anda tidak akan dipublikasikan. Ruas yang wajib ditandai *