ane dapat tugas softskill tentang web crawler..
Win Web crawler adalah sebuah otomatis yang memproses
atau untuk mereting halaman web. Win web crawler sering juga disebut dengan web
spider atau web robot. Bermula pada point awal berupa sebuah link alamat
website dan dibuka pada browser, lalu browser melakukan request dan
men-download data dari web server melalui protokol HTTP. Setiap Hyperlink yang
ditemui pada konten yang tampil akan dibuka lagi pada windows/tab browser yang
baru, demikian proses terus berulang. Nah sebuah web crawler mengotomatisasikan
pekerjaan itu.
