Crawler
Crawler minangka program sing kanthi otomatis nemokake dokumen lan gambar ing web, lan kanthi otomatis nggawe database. Iki uga disebut "Bot", "Spider", "Robot" lan liya-liyane. Utamane digunakake kanggo database mesin pencari lan nggawe indeks, uga kanggo survey statistik lan tujuan liyane. Ing taun-taun pungkasan, pangirim alamat e-mail lan liya uga nggunakake crawler kanggo nambah efisiensi panularan spam. Umumé, crawler mbaleni operasi njaluk salinan anyar dokumen HTML sing dikenal, ngetokake tautan sing kalebu ing dokumen lan ngumpulake dokumen liyane. Yen dokumen anyar ditemokake, wis didaftar ing database. Yen dideteksi ora ana file sing dikenal, dibusak saka basis data. ...