Το web robot είναι κάποιο πρόγραμμα που εκτελεί, συνήθως, μια απλή διαδικασία στο Διαδίκτυο που είναι δύσκολο να επιτευχθεί από έναν άνθρωπο. Η πλέον συνηθησμένη χρήση είναι για διαδικασίες που θα έπρεπε να εκτελεστούν αρκετές φορές και θα ήταν χρονοβόρο να γίνουν απο άνθρωπο.
Χαρακτηριστικό παράδειγμα είναι οι crawlers, οι οποίοι "έρπονται" σε ολόκληρο το Δίκτυο αναζητώντας σελίδες και συνδέσεις με άλλες σελίδες κ.ο.κ. Οι crawler χρησιμοποιούνται από τις μηχανές αναζήτησης ώστε να εντοπίζονται τυχόν καινούριες σελίδες και να καταγράφονται στις βάσεις δεδομένων τους ανάλογα με το περιεχόμενο που διαθέτουν, ώστε να εντοπίζονται εύκολα.
Δυστυχώς βέβαια, όπως σχεδόν με όλες τις τεχνολογίες, υπάρχουν και κακές χρήσεις. Χαρακτηριστικό παράδειγμα κακής χρήσης αποτελούν τα spambots, που σαρώνουν πάλι το Δίκτυο όπως οι crawlers, αλλά με στόχο να εντοπίζουν email που θα χρησιμοποιηθούν για spam!
Αναλυτικότερες πληροφορίες θα βρείτε στην wikipedia.
