crawler

Di cosa devo essere consapevole quando eseguo un web crawler?
Cosa rende un buon web crawler?Come si implementa un Web crawler??Come funziona un web crawler?Che tipo di agente è il web crawler?Come faccio a rilev...