Si vous consultez cette page c'est peut être après avoir découvert les traces d'un "User-Agent" inconnu dans vos logs.
Ce crawler est un projet très peu avancé en phase active de développement.
S'il a été trop rapide je vous encourage à paramétrer le Crawl-delay de votre fichier robots.txt