Listar directorios de una web

Buenas.

Estoy intentando listar la estructura de una web, y utilizo dirb. Lo configuro para cada 20 segundos y así no sobrecargar de peticiones la web.

Al cabo de un rato de sacarme 3 o 4 directorios, me tira el error

Error! (FATAL! TOO MANY ERRORS CONNECTING TO HOST.)

¿Por qué sucede esto? ¿Con qué otro programa puedo hacer un scanner de directorios?

Muchas gracias!

dirsearch, dirbuster, gobuster, wfuzz... sera por tools

También puedes usar OWASP Zed Attack Proxy o Burp Suite.
Saludos!!

OK. Gracias. Espero que estén en Kali por defecto 

tambien puedes utlizar una tool que esta en la web

pentest-tools.com

Gracias. El caso es que creo que no obtengo resultados porque la web detecta que no es un humano en que hace browse en la web.

Creo que OWASP ZAP y BurpSuite pueden hacerse pasar por un "agente" Firefox para "engañar" a la web y sacarme la máxima info posible de la estructura del sitio web. Supongo que he de configurar Firefox como Proxy, o al revés: esas herramientas como proxies de Firefox.

En todo caso, luego debería automatizar el escaneo.

¿Alguien me puede ilustrar con esto?

Gracias de nuevo!

PD: No tienes permitido ver los links. Registrarse o Entrar a mi cuenta me da poca info.....