Los motores de búsqueda directa a veces incluso abrumadora cantidad grande, la mayoría del tráfico de sitios web . Como el más grande del grupo, Google es crucial para el éxito de cualquier sitio. Para que funcione correctamente, es necesario rastrear su sitio con regularidad. Incluso después de que haya configurado el archivo robots.txt requisito necesario para que Google rastree su sitio web, usted debe probar el rastreo de Google para asegurarse de que funciona . Usted puede hacer esto desde su cuenta de Herramientas para webmasters . Cosas que necesitará
Herramientas para webmasters cuenta
Ver Más instrucciones
1

Inicie sesión en su cuenta de Webmaster Tool (enlace en Recursos) . Para probar Google crawl , tiene que inscribirse en esta herramienta de forma gratuita si usted no lo ha hecho .

2 Seleccione " Configuración del sitio ", luego " Acceso de rastreadores ".

3

clic en la pestaña " robots.txt Test".
4

compruebe que toda la información ( URL de su sitio , el archivo robots.txt ) es correcta, haga clic en "Test . "