Inicio Explorar Axuda
Rexistro Iniciar sesión
lee
/
recipes-leemorgan-dev
1
0
Fork 0
Ficheiros Incidencias 7 Pull Requests 0 Wiki
Rama: development
Ramas Etiquetas
recipes-leemorg...
/
static
/
robots.txt

robots.txt 63 B
Permalink Histórico Raw

123 
  1. # allow crawling everything by default
    2. 

  2. User-agent: *
    3. 

  3. Disallow:
    4.