Strona główna Odkrywaj Pomoc
Zaloguj się
ITSociaal
/
themaitsociaal
Obserwuj 1
Polub 0
Forkuj 0
Pliki Problemy 0 Oczekujące zmiany 0 Wiki
Gałąź: master
Gałęzie Tagi
themaitsociaal
/
robots.txt

robots.txt 78 B
Bezpośredni odnośnik Historia Czysty

123456 
  1. # www.robotstxt.org/
    2. 

  2. 

  3. # Allow crawling of all content
    4. 

  4. User-agent: *
    5. 

  5. Disallow:
    6. 

  6.