Strona główna Odkrywaj Pomoc
Zarejestruj się Zaloguj się
wuhan
/
HazMatSpider
2
0
Forkuj 0
Pliki Problemy 0 Oczekujące zmiany 0 Wiki
Drzewo: 190856288e
Gałęzie Tagi
HazMatSpider
/
spider-ui
/
public
/
robots.txt

robots.txt 25 B
Historia Czysty

12 
  1. User-agent: *
    2. 

  2. Disallow: /
    3.