html i blokada przed robotami

html i blokada przed robotami
P2
  • Rejestracja:ponad 19 lat
  • Ostatnio:ponad 3 lata
0

Co trzeba dodać do html zeby roboty google miały zabronione chodzenie po konkretnej stronie.

spartanPAGE
  • Rejestracja:około 12 lat
  • Ostatnio:dzień
1
sudo-s
  • Rejestracja:około 9 lat
  • Ostatnio:prawie 8 lat
  • Postów:15
0

Można to rozwiązać na kilka sposobów, albo korzystasz z meta tagów:
<meta name="robots" content="noindex"> - strona się nie zaindeksuje
<meta name="robots" content="noindex, nofollow"> - strona się nie zaindeksuje, a robot po urlach na stronie

Jeśli chcesz zablokować do konkretnego katalogu z plikiem/plikami, wtedy w pliku robots.txt wpisz:

Kopiuj
User-agent: *
Disallow: /sciezka_do_katalogu
edytowany 1x, ostatnio: sudo-s

Zarejestruj się i dołącz do największej społeczności programistów w Polsce.

Otrzymaj wsparcie, dziel się wiedzą i rozwijaj swoje umiejętności z najlepszymi.