Файл robots.txt

Да, только учтите, что google по большей части игнорирует robots.txt
 
Да, только учтите, что google по большей части игнорирует robots.txt
Яндекс ругался я добавил полный адрес до карты сайта и ошибка исчезла. А там не нужно ни где свой адрес сайта прописывать больше?

454545477787878787.png
 
Последнее редактирование:
Яндекс ругался я добавил полный адрес до карты сайта и ошибка исчезла. А там не нужно ни где свой адрес сайта прописывать больше?
Да, я там домен вырезал. Больше нигде не нужно
 
Добрый день, я думаю параметр Disallow: /misc/style-variation?* тоже нужно добавить для xf 2.3.x

1742608880544.png

и /direct-messages/

1742608985879.png
 
Последнее редактирование:
Особо не помогает. Я скрыл переключатель цвета для гостей и переназначил 400 ошибку на 410
 
Стоит плагин, который редиректит ссылки. Ссылка имеет вот такой вид https_://mysite.com/redirect/?to=aHR0cDovL3QubWUvUm95YWxPdHppdg%3D%3D&content_type=post&content_id=5345
Соответственно под каждую ссылку меняется набор символов.
Мне надо в robots.txt закрыть от индексирования ее. И вот как сделать?
  • disallow: /redirect/
  • disallow: /redirect/*
  • disallow: /redirect/?to
Какой-то из этих вариантов правильный? Или дайте, пожалуйста, правильный
 
Современный облачный хостинг провайдер | Aéza
Назад
Сверху Снизу