← Все инструменты для текста

Генератор заголовка X-Robots-Tag

Создайте заголовки X-Robots-Tag и готовые правила для Apache, Nginx и PHP, которые запрещают индексацию PDF, документов, изображений и других файлов, не способных нести мета-тег robots.

  • Бесплатно
  • Без регистрации
  • Работает на любом устройстве

Около Генератор заголовка X-Robots-Tag

Мета-тег robots работает только внутри HTML, поэтому PDF, таблица или изображение не могут его использовать. Заголовок HTTP X-Robots-Tag делает то же самое для любого файла, потому что сервер отправляет его вместе с ответом. Этот инструмент формирует значение заголовка из директив, таких как noindex, nofollow, noarchive, max-snippet и unavailable_after, может ограничить его одним сканером и создаёт соответствующий блок FilesMatch для Apache, блок location для Nginx и вызов PHP для указанных расширений файлов.

Как пользоваться инструментом «Генератор заголовка X-Robots-Tag»

  1. Перечислите расширения файлов, которые нужно охватить, например pdf и docx, и отметьте нужные директивы.
  2. По желанию укажите один поисковый робот или дату unavailable_after, а также ограничения длины сниппета.
  3. Вставьте правило для Apache, Nginx или PHP в настройки сервера, затем проверьте файл с помощью проверки заголовков.

Чем полезен этот инструмент?

Другие названия

Частые вопросы

Почему эти файлы нельзя блокировать в robots.txt?

Заблокированный сканер никогда не запрашивает файл, поэтому не видит заголовок. Адрес тогда может оставаться в результатах без сниппета.

Нужен ли mod_headers на Apache?

Да, директива Header относится к mod_headers. Большинство хостингов ее включают, проверить можно командой apachectl -M.

Достаточно ли noindex, чтобы удалить файл, который уже в индексе?

Он удаляется при следующем посещении файла сканером и чтении заголовка. Search Console может ускорить этот процесс.

Инструмент «Генератор заголовка X-Robots-Tag» бесплатный?

Да. Инструмент «Генератор заголовка X-Robots-Tag» на Toolipedia бесплатный: без регистрации и водяных знаков.

Это безопасно?

Да. Все вычисления выполняются в браузере, и ничего из введённого не отправляется на наш сервер.

Работает ли это на телефоне?

Да. Работает в любом современном браузере на Android и iPhone, а также на планшетах и компьютерах. Ничего не нужно устанавливать.

Нужна ли учётная запись?

Нет. Просто откройте страницу и пользуйтесь. Ни регистрации, ни электронной почты не нужно.

Можно ли разместить Генератор заголовка X-Robots-Tag на моём сайте?

Да. Нажмите кнопку «Встроить на свой сайт» под инструментом, чтобы скопировать короткий фрагмент кода и вставить его на страницу. Это бесплатно, аккаунт не нужен, и инструмент продолжает работать внутри вашей страницы.

Похожие инструменты