Инструменты пользователя

Инструменты сайта


beget:dokuwiki:robots_txt:path

Нюансы указания путей в robots.txt

Слеш в конце пути играет большую роль в итоговом результате и /wiki не равняется /wiki/!

При указании без слеша, от индексирования будут закрыты все пути, начинающиеся с /wiki, т.е.

  • /wiki,
  • /wikisyntax,
  • /wiki-syntax,
  • /wiki/syntax,
  • /wiki/syntax/id.

При указании со слешем, будет закрыто все, что после него, т.е. будут закрыты

  • /wiki/syntax,
  • /wiki/syntax/id,

однако, не будут закрыты пути

  • /wiki,
  • /wiki-syntax,
  • /wikisyntax!

Ссылки


Дисклеймер

  • Использование материалов данной базы знаний разрешено на условиях лицензии, указанной внизу каждой страницы! При использовании материалов активная гиперссылка на соответствующую страницу данной базы знаний обязательна!
  • Автор не несет и не может нести какую либо ответственность за последствия использования материалов, размещенных в данной базе знаний. Все материалы предоставляются по принципу «как есть». Используйте их исключительно на свой страх и риск.
  • Все высказывания, мысли или идеи автора, размещенные в материалах данной базе знаний, являются исключительно его личным субъективным мнением и могут не совпадать с мнением читателей!
  • При размещении ссылок в данной базе знаний на интернет-страницы третьих лиц автор не несет ответственности за их техническую функциональность (особенно отсутствие вирусов) и содержание! При обнаружении таких ссылок, можно и желательно сообщить о них в комментариях к соответствующей статье.

Обсуждение

Ваш комментарий:
G A​ N D B W N X G M C O F Z P D
 
Последнее изменение: 2022/02/12 11:40 (внешнее изменение)