Различия

Показаны различия между двумя версиями страницы.

--- beget:dokuwiki:robots_txt:path [2020/10/26 11:19]
Николай Солошин [Ссылки]
+++ beget:dokuwiki:robots_txt:path [2022/02/12 11:40] (текущий)
@@ Строка 5: / Строка 5: @@
 При указании без слеша, от индексирования будут закрыты все пути, начинающиеся с ''/wiki'', т.е.
-  * ''/wiki-system''
+  * ''/wiki'',
-  * ''/wiki/system''.
+  * ''/wikisyntax'',
+  * ''/wiki-syntax'',
+  * ''/wiki/syntax'',
+  * ''/wiki/syntax/id''.
 При указании со слешем, будет закрыто все, что после него, т.е. будут закрыты
-  * ''/wiki/system'',
+  * ''/wiki/syntax'',
-  * ''/wiki/system/id'',
+  * ''/wiki/syntax/id'',
 однако, не будут закрыты пути
   * ''/wiki'',
-  * ''/wiki-system''!
+  * ''/wiki-syntax'',
+  * ''/wikisyntax''!
 ===== Ссылки =====
   * [[beget:dokuwiki:anti_www#robotstxt|Пример]] моего robots.txt;
-  * Ссылка на [[http://robotstxt.org.ru/robotsexclusion/spec|спецификации]].
+  * Ссылка на [[http://robotstxt.org.ru/robotsexclusion/spec|спецификации]];
+  * Инструмент [[https://www.google.com/webmasters/tools/robots-testing-tool|проверки robots.txt]].

Knowledge WiKibase