|
|
Ok!
|
|
|
Ok!
|
|---|---|---|---|---|
| 282 | 18 =>
array (
'CONDITION' => '#^/robots.txt(.*)#',
'RULE' => '',
'ID' => '',
'PATH' => '/robots.txt.php',
'SORT' => 100,
), | urlrewrite, Переадресация, robots | 45900 | Переадресация Битрикс в urlrewrite для robots.txt |
| 221 | User-agent: * Disallow: / User-agent: Googlebot User-agent: AdsBot-Google Disallow: / | disallow all, robots | 130 | Запретить индексайцию всем роботам и рекламным ботам |