Настройки robots.txt. Часть 3

Такая мера необходима по тем причинам, что при больших объёмах временных файлах, поисковые системы могут принять получение большого количества ненужной информации за спам. Чтобы этого не было, мы просто запретим индексацию для данного каталога. Предположим, что временная папка называется temp, и находится в папке cms. Таким образом, необходимо создать вот такой файл настроек:
user-agent: *
dissalow: /cms/temp
Вот, мы всего лишь указали путь к папке, и теперь, доступ будет запрещён ТОЛЬКО к папке temp, которая находится внутри папки cms. на остальные папки этот запрет никак не повлияет.
Другие новости о компьютерах и технологиях можно почитать на веб-сайте cominftech.ru. Рекомендую посетить этот познавательный ресурс.

Тэги: