Настройки robots.txt. Часть 3
Такая мера необходима по тем причинам, что при больших объёмах временных файлах, поисковые системы могут принять получение большого количества ненужной информации за спам. Чтобы этого не было, мы просто запретим индексацию для данного каталога. Предположим, что временная папка называется temp, и находится в папке cms. Таким образом, необходимо создать вот такой файл настроек:
user-agent: *
dissalow: /cms/temp
Вот, мы всего лишь указали путь к папке, и теперь, доступ будет запрещён ТОЛЬКО к папке temp, которая находится внутри папки cms. на остальные папки этот запрет никак не повлияет.
Другие новости о компьютерах и технологиях можно почитать на веб-сайте cominftech.ru. Рекомендую посетить этот познавательный ресурс.
Пожалуйста, оставьте свой комментарий
Рекомендуемые к прочтению статьи:
- Google PageRank. Часть 16
- В чем польза приложений «список покупок»
- Американский хостинг, часть 2
- Алибаба и 100 сотрудников
- Как выбрать сумку-чехол для ноутбука
- Неисправности с компьютером
- Исследование сайта. Запросы. Часть 4
- Рингтоны приносят большие прибыли
- Блог-платформа. Часть 1
- Оптимизация для поисковых машин. Часть 2