Настройки robots.txt. Часть 3

16/01/2012 в Разное

А теперь, рассмотрим реальную ситуацию. Практически каждая CMS, будь то wordpress или joomla, имеет в своём распоряжении папку с временными файлами. Эта папка обновляется каждый раз, когда вы что-то делаете с сайтом — добавляете запись, удаляете или что-то изменяете. Информация в данной папке ничем не полезна для поисковой системы, поэтому лучше всего запретить для неё индексацию.

Такая мера необходима по тем причинам, что при больших объёмах временных файлах, поисковые системы могут принять получение большого количества ненужной информации за спам. Чтобы этого не было, мы просто запретим индексацию для данного каталога. Предположим, что временная папка называется temp, и находится в папке cms. Таким образом, необходимо создать вот такой файл настроек:
user-agent: *
dissalow: /cms/temp
Вот, мы всего лишь указали путь к папке, и теперь, доступ будет запрещён ТОЛЬКО к папке temp, которая находится внутри папки cms. на остальные папки этот запрет никак не повлияет.
Другие новости о компьютерах и технологиях можно почитать на веб-сайте cominftech.ru. Рекомендую посетить этот познавательный ресурс.

Тэги:

Пожалуйста, оставьте свой комментарий





 

Рекомендуемые к прочтению статьи:

Статистика

Ошибки:

  • 0xc000000f
  • 0xc00000e9
  • 0xc000007b
  • 0xc0150002
  • 0xc0000005
  • Политика конфиденциальности