Интернет-маркетинг. Интернет-маркетинг и его разновидности. Маргарита Акулич
Чтение книги онлайн.
Читать онлайн книгу Интернет-маркетинг. Интернет-маркетинг и его разновидности - Маргарита Акулич страница 10
2.4 Редактирование файла robots. txt в целях осуществления внутренней оптимизации сайта. Ошибки, совершаемые при оптимизации страниц сайта
Редактирование файла robots. txt в целях осуществления внутренней оптимизации сайта
Robots. txt – это файл в корневой директории сайта, в котором имеется инструкция для поисковиков. Без его редактирования внутренняя оптимизация сайта практически нереальна.
В этом файле можно обеспечить ограничение индексации страниц, которым нежелательно попадать в выдачу поисковиками (к примеру, дубли либо страницы поиска по сайту). Использование файла robots. txt дает возможность указания
основного зеркала сайта, скорости сканирования страниц, пути к карте сайта в формате XML (XML является расширяемым языком разметки, рекомендованным Консорциумом Всемирной паутины (World Wide Web Consortium – WWWC)).
Если нужно провести внутреннюю оптимизацию нового веб-сайта, то вероятнее всего придется прибегнуть к созданию robots. txt с нуля и размещению его в корневой директории. Это делается с помощью открытия блокнота и внесения в него необходимых директив, сохранения файла и закачки его в корневую директорию сайта.
В файле robots. txt должны присутствовать две директивы: User-agent и Disallow. Директива User-agent. Директивой указывается, для какого поисковика предназначены инструкции. Для указания инструкции для всех поисковиков сразу, необходимо прибегнуть к использованию в User-agent «звездочки» – *.
Директива Disallow. Директивой указывается, какая из директорий сайта не подлежит индексированию. К примеру, закрыть файл либо папку от индексации можно, указав атрибуты Disallow: /file.html Disallow: /papka/.
Ошибки, совершаемые при оптимизации страниц сайта
При оптимизации страниц сайта совершаются ошибки. Их характеристики следуют.
Ошибка, касающаяся навигации через скрипты. Чтобы обеспечить ссылку на другую страницу сайта, правильно с позиций оптимизации применять тег <а>. Но некоторые прибегают к использованию других технологий, например Flash или JavaScript. Это не дает перехода, их применять не стоит. Но если не получилось этого избежать, надо осуществить дублирование ссылок с помощью тега <а>.
Ошибка, касающаяся использования множества редиректов. Множество редиректов использовать без особой нужды не надо. Чтобы перенаправлять пользователей на новые страницы со старых, лучше прибегать к использованию 301 редиректа.
Ошибка, состоящая в допущении дублей страниц. Каждой из страниц сайта необходимо быть доступной лишь по одному физическому адресу. Но если это не обеспечено, нужно страницу либо удалить, либо закрыть ее от индексации в robots. txt. В адрес страницы не следует включать