Тонкая SEO настройка DLE: robots, sitemap
Среда dle в настоящее время довольно популярна среди разработчиков из-за предоставляемых возможностей. Любая платформа для разработки и оптимизации сайтов требует дополнительной тонкой настройки. Создание файла robots имеет свои особенности, которые необходимо учитывать для продвижения сайта в поисковых системах. Файл имеет четкую структуру, нарушение которой может повлечь за собой неприятные последствия для веб-программиста.
Структура robots txt для dle
Файл можно охарактеризовать набором команд, которые запрещают поисковым роботам индексировать ту или страницу. Каждый robots txt для dle имеет следующую структуру:
- User-agent – для задания поискового робота
- Disallow – для запрета просмотра роботом определенных страниц
- Sitemap – для указания нахождения карты сайта
- Host.
Настройка параметров для robots txt для dle
Необходимо отметить, что роботами часто индексируется страницы, которые не имеют никакого наполнения. Чтобы избежать этого, достаточно использовать следующие запрещающие параметры:
- backup/
- /engine/
- /autobackup.php
- /admin.php
- /language/
- /templates/
- /upgrade/
- /uploads/
В результате запрета этих страниц для индексации ускоряется работа поискового робота. Также не будет лишним запретить /statistics.html и /user/, поскольку они также дополнительно создают нагрузку на поисковую машину.
Страницы для печати
Страницы для печати со временем могут представлять угрозу вашему сайту в плане оптимизации и повышения рейтинга в поисковом запросе. Параметр /*print директивы Disallow позволит решить эту проблему. При этом не стоит забывать о новостных страницах:
- Disallow: /addnews.html
- Disallow: /newposts/
Варианты dle sitemap
Карта сайта при грамотном создании значительно улучшит вероятность продвижения сайта к первым местам в результатах поискового запроса.
Основные требования, которым должен отвечать dle sitemap заключаются в следующем:
- Автоматическое обновление карты сайта через заданное количество времени
- Поддержка всех существующих типов ЧПУ
Различные модули, которые создают файл sitemap, имеют свои уникальные особенности. В среде dle большим спросом пользуется плагин от Google за счет своей универсальности и простоты в установке.
Каждый веб-программист старается внести определенные поправки в классические варианты файла, рекомендуемые различными пособиями и книгами. Написания скрипта карты сайта не занимает много времени, зато значительно ускоряет индексацию сайта.
