И так речь пойдет про внутреннюю оптимизацию сайтов на движке DLE ( он же DataLife Engine ).
Robots.txt нужен нам для того, чтобы ограничить от Яндексе все ненужные страницы, которые не несут смысловой нагрузки и не принесут нам посетителей. Стандартный robots.txt имеет примерно такой вид:
User-agent: *
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /index.php?do=register
Disallow: /index.php?do=lastcomments
Disallow: /index.php?do=stats
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Sitemap: http://your.site/sitemap.xml
User-agent: Yandex
Host: your.site
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /index.php?do=register
Disallow: /index.php?do=lastcomments
Disallow: /index.php?do=stats
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Sitemap: http://your.site/sitemap.xml
User-agent: Yandex
Host: your.site
Также стоит закрыть все ненужные ПСам странички, типа добавления новости, статистики, правил сайта и т.д. Можно также закрыть страницы новостей /page/ .
При таком подходе будет меньше страниц с похожим контентом, меньше шансов словить АГС или какую-то другую заразу. Мне кажется, Чем больше отношение “страниц для людей” к страницам без смысла, тем больше траст сайта.
Второй момент – noindex. Им нужно закрыть все статические блоки, т.к. вес все равно по ним не переходит, но они создают ненужный одинаковый контент на каждой странице. Это не принципиально, но все же лучше закрывать. Так же стоит закрыть повторяющийся текста типа кто, куда и во сколько запостил новость, можно скрыть футер. Спорный вопрос – скрывать ли комментарии в noindex. Тут каждый выбирает сам, но ссылки из комментариев однозначно нужно фильтровать.
Оптимизируем заголовки ( title ) сайта.
Заголовок морды, а так же часть автоматически сгенерированных тайтлов – это название сайта. Меняется в Общих настройках.

На главной стоит выбирать несколько ВЧ или СЧ запросов.
Далее оптимизируем заголовки конкретных страниц.
Зайдем в редактирование категории новостей.

Оптимизация категорий
В поле Альтернативное имя нужно на латинице вписать короткое слово ( фразу ), характеризующие категорию. Это идет в URL страницы. Title нужно комбинировать, например, “Скачать фильмы бесплатно и без регистрации” и в глазах Яндекса, и в глазах посетителей смотрится намного лучше, чем “Скачать фильмы | Фильмы бесплатно | Фильмы без регистрации” и т.д.
Аналогично поступаем и с страницами новостей.



