Технический чек-лист
| Параметр проверки | Комментарий | Способ решения проблемы(метод проверки) | Способ решения |
| Ответы сервера, last modifide | |||
| Все основные рабочие страницы отдают ответ 200 | Это необходимо для корректной сгрузки страниц сайта роботом и правильного отображения страниц у пользователей | ||
| 404 страница визуально выглядит как сайт | 404 страница должна выглядеть в дизайне сайта и желательно содержать ссылку на главную | Сделать шаблон 404 в стилистике сайта | |
| Битая страница (несуществующая страница) должна отдавать ответ сервера 404 | Бывает, что 404 страница отдает ответ 200 - это неправильно. | bertal.ru - сервис по проверке кода ответа сервера.
настройка правильного кода ответ через .htaccess | |
| Проверка If-Modified-Since | Проверять здесь last-modified.com/ru | Строчка кода. Пример как делается last-modified.com/ru/last-modified-if-modified-since-php.phpl | |
| Страницы сайта, находящиеся в разработке, должны отдавать ответ 503 | Это необязательное правило, НО оно может помочь понять роботу, что страница в разработке и к ее обходу нужно вернуться позже. | Настройка правильного кода ответа через .htaccess | |
| Ответы сервера конкретных страниц можно посмотреть с помощью Netpeak Spider для каждой страницы сайта.
netpeak.ua/software/netpeak-spider - тут можно скачать. Также для конкретно отдельной страницы можно посмотреть в онлайн сервисе bertal.ru | |||
| Дубли страниц сайта | |||
| 1.ru
1.ru/index.php (1.ru/index.phpl) | Зачастую сайт доступен по 2 данным URL. Особенно бывает кнопка в меню на главной ведет именно на index.php или index.phpl | К основному домену вашего сайта дописать по очереди /index.php и /index.phpl | 301 редирект с 1.ru/index.php на 1.ru
Убедиться, что в меню ссылка на главную 1.ru |
| 1.ru
1.ru | Для поиска это 2 разных сайта. | проверить в поиске какой вариант является основным для поиска, посмотреть в поиске www или без www | Обычно просто указывается основное зеркало в robots командой Host.
Либо можно сделать редирект с неосновного на основной вариант |
| 1.ru
1.ru/page2 1.ru/page3 | Бывает, что у пагинации страниц тот же title, дескрипшен что у основной странице (главной или категории) | Зайти на последующие после первой страницы и посмотреть title, description. | Первый способ, дописать в тайтл последующих страниц - title осн.стр + страница N (стр).
2-й способ, можно закрыть от индексации в robots.txt последующие страницы. 3-й способ, Прописать в последующие страницы сайта canonical с ссылкой на основную страницу. НЕЛЬЗЯ ДЕЛАТЬ РЕДИРЕКТ |
| 1.ru/category/b
1.ru/b | Бывает что страница доступна по нескольким вариантам url связанным с категорией и если стереть категорию то страница все равно доступна.
Встречается в DLE движке. Но такая ошибка возможна в любых других сайтах. | Зайти в страницу принадлежащую к категории и в адресной строке стереть директорию категории чтобы из 1.ru/category/b осталось 1.ru/b - если страница работает и так и так, то дублирование есть | Указать в настройках только 1 вариант отображения, который более приемлем к сайту.
В DLE движке это делается в настройках. На прочих сайтах либо чере хтассесс, либо через еще какие-то настройки сайта (движка). |
| 1.ru/category
1.ru/category/?filter | Фильтры, часто именно они дублируют теги страниц. При этом часто и содержание похоже на содержание основной страницы | В яндексе ввести оператор site:1.ru - и посмотреть есть ли в индексе фильтры, если да, то стоит наверное их закрыть | Закрыть фильтры в robots.txt |
| 1.ru
1.ru/asjsadhdsahsadhsadh | Бывает, что при введении любых символов после домена страница отдает ответ сервера 200, то есть страница существует. По сути это тоже дубли, хоть такого варианта и нет в индексе, такие ссылки могут появиться. | После домена ввести любой набор символов. | |
| 1.ru/b
1.ru/b 1.ru/b.phpl 1.ru/b.php | Могут быть подобные дубли URL, их нужно просто проверить и оставить 1 нужный вариант. Главное чтоб страница была доступа по одному URL | Ввести подобные вариации и посмотреть их наличие. Также проверить есть ли в дублируемых вариантах rel=canonical | К не нужным вариантам прописать rel=canonical на основную.
Настроить плагином или через .htaccess 1 вариант отображения страниц. |
| Дубли по тегам | |||
| Если у 2 страниц одинаковый title | Внутри сайта должны быть уникальные теги | Сгрузить все страницы сайта например с помощью Netpeak Spider
1.ru | Сделать теги внутри сайта уникальными в соответствии со страницей.
Если теги дублируются при пагинации, то сделать тайтлы уникальными можно за счет добавления приписки к основному тайтлу - страница 2, страница 3. |
| Если у 2 страниц одинаковый description | |||
| Если у 2 страниц одинаковые keywords (малозначимо) | |||
| Валидность, проверка вирусов, мобильная версия | |||
| Проверка ошибок кода сайта | validator.w3.org | ||
| Проверка сайт на наличие сайта в вирусных базах | virustotal.com | ||
| Рекомендации гугл девелопера | developers.google.com/speed/pagespeed/insights/?hl=ru | ||
| Проверка удобства мобильной версии от Гугла | google.com/webmasters/tools/mobile-friendly | ||
| Проверка удобства мобильной версии от Яндекса | beta.webmaster.yandex.ru | в вебмастере Яндекса раздел инструментов, проверка мобильных страниц | |
| Индексация | |||
| robots.txt | Правильность файла проверьте в вебмастере яндекса или гугла | ||
| Проверьте мета-теги сайта | С основными мета-тегами можно ознакомиться в Яндекс-помощи | yandex.ru/support/webmaster/controlling-robot/html.xml | |
| Проверьте наличие тега noindex и правильность его использования (если используется) | Noindex закрывает от робота информацию, помещенную в этот тег | ||
| Сравните кол-во страниц в индексе гугла и Яндекса | Если разница слишком большая, то проверьте индексацию отдельных категорий в Яндексе и в гугле | Проверить можно с помощью комбинации 2 операторов
site:1.ru in url:/category - вводите это в Яндексе и в гугле, сравнивайте | Если найдена большая разница индексации отдельных разделов, то проверьте:
robots.txt canonical страниц meta-names страниц Если индексация хуже в Яндексе, то проверьте страницы в вебмастере - Проверить URL посмотрите комментарии к проверенным ссылкам Если индексация хуже в Гугле, то зайдите в вебмастера гугла в раздел сканирование сайта - посмотреть как гуглбот и добавьте страницу на переиндексацию. |
| Наличие карты сайта xml варианта | |||
