Что это?
Это адрес сайта в интернете. То, что вы вводите в браузере, чтобы попасть на сайт. Например: fastrank.ru.
Что важно знать?
— Домен должен быть коротким, понятным и легко запоминающимся.
— Лучше, если в нём нет цифр и тире.
— От доменного имени зависит доверие и узнаваемость.
Что это?
Это тот адрес, на который в итоге приходит пользователь. Иногда сайт перенаправляет с http
на https
, с fastrank.ru
на www.fastrank.ru
— финальный URL показывает конечную точку этого перехода.
Что может быть не так?
— Финальный URL не совпадает с основным доменом
— Не работает безопасное соединение (отсутствует https
)
— Цепочка редиректов слишком длинная
Что это?
Это код ответа сервера, который говорит, как сайт отреагировал на запрос.
Основные коды:
200 OK — Всё в порядке, страница открылась
301 / 302 — Редирект (переадресация на другой адрес)
404 Not Found — Страница не найдена
500 Internal Server Error — Внутренняя ошибка на сервере
Почему важно?
Ошибочные статусы могут мешать индексации сайта и раздражать посетителей.
Что это?
Это заголовок страницы, который отображается в браузере и в результатах поиска.
Хороший title:
— Ясно говорит, о чём страница
— Уникален для каждой страницы
— До 60 символов желательно
Ошибки:
— Один и тот же title на всех страницах
— Слишком длинный или бессмысленный
Что это?
Краткое описание страницы для поисковиков. Показывается под заголовком в поисковой выдаче.
Советы:
— До 150–160 символов
— Ясно объясняет, что человек найдёт на странице
— Увеличивает шанс, что пользователь кликнет на сайт
Что это?
Главный заголовок на странице — как тема статьи или главы книги.
Важно:
— H1 должен быть один на странице
— Он должен соответствовать содержанию
— Поисковики ориентируются на него для понимания темы
Проблемы:
— Несколько H1 на странице
— Пустой или технический текст
Что это?
Маленькая иконка сайта, которая отображается на вкладке браузера и в закладках.
Зачем нужен?
— Узнаваемость бренда
— Эстетика и доверие
— Легче найти вкладку среди других
Что это?
Файл, который подсказывает поисковикам, какие страницы можно сканировать, а какие — нет.
Примеры:
Разрешить всё: User-agent: * Allow: /
Запретить всё: User-agent: * Disallow: /
Запретить только админку: Disallow: /admin/
Ошибки:
— Файл отсутствует
— Случайно закрыты важные страницы
Что это?
Карта сайта — список всех страниц, который помогает поисковикам быстрее и точнее индексировать сайт.
Что она содержит?
— URL страниц
— Дату обновления
— Частоту изменений
Зачем нужна?
Без неё поисковики могут дольше находить новые страницы.
Что это?
SSL-сертификат шифрует данные между сайтом и пользователем. Срок действия показывает, когда сертификат истекает.
Важно:
— Протухший сертификат = «Небезопасно» в браузере
— Нужно обновлять вовремя
Как понять, что всё хорошо?
— Есть замочек в адресной строке
— Сайт открывается по https://
Что это?
Автоматическое перенаправление со старой версии сайта (http://
) на защищённую (https://
).
Почему важно?
— Защита данных
— Уверенность у пользователей
— Бонус к SEO
Проблемы:
— Нет редиректа — сайт открывается без защиты
— Двойные редиректы
Что это?
Это путь, по которому браузер идёт до конечного адреса. Например:http://fastrank.ru → www.fastrank.ru → https://www.fastrank.ru
Хорошо, если:
— Не больше 1–2 переходов
— Быстро перенаправляет
— Не вызывает ошибок
Плохо, если:
— Много звеньев
— В процессе возникает ошибка
— Циклический редирект (ходит по кругу)
Если у вас имеется подписка PRO, вы видите следующую информацию:
Что это?
Директива Host
указывает, какой адрес сайта считать основным. Особенно полезна для сайтов с зеркалами (например, site.ru
и www.site.ru
).
Пример:Host: fastrank.ru
— говорит поисковикам, что именно этот домен является главным.
Важно:
Эта директива используется только Яндексом. Google её игнорирует.
Что это?
Это ссылка на карту сайта (файл sitemap.xml), которую можно указать прямо в файле robots.txt. Это помогает поисковикам быстрее находить все страницы на сайте.
Пример:Sitemap: https://site.ru/sitemap.xml
Почему это важно?
Даже если карта сайта уже загружена в панели вебмастера, лучше всё равно указать её здесь — так она найдётся быстрее.
Что это?
Это оценка корректности и полезности файла robots.txt
. Обычно он проверяется на наличие ошибок, лишних блокировок и логики доступа.
Что влияет на рейтинг:
Нет ли запрещённых важных страниц
Указан ли Host
и Sitemap
Корректны ли правила для ботов
100/100 — отлично:
Файл понятный, чистый, с правильными директивами.
Что это?
Это список поисковых систем, для которых указаны правила в файле robots.txt
. Например:
*
— означает всех ботов
Yandex
, Googlebot
, Bingbot
— правила для конкретных поисковых систем
Что значит «Разрешён»?
Это значит, что боту не запрещено сканировать сайт — он может свободно заходить и индексировать страницы.
Примеры:
User-agent: *
Disallow:
— разрешает доступ всем поисковым системам.
Что это?
Это конкретные правила в файле robots.txt: кому что разрешено или запрещено. Они записываются как пары:
User-agent:
— кому (какому боту)
Disallow:
— что нельзя
Allow:
— что можно
Примеры:
User-agent: *
Disallow: /admin/
— запрещает всем ботам заходить в раздел /admin/
.
User-agent: Yandex
Disallow: /private/
Allow: /public/
— конкретно для Яндекса: закрывает /private/
, но разрешает /public/
.
Почему важно?
Неправильно заданные правила могут:
— Закрыть от индексации важные страницы
— Напугать поисковики
— Снизить позиции сайта в поиске