Анализ robots.txt и sitemap.xml

Проверьте доступность, корректность и структуру основных файлов для SEO.