#technical_seo — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #technical_seo, aggregated by home.social.
-
Sitemap-first аудит большого сайта: как найти пустые посадочные без полного краулинга
Есть привычная ошибка в техническом аудите больших сайтов: открыть краулер, поставить лимит побольше и просканировать всё. На сайте в пару тысяч страниц это работает. На сайте с семизначным инвентарём URL — нет. Полный краул упирается в память, диск, сетевые таймауты, rate limit, JavaScript-рендеринг, дубли, параметры, бесконечные фасеты и в то, что через двое суток вы получаете таблицу на миллионы строк, которую всё равно придётся сегментировать с нуля. Поэтому я начинаю не с краулера. Я начинаю с sitemap. В статье показываю sitemap-first подход: как скачать sitemap graph, превратить URL в датасет, разобрать слаги на смысловые группы, сматчить паттерны со спросом, найти пустые посадочные, проверить рендеринг и потом подтвердить гипотезы через GSC, Яндекс.Вебмастер, Метрику и серверные логи.
https://habr.com/ru/articles/1049136/
#SEO #technical_SEO #sitemap #crawl_budget #JavaScript_SEO #рендеринг #Google_Search_Console #ЯндексВебмастер #логи_сервера #индексация