Проблемы с индексацией могут действительно сбить ваш сайт с толку и привести к падению рейтинга. Ознакомьтесь с этими 11 приемами для улучшения вашей индексации!
В SEO-игре так много движущихся частей, что часто кажется, что как только мы закончим оптимизацию одной части веб-сайта, нам придется вернуться к той части, над которой мы только что работали.
Как только вы выйдете из стадии «я здесь новичок» и почувствуете, что у вас есть реальный опыт SEO за плечами, вы можете начать чувствовать, что есть некоторые вещи, на исправление которых можно потратить меньше времени.
Индексируемость и краулинговые бюджеты могут быть двумя из этих вещей, но забыть о них было бы ошибкой.
Мне всегда нравится говорить, что веб-сайт с проблемами индексации — это сайт по-своему; этот веб-сайт непреднамеренно говорит Google не ранжировать его страницы, потому что они загружаются неправильно или перенаправляют слишком много раз.
Если вы считаете, что не можете или не должны посвящать время явно не такой гламурной задаче исправления индексируемости вашего сайта, подумайте еще раз.
Проблемы с индексируемостью могут привести к резкому падению вашего рейтинга и быстрому прекращению трафика вашего сайта.
Таким образом, ваш краулинговый бюджет должен быть на первом месте.
В этом посте я дам вам 11 советов, которые следует учитывать при улучшении индексируемости вашего веб-сайта.
Содержание
Прыгать на:
- Отслеживайте статус сканирования с помощью Google Search Console
- Создавайте веб-страницы, удобные для мобильных устройств
- Регулярно обновляйте контент
- Отправьте карту сайта в каждую поисковую систему
- Оптимизируйте свою схему перелинковки
- Глубокая ссылка на изолированные веб-страницы
1. Отслеживайте статус сканирования с помощью Google Search Console
Ошибки в статусе сканирования могут указывать на более серьезную проблему на вашем сайте.
Проверка состояния сканирования каждые 30–60 дней важна для выявления потенциальных ошибок, влияющих на общую маркетинговую эффективность вашего сайта.
Это буквально первый шаг SEO; без него все остальные усилия ничтожны.
Прямо на боковой панели вы сможете проверить статус сканирования на вкладке индекса.
Скриншот автора, май 2022 г.
Скриншот автора, май 2022 г.
Теперь, если вы хотите закрыть доступ к определенной веб-странице, вы можете напрямую сообщить об этом в Search Console . Это полезно, если страница временно перенаправлена или имеет ошибку 404.
Параметр 410 навсегда удалит страницу из индекса, поэтому остерегайтесь использования ядерной опции.
Распространенные ошибки сканирования и решения
Если на вашем веб-сайте, к сожалению, возникла ошибка сканирования, это может потребовать простого решения или свидетельствовать о гораздо более серьезной технической проблеме на вашем сайте.
Наиболее распространенные ошибки сканирования, которые я вижу:
- Ошибки DNS.
- Ошибки сервера.
- Ошибки robots.txt .
- 404 ошибки .
Скриншот автора, май 2022 г.
Чтобы диагностировать некоторые из этих ошибок, вы можете использовать инструмент проверки URL, чтобы увидеть, как Google просматривает ваш сайт.
Поднимите свои исследования ключевых слов на новый уровень
Проведите более качественное исследование за меньшее время — найдите ключевые слова, по которым ваш сайт может ранжироваться прямо сейчас, и проверенные на качество предложения. Попробуйте обозреватель ключевых слов бесплатно!
Рекламное объявление
Неспособность правильно получить и отобразить страницу может указывать на более глубокую ошибку DNS, которую должен устранить ваш провайдер DNS.
Скриншот автора, май 2022 г.
Устранение ошибки сервера требует диагностики конкретной ошибки. К наиболее распространенным ошибкам относятся:
- Тайм-аут.
- В соединении отказано.
- Сбой соединения.
- Тайм-аут подключения.
- Нет ответа.
В большинстве случаев ошибка сервера обычно носит временный характер, хотя постоянная проблема может потребовать, чтобы вы напрямую связались с вашим хостинг-провайдером.
Ошибки robots.txt , с другой стороны, могут быть более проблематичными для вашего сайта. Если ваш файл robots.txt возвращает ошибку 200 или 404, это означает, что поисковые системы не могут найти этот файл.
Вы можете отправить карту сайта robots.txt или вообще отказаться от протокола, решив вручную не индексировать страницы , которые могут быть проблематичными для вашего сканирования.
Быстрое устранение этих ошибок гарантирует, что все ваши целевые страницы будут просканированы и проиндексированы в следующий раз, когда поисковые системы просканируют ваш сайт.
2. Создавайте веб-страницы, удобные для мобильных устройств
С появлением индекса, ориентированного на мобильные устройства , мы также должны оптимизировать наши страницы, чтобы отображать копии, удобные для мобильных устройств, в мобильном индексе.
Хорошей новостью является то, что копия для настольных компьютеров по-прежнему будет индексироваться и отображаться в индексе для мобильных устройств, если не существует копии для мобильных устройств. Плохая новость заключается в том, что в результате может пострадать ваш рейтинг.
Существует множество технических настроек, которые могут мгновенно сделать ваш сайт более удобным для мобильных устройств, в том числе:
- Внедрение адаптивного веб-дизайна .
- Вставка метатега точки зрения в контент.
- Минимизация ресурсов на странице (CSS и JS).
- Пометка страниц с помощью кэша AMP.
- Оптимизация и сжатие изображений для ускорения загрузки.
- Уменьшение размера элементов пользовательского интерфейса на странице.
Обязательно протестируйте свой веб-сайт на мобильной платформе и запустите его с помощью Google PageSpeed Insights. Скорость страницы является важным фактором ранжирования и может влиять на скорость, с которой поисковые системы могут сканировать ваш сайт.
3. Регулярно обновляйте контент
Поисковые системы будут сканировать ваш сайт более регулярно, если вы регулярно публикуете новый контент.
Это особенно полезно для издателей, которым необходимо регулярно публиковать и индексировать новые истории.
Регулярное создание контента сигнализирует поисковым системам о том, что ваш сайт постоянно совершенствуется и публикует новый контент, и поэтому его необходимо чаще сканировать, чтобы охватить целевую аудиторию.
4. Отправьте карту сайта в каждую поисковую систему
Одним из лучших советов по индексации на сегодняшний день остается отправка карты сайта в Google Search Console и Bing Webmaster Tools.
Вы можете создать XML-версию с помощью генератора карты сайта или создать ее вручную в Google Search Console, пометив каноническую версию каждой страницы, содержащей повторяющийся контент.
5. Оптимизируйте схему перелинковки
Создание согласованной информационной архитектуры имеет решающее значение для обеспечения того, чтобы ваш веб-сайт был не только правильно проиндексирован, но и правильно организован.
Создание основных категорий услуг, в которых могут находиться связанные веб-страницы, может дополнительно помочь поисковым системам правильно индексировать содержимое веб-страниц в определенных категориях, когда цель может быть неясной.
6. Глубокие ссылки на изолированные веб-страницы
Если веб-страница на вашем сайте или субдомен созданы изолированно или из-за ошибки, не позволяющей их сканировать, вы можете проиндексировать их, получив ссылку на внешнем домене.
Это особенно полезная стратегия для продвижения нового контента на вашем веб-сайте и его более быстрой индексации.
Остерегайтесь синдицированного контента для достижения этой цели, поскольку поисковые системы могут игнорировать синдицированные страницы, и это может привести к повторяющимся ошибкам, если они не будут должным образом канонизированы.
7. Сократите ресурсы на странице и увеличьте время загрузки
Принуждение поисковых систем к сканированию больших и неоптимизированных изображений израсходует ваш краулинговый бюджет и не позволит вашему сайту так часто индексироваться.
Поисковые системы также испытывают трудности при сканировании определенных внутренних элементов вашего веб-сайта. Например, Google исторически изо всех сил пытался сканировать JavaScript .
Даже некоторые ресурсы, такие как Flash и CSS, могут плохо работать на мобильных устройствах и расходовать ваш краулинговый бюджет.
В некотором смысле это беспроигрышный сценарий, когда скорость страницы и краулинговый бюджет приносятся в жертву навязчивым элементам на странице.
Обязательно оптимизируйте свою веб-страницу для повышения скорости , особенно для мобильных устройств, сократив ресурсы на странице, такие как CSS. Вы также можете включить кэширование и сжатие, чтобы пауки быстрее сканировали ваш сайт.
8. Исправьте страницы с тегами Noindex
В ходе разработки вашего веб-сайта может иметь смысл реализовать тег noindex на страницах, которые могут быть дублированы или предназначены только для пользователей, которые выполняют определенное действие.
Тем не менее, вы можете идентифицировать веб-страницы с тегами noindex, которые препятствуют их сканированию, с помощью бесплатного онлайн-инструмента, такого как Screaming Frog.
Плагин Yoast для WordPress позволяет легко переключать страницу с index на noindex. Вы также можете сделать это вручную в бэкенде страниц вашего сайта.
9. Установите пользовательскую скорость сканирования
В старой версии Google Search Console вы можете замедлить или настроить скорость сканирования, если поисковые роботы Google негативно влияют на ваш сайт.
Это также дает вашему веб-сайту время для внесения необходимых изменений, если он претерпевает значительный редизайн или миграцию.
10. Удалите дублированный контент
Наличие большого количества дублированного контента может значительно снизить скорость сканирования и израсходовать ваш краулинговый бюджет.
Вы можете устранить эти проблемы, либо заблокировав эти страницы от индексации, либо разместив тег канонического на странице, которую вы хотите проиндексировать.
В том же духе стоит оптимизировать метатеги каждой отдельной страницы, чтобы поисковые системы не принимали похожие страницы за дублирующийся контент при сканировании.
11. Блокируйте страницы, которые не должны сканировать пауки
Могут быть случаи, когда вы хотите запретить поисковым системам сканировать определенную страницу. Вы можете выполнить это следующими методами:
- Размещение тега noindex .
- Размещение URL в файле robots.txt.
- Удаление страницы вообще.
Это также может помочь вашему сканированию работать более эффективно, вместо того, чтобы заставлять поисковые системы пропускать дублированный контент.
Вывод
Состояние проблем со сканированием вашего веб-сайта будет более или менее зависеть от того, насколько вы следите за своим собственным SEO.
