Как решить трудности с индексацией страничек на всех сайтах | Статьи SEOnews

24 февраля 2023, 18:00

Новости

03/09/2024 Полиграфическое оборудование для офиса

03/09/2024 Где раздобыть робуксы?

29/08/2024 Где раздобыть робуксы?

10-11 ноября 2022 года в Москве свершилась конференция Optimization-2022. В рамках секции, посвященной техническим факторам ранжирования, Захар Федоренко (Rush Agency) поведал, как решить трудности индексации в Google на всех сайтах: от 1 до 10-ов миллионов страничек.

Главные трудности, связанные с индексацией:

1. Странички не попадают в индекс, или этот процесс занимает чрезвычайно много медли. А ежели странички нет в индексе, то она не приносит органический трафик.

2. Большой сайт, но маленький краулинговый бюджет. Предел может не дозволить боту проиндексировать нужные странички.

3. Бот длинно выяснит о конфигурациях на проиндексированной когда-то страничке. По словам Захара, этот процесс можнож убыстрить, чтоб боты в течение 4 дней узнали о конфигурациях и ранжировали сайт лучше.

Какие ниши мучаются больше всего:

онлайн-магазины,
информационные сайты,
сайты услуг,
лендинги. Google скептически относится к сайтам, у каких малюсенько страничек, потому плохо их регистрирует.

3 предпосылки, почему Google не регистрирует ваш сайт

1-ая причина. Нехорошая техно оптимизация сайта.

ненастроенный robots.txt,
ненастроенный Sitemap,
дубли страничек,
не все странички, которые потенциально могут приносить SEO-трафик, отдают код ответа 200,
битые ссылки,
отсутствие внутренней перелинковки
слабая скорость загрузки сайта.

Что дотрагивается скорости загрузки сайта, то тут главно верно поставить техническое задание программеру (ТЗ) .

Как смотрится ошибочное ТЗ на улучшение скорости загрузки сайта: сделать скриншоты из PageSpeed и написать программеру, что необходимо устремляться к 90.

Как смотрится правильное ТЗ:

Подключить API PageSpeed в софт для сканирования Screaming Frog.
Брать несколько главных соперников и собственный сайт, выделить посреди их главные типы страничек (их всего три: основная, страничка категорий и карточки продуктов, 10 страничек полностью довольно) .
Изгнать эти странички по PageSpeed и внести данные в таблицу Excel, вывести среднее значение. К этому показателю и необходимо устремляться.

2-ая причина. Методы поисковых систем

Не постоянно метод поисковых систем работает так, как задумано. Посещает, что сайт вправду превосходный, нужный, но по некий причине метод счел его неполезным.

3-я причина. Низкое качество страниц

Захар советует проводить аудит содержания страничек. Для этого необходимо открыть ТОП поисковой выдачи в Google или Яндексе и детально просмотреть каждую страничку, безусловно все блоки, которые есть у вас и у соперников. Дальше выявить, какие блоки могут реально чрезвычайно сильно влиять на ранжирование. К примеру, какой-либо онлайн-калькулятор.

Что дает индексация сайта

Как диагностировать собственный сайт

Как понять, есть ли у вас трудности и как они суровые. Сделать это можнож различными приборами, Захар привел пример нескольких из их.

1. Безвозмездный инструмент Google Search Console. В настройках в разделе Индекс – Странички можнож поглядеть странички, которые просканированы, но пока не проиндексированы.

Google Search Console обновляется разов в 4 дня. Ежели вы не желаете ожидать, то можнож пользоваться посторонними приборами. Один из их – это Rush Analytics.

2. Rush Analytics – инструмент проверки индексации. Дозволяет просто проверять, загонять нужные странички, глядеть динамику, графики, выгружать их в виде Excel и т.д.

3. Кроме их так же можнож применять другие инструменты, почаще всего: Screaming Frog с доп подключением API, A-Parser, Site Analyzer (это аналог Screaming Frog) или Key Collector.

Когда вы определили, что на сайте есть неувязка с индексацией, и она довольно суровая, Захар дает метод ее решения.

Как решить делему с индексацией

Проверьте, корректно ли Google указывает сайт

Посещает, что Google некорректно видит ваш сайт. Это быть может соединено с внедрением javascript, или неуввязками в robots.txt и т.д. В Google Search Console можнож ввести URL интересующей странички и поглядеть, как Google ее видит.

Проработайте контент на неиндексируемых страницах

Ежели странички не в индексе, то 1-ое, на что стоит направить внимание – это контент. Сделайте аудит содержания, вероятно, вправду он ужаснее, чем у соперников.

Проработайте структуру сайта и его внутреннюю перелинковку

Главно настроить внутреннюю перелинковку, т.к. чем она лучше, тем больше возможность, что страничка попадет в индекс. Карта сайта быть может XML, HTML или TXT.

Проверьте корректность файла robots.txt

Кроме проверки, индексируется ли страничка не закрыты ли какие-либо категории, необходимо поглядеть, не воспрещены ли какие-либо изображения, скрипты и прочее.

Проверьте наличие и корректность sitemap.xml и его доступность в GSC

Sitemap надобно прибавлять в Google Search Console. Посещает, что при прибавлении сайта GSC указывает, что в нем нет урлов. Предпосылки и решения: 1) низкая скорость загрузки странички. В данном варианте необходимо сделать Sitemap статическим, обновлять его не при каждом запросе, а разов в какое-то время, в зависимости от того, как большой сайт, как нередко в него вносятся конфигурации. 2) Также рекомендуется добавить в robots.txt ссылку на Sitemap.

Отправьте адреса подходящих страничек через Google Indexing API

С поддержкою этого прибора, по словам спикера, ему удалось проиндексировать за 10 дней наиболее 2,5 млн страничек.

Читы на индексацию – это Google Indexing API

Ответы на эти вопросцы, также доскональный гайд и скрипты для автоматизации Захар расположил в аннотации. Ее можнож скачать по коду, представленному ниже.