Дієві способи індексувати ваш сайт за допомогою Google

Що таке краулінг та індексування?

Google знаходить нові сторінки за допомогою павука, який повзає по Всесвітній павутині («краулінг» дослівно означає «повзання») і додає сторінки в свою базу даних — Індекс. Цей павук називається пошуковим роботом, а у робота Google є власне ім'я — Гуглбот (Googlebot).

Заплуталися? Давайте дамо визначення основним термінам.

• Краулінг - процес переходу за гіперпосиланнями в Інтернеті з метою знаходження нового контенту.
• Індексування - процес збереження кожної веб-сторінки у великій базі даних.
• Пошуковий робот - програма, яка виконує краулінг.
• Googlebot - пошуковий робот Google.

Коли ви шукаєте щось в пошуковику Google, він видає всі релевантні сторінки зі своєї бази даних-Індексу. Оскільки часто запиту можуть відповідати мільйони сторінок, алгоритм ранжирування Google робить все можливе, щоб відсортувати їх так, щоб першими йшли сторінки, які найкраще відповідають запиту.

Тут важливо розуміти, що індексування і ранжування — це абсолютно різні речі.

Індексування-це Реєстрація на участь в гонці, а ранжування-це розподіл призових місць.

Не можна перемогти в гонці, не зареєструвавшись спершу.

Як дізнатися, чи є ваш сайт в індексі Google

Відкрийте сайт Google і введіть в пошук site:ваш_сайт.com

Це число приблизно показує, скільки сторінок вашого сайту міститься в індексі Google.

Якщо ви хочете дізнатися стан індексування конкретної URL-адреси, використовуйте той же самий оператор site:ваш_сайт.com/адрес_страницы.

Якщо результатів не буде, значить, сторінки немає в індексі.

Варто зауважити, що якщо Ви користуєтеся Google Search Console, то можете скористатися звітом» покриття", щоб отримати більш точні відомості про стан індексування вашого сайту. Просто перейдіть в розділ:

Google Search Console > Індексування > Покриття

Подивіться на кількість дійсних сторінок (з попередженнями та без).

Якщо ці числа в сумі відрізняються від нуля, значить, принаймні, частина сторінок вашого сайту міститься в індексі Google. Якщо ж обидва числа дорівнюють нулю, то у вас серйозна проблема, оскільки жодна сторінка сайту не проіндексована.

У Search Console можна також перевірити, чи проіндексована конкретна сторінка. Для цього вставте її URL-адресу в інструмент перевірки URL. Якщо сторінка проіндексована, то сервіс видасть повідомлення»URL є в індексі Google". Якщо ні-то "URL немає в індексі Google".

Як зробити так, щоб Google індексував ваш сайт

Виявили, що Google не індексує ваш сайт або сторінку? Спробуйте наступне:

1. Відкрийте Google Search Console.
2. Перейдіть до інструмента перевірки URL.
3. Вставте в рядок пошуку URL-адресу, яку ви хочете бачити в індексі Google.
4. Зачекайте, поки Google перевірить адресу.
5. Натисніть кнопку "Запросити індексування".

Це корисно робити, коли Ви публікуєте нову статтю або сторінку. Так ви безпосередньо повідомляєте Google про те, що додали щось нове на свій сайт і що пошуковику слід поглянути на це.

Однак безпосередній запит не допоможе вирішити глибинні проблеми, які перешкоджають Індексування старих сторінок. Якщо це ваш випадок, то пройдіться по наведеному нижче списку, щоб діагностувати і вирішити проблему.

1. Видаліть блокуючі умови з файлу robots.txt
2. Видаліть шалені теги noindex
3. Додайте адресу сторінки до файлу sitemap
4. Видаліть шалені теги canonical
5. Перевірте, чи не є сторінка сиротою
6. Полагодьте внутрішні nofollow-посилання
7. Додайте» сильні " внутрішні посилання
8. Переконайтеся, що сторінка унікальна і має цінність
9. Видаліть неякісні сторінки (щоб оптимізувати " краулінговий бюджет»)
10. Отримайте якісні зворотні посилання

Індексування та ранжування - це різні речі

Наявність Вашого сайту в індексі Google не означає, що він буде потрапляти в видачу і приносити трафік. Це різні речі.

Індексування означає Тільки те, що Google відомо про існування вашого сайту. Це не означає, що ваш сайт буде показаний в топі видачі за відповідними запитами.

Тут-то і вступає в справу SEO-мистецтво оптимізації веб-сторінок для потрапляння в топ видачі за певними запитами.

У загальних рисах пошукова оптимізація (SEO) включає в себе:

• Визначення тем, які шукають ваші клієнти.
• Створення контенту на ці теми.
• Оптимізацію створених сторінок під цільові ключові фрази.
• Нарощування зворотних посилань.
• Постійна підтримка контенту в актуальному стані.

Є тільки дві можливі причини, чому Google не індексує ваш сайт або веб-сторінку:

1. Технічні проблеми, які не дають пошуковому роботу зробити це.
2. Якість контенту-Google вважає ваш сайт або сторінку неякісними і марними для своїх користувачів.

Цілком можливо, що мають місце обидві ці проблеми. Але, з мого досвіду, технічні проблеми зустрічаються набагато частіше. Технічні проблеми також можуть стати причиною автоматичного створення індексованого неякісного Контенту (наприклад, проблеми з фасетной навігацією). Це недобре.

Але прохід по наведеному вище списку в дев'яти випадках з десяти повинен вирішити проблеми індексування.

AVSEO наполягає, що індексування та ранжування - це різні речі. Виконання пошукової оптимізації як і раніше життєво необхідно, якщо ви хочете вивести свої сторінки в топ видачі за відповідними пошуковими запитами і залучити стабільний потік природного трафіку.