НАВЧАЛЬНИЙ МАТЕРІАЛ
ФІШКИ І СЕКРЕТИ ІНТЕРНЕТ-МАРКЕТИНГУ
БОНУСИ: ЧЕК-ЛИСТИ, БРИФ, ТЗ
База знань, наш досвід і новини
Читай наш блог та підписуйся на сторінку в Facebook та Instagram,
щоб не пропустити новий матеріал

Індексація сайту: 7 способів швидкої перевірки і прискорення

08.11.2019
SEO-просування сайту
Автор: Наталья Лагунова
249
0

Привіт читачам і гостям блогу Textum! Сьогодні подивимося на сайт «очима» пошукових систем і дізнаємося, наскільки добре вони розглянули сторінки порталу. У цьому нам допоможуть сервіси для онлайн-перевірки індексації сайту. Адже кожен SEO-спеціаліст і власник веб-ресурсу бажає знати: скільки сторінок робот-шукач обійшов і додав в свою базу, зробив доступними для пошуку?

Щоб з’ясувати всі ці моменти, пропоную вивчити:

  1. Що таке пошукова індексація сайту?
  2. Як відкрити сайт для індексації?
  3. Як перевірити індексацію сайту в Google і Yandex?
  4. Сервіси для швидкої перевірки індексації сайту.
  5. Чому веб-ресурс не індексується?
  6. Як прискорити індексацію сайту?

У цій статті ми з вами розглянемо основні поняття, плагіни, сервіси, проблеми і прискорення індексування веб-порталу в пошукових системах. Матеріал стане в нагоді, щоб з’ясувати, чи є проблеми з додаванням сторінок сайту в пошук, адже не знаючи цього, неможливо провести ефективну оптимізацію ресурсу. Думаю, ніхто не відмовиться бачити свій портал на лідируючих позиціях в пошуку, а значить потрібно приступати до роботи з ним прямо зараз.

Що таке пошукова індексація сайту?

Звернемося до всезнаючої Вікіпедії:

Тобто у пошукового робота є завдання – обійти ресурс, відкритий для індексації, а потім внести в базу інформацію про нього. Якщо все пройшло успішно, весь портал або окремі його сторінки стають доступними для пошуку. Наприклад, користувач забиває в рядок пошуку Google «агентство копірайтингу» і вуаля перед ним постає список ресурсів, релевантних цьому запиту.

Уявімо ситуацію, що сайт з якоїсь причини закритий від індексації (докладніше про це читайте в наступних розділах статті), що тоді? Навіть, якщо на вашому порталі все в порядку з наявністю експертних текстів, ключових слів, тематичних зображень і відео на сторінках, він може не потрапити в пошукову видачу.

Рекомендуємо вивчити: Як написати експертну статтю? 5 кроків до якісного тексту

На практиці це означає, що вам не вдасться ефективно просувати свій продукт або послугу в інтернеті. Щоб такої неприємності точно не сталося, читаємо далі і дізнаємося, що потрібно робити.

Як відкрити сайт для індексації?

Перше, що потрібно – перевірити, чи відкрита індексація сайту в файлі Robots.txt. Можна просто забути відкрити тут сторінки веб-ресурсу.

Детальніше про цей файл читайте тут: Створити Robots.txt – просто, як 2х2

Подивимося, як йдуть справи з файлом Robots.txt на сайті Textum.

Аналіз файлу в Yandex Webmaster показав, що сайт відкритий для індексації в пошукових системах.

Також необхідно повідомити про новий ресурсі за допомогою функцій Yandex Webmaster і Search Console.

Раніше можна було користуватися Гугл аддурилкою, але в кінці липня 2018 р. Google заявив, що припиняє підтримку публічного методу відправки URL в пошуковий індекс. Тепер сторінку на сканування та індексацію можна відправити тільки після підтвердження права сайту в панелі інструментів Search Console.

Крім того в вебмайстрів Google і Яндекс можна додати файл sitemap (карта сайту), є можливість поставити сторінки на переообхід. Наприклад, в Yandex Webmaster це виглядає так:

Також не забуваємо включити індексацію в системі управління сайтом, наприклад у нас це WordPress (до речі, тут же можна повністю прибрати портал з «очей» пошукових систем). Для цього переходимо в адмінку, вибираємо: параметри → читання → видимість для пошукових систем. Залежно від поставленої мети прибираємо або ставимо тут галочку.

Ви все це вже зробили? Відмінно, можна приступати до «десерту» – аналізу індексації сайту. Це можна зробити як в онлайн-режимі, так і за допомогою встановлених плагінів, докладніше про це далі.

Як перевірити індексацію сайту в Google і Yandex?

За допомогою мега популярних пошукових систем можна не тільки знайти потрібну інформацію в мережі, але і промоніторити свій ресурс.

Спосіб №1. Перевірка за допомогою Google і Yandex Вебмайстер

Думаю, веб-майстри і seo-фахівці не з чуток знайомі з таким корисним інструментом, як Webmaster. Тому почнемо наші дослідження саме з нього.

Перевірка індексації сторінок сайту в Google:

  1. Заходимо в Search Console.
  2. Вибираємо в панелі інструментів «Індекс Google».
  3. Клікаємо на пункт «Статус індексування».

Як приклад візьмемо сайт Textum і подивимося, що ж покаже Google Webmaster у нас.

Як бачимо, синя смужка впевнено повзе вгору, сторінки на нашому ресурсі успішно індексуються. Якщо ж графік буде йти на спадання – тривожний дзвіночок, значить на порталі не все гаразд з індексацією.

Читайте також: Гугл Вебмайстер: налаштування. 20 інструментів Search Console

Як перевірити індексацію сторінок сайту в Яндекс:

  1. Заходимо в Yandex.Webmaster.
  2. Переходимо у вкладку «Індексування».
  3. Вибираємо пункт «Сторінки в пошуку».

Сервіс пропонує сформувати графік за певний період. Можна подивитися кількість доданих або видалених сторінок.

Детальніше про сервіс читайте тут: Яндекс.Вебмайстер: огляд 30 розділів і аналіз 30 функцій

Спосіб №2. Вдаємося до допомоги оператора пошукових систем

Щоб запитати не в ясена, а Гугла або Яндекс про індексацію сайту нам знадобиться оператор «site». Він видасть дані про кількість проіндексованих сторінок.

Нюанс: інформація приблизна, у різних пошукових систем може істотно відрізнятися один від одного.

Для перевірки потрібно ввести в рядку пошуку Yandex або Google: site: адресу ресурсу. В якості піддослідного порталу використовуємо Textum.

Ось що показав Гугл:

І що видав Яндекс:

За версією Yandex у нас цілих 91 сторінка бере участі в пошуку, Google більш скромно повідомив про 69 сторінок. Різниця не досить істотна. Це говорить про те, що Yandex проіндексував і малоінформативні сторінки, які ми закривали від індексації пошуковими системами у файлі robots.txt.

Ще один варіант – пошуковий оператор «info». На відміну від site, він показує чи проіндексована одна конкретна сторінка.

Як бачимо, сторінка відбилася в результатах пошуку (також тут вказана швидкість її завантаження), значить, вона успішно проіндексована пошуковими системами.

Спосіб №3. Використовуємо спеціальні сайти

Для спрощення роботи є одна фішка. Щоб не заходити спочатку в одну пошукову систему, потім в іншу, можна це зробити в пару кліків: заходимо на сайт seogadget.ru→ вставляємо адресу сторінки → натискаємо «Перевірити». Все, дивимося результат.

Ще один простий і швидкий спосіб перевірки індексації сайту – зайти на xseo.in. Алгоритм дії аналогічний попередньому.

Вставляємо в спеціальне поле адресу сайту, окремої сторінки, натискаємо на «Перевірити».

Після цих не хитрих маніпуляцій сервіс в лічені секунди видає результат.

Різниця між цими двома способами: на seogadget.ru можна здійснити масову перевірку індексації сайтів, xseo.in – по одному.

Спосіб №4. Встановлюємо плагіни

Від ручного способу переходимо до автоматизованого методу.

Швидко перевірити індексацію сайту (сторінок, картинок) нам допоможе плагін RDS bar:

  • установлюємо розширення в своєму браузері;
  • відкриваємо потрібний сайт і вибираємо сторінку;
  • клікаємо на розширення у верхній частині екрану;
  • знайомимось з результатами.

Ось як приблизно це буде виглядати.

Плагін RDS bar надасть інформацію про кількість проіндексованих сторінок; дату останнього оновлення порталу «очима» робота; отримання значення ИКС; визначення Google Pagerank, кількість вагомих вхідних посилань на сайт і ще багато іншої корисної інформації.

Сервіси для швидкої перевірки індексації сайту

Більшість подібних інструментів з розширеним функціоналом знаходяться в платному доступі. Але є і приємні бонуси – кілька днів пробних і безкоштовних. Можна протестувати сервіси і зрозуміти, чи потрібні вони вам для подальшої роботи.

Спосіб №5. Сервіс Серпхант

Серпхант – це багатофункціональний сервіс, призначений для аналізу сайту і оцінки ефективності проведених робіт по оптимізації сайту. Він пропонує ряд безкоштовних інструментів, один з яких – це перевірка індексації сторінок https://serphunt.ru/indexing/ в Яндексі і Google.

З переваг цього інструменту відзначимо наступне:

  • безкоштовне використання;
  • в день можна перевірити до 50 сторінок;
  • достовірність отриманих результатів;
  • висока швидкість перевірки;
  • інструмент простий у використанні.

Перевірка індексації сторінок проводиться в такій послідовності:

  1. вводимо список сторінок в спеціально відведене поле;
  2. натискаємо на кнопку «Перевірити»

Серпхант индексация сайта

Скориставшись цим інструментом, ви легко і швидко отримаєте необхідну інформацію.

Спосіб №6. Netpeak Spider и Netpeak Checker

Для прикладу пропоную розглянути зв’язку Netpeak Spider і Netpeak Checker. Після реєстрації тут аккаунта користувачеві нададуть 14 днів безкоштовного користування, також буде потрібно завантажити програму на комп’ютер. Подивимося, що нам покаже по Textum Netpeak Spider. Багатообіцяючий напис у верхній частині екрану повідомляє, що сервіс пропонує провести комплексний seo-аудит всього сайту.

Після всіх маніпуляцій з установками, перед нами відкриється віконце, куди потрібно ввести URL перевірочної сторінки.

Потім натискаємо на старт і отримуємо відповідь від програми.

Які дані можна взяти з Netpeak Spider:

  • кількість URL з важливими помилками;
  • індексовані сторінки;
  • критичність помилок (середня, низька);
  • час відповіді сервера;
  • тип контенту (наприклад, зображення, HTML) і ін.

Далі приступаємо до тестування Netpeak Checker. Після установки бачимо таке віконце.

Перетягуємо в зелене поле адресу потрібної нам сторінки, знову натискаємо на старт і через 1-2 секунди отримуємо результат. До речі, дані можна експортувати в Excel.

Netpeak Checker розповість користувачеві про сторінки на сайті таку інформацію:

  • код відповіді сервера;
  • час відповіді сервера;
  • швидкість завантаження сторінки;
  • опис title і description;
  • кількість проіндексованих URL;
  • скільки разів користувачі поділилися сторінкою в Facebook і Twitter.

Корисна стаття про роботу в соц мережах: Способи реклами фан-сторінки в Facebook. Як розкрутити свій бізнес паблік?

Кожен показник при наведенні на нього мишкою розповідає, для чого він потрібен, труднощів з розумінням звіту не повинно виникнути. Також в програмах є налаштування для перевірки індексації та інших показників сайту.

Для первинної перевірки та виявлення основних помилок на сайті 14 безкоштовних днів користування цілком достатньо. Далі думайте самі, вирішуйте самі, купувати чи ні.

Спосіб №7. Програма YCCY

Також можна скористатися можливостями простенької, головне, безкоштовної програми YCCY. Мінус тільки один – її потрібно завантажити та встановити на ПК або ноут. Але робиться це дуже швидко, скачати прогу можна з офіційного сайту YCCY.

Після розпакування і установки файлів ви побачите таке віконечко, в якому потрібно клікнути на вкладку Indexator.

У список вихідних URL вносимо 1 або кілька сторінок, вибираємо пошукову систему і тиснемо «Почати перевірку».

Тут все просто, якщо сторінка є або її немає в пошуку, то вона з’явиться у відповідному розділі після перевірки.

Чому веб-ресурс не індексується?

Онлайн-перевірка сайту виявила проблеми на окремих сторінках або портал взагалі закритий від індексації?

Пропоную ознайомитися з поширеними причинами цього:

  1. Помилки або відсутність sitemap. Карта сайту допоможе правильній індексації ресурсу, тому що направить робота по всім потрібним сторінкам. Sitemap додається в Веб-майстер Google і Yandex.
  2. Сайт з нуля. Тільки створений ресурс індексується не за годину або день. Процес може затягнутися від 10 днів до місяця. Зазвичай в Google індексування відбувається швидше, ніж в Yandex.
  3. Помилки на сайті. Про всі проблеми регулярно сповіщає Веб-майстер Google або Yandex. Вчасно усувайте всі проблеми, які виявив робот-шукач під час обходу.
  4. Контент. Проаналізуйте якість його наповнення, якщо на сторінках взагалі немає текстової та візуальної інформації – додайте. Можна написати 2-3 тематичні статті, розмістити на вже проіндексованих сторінках ресурсу і зробити з них посилання на потрібну сторінку, якої ще немає в пошуку.
  5. Помилки в Robots.txt. У Robots.txt можна зробити заборону індексації всього сайту випадково, внісши зайвий символ в код. Якщо ви помітили в цьому файлі подібну конструкцію, то потрібно терміново вживати заходів щодо усунення помилок в файлі.

Також до проблем з індексацією може привести не унікальний контент, дублі сторінок, проблеми з доступністю сторінок або швидкістю завантаження.

Корисно вивчити: Чек-лист для перевірки тексту на «профпридатність»: унікальність, SEO, ілюстрації

Як прискорити індексацію сайту?

Якщо ви вже повідомили Google і Yandex про новий портал або сторінки на ньому, не зайвим буде простимулювати процес індексації наступним чином:

  1. Зовнішні посилання. Проставте посилання з інших порталів на ваш ресурс. Важливо, щоб це були проіндексовані, авторитетні сайти з релевантним контентом.
  2. Sitemap. Обов’язково повинна бути в наявності актуальна карта сайту, щоб робот міг, не блукаючи відвідати всі важливі сторінки.
  3. Вага сторінки. Намагайтеся максимально «полегшити» свій портал, не варто навантажувати пошукового робота зайвою роботою і змушувати його сканувати непотрібні коди або скрипти. Чим менша вага сторінки, тим швидше пошукова система просканує її зміст і просунеться далі по сайту.
  4. Переобхід сторінок. Ми регулярно користуємося цим інструментом в Яндекс Вебмайстрі, розміщуючи наші статті на сайті Textum. Сюди вводимо адресу сторінки, яку потрібно проіндексувати в пріоритетному порядку.
  5. Подивитися як Googlebot. Така можливість є в панелі інструментів Search Console. У формі потрібно ввести адресу карти сайту. Доданий файл відобразиться в списку під формою, натискаємо «відправити в індекс». Після цього робот пройдеться по всіх посиланнях з sitemap, прийнявши за вихідну сторінку карту ресурсу.
  6. Соціальні мережі. У вашій компанії є сторінка в соц мережах? Чудово, поставте прямі посилання на веб-ресурс в Facebook або Twitter.

Вище на скрині показано, як в агентстві Textum робляться анонси до статей в нашому блозі на сторінці в Facebook. До тексту обов’язково додаємо посилання на статтю.

Детальніше про це читайте тут: Створюємо пост в Facebook: 5 безпрограшних трюків

Підводимо підсумки

Коротенько нагадаю, що ми сьогодні вивчали:

  • Індексація сайту потрібна, щоб портал з’явився в результатах видачі пошукових систем. Якщо ресурсу немає в індексі – значить Google, Yandex та інші про нього не знають, і не будуть показувати web-ресурс користувачам за запитами.
  • Створити інструкції для правильної індексації можна за допомогою Robot.txt. Тут же можна закрити сайт або окремі сторінки від пошукової індексації.
  • Перевірку індексації можна робити вручну, скориставшись пошуковими операторами, або ж автоматично – за допомогою плагінів, програм, наприклад, Netpeak Checker або YCCY.
  • Не забуваємо про важливість і потрібність sitemap, а також унікального, тематичного контенту на вашому порталі.

Сподіваюся, ви з користю провели час за читанням цієї статті. Поділіться з нами в коментарях, коли ви останній раз перевіряли індексацію свого сайту? Виявили якісь проблеми? Чи допомогло усунення помилок індексації в оптимізації ресурсу? Нам цікава ваша думка. Чекаємо коментарі ☺

Автор: Наталья Лагунова

Открыть
чат Задать вопрос