Якщо ви послідовно читаєте мій мануал, то в минулій статті довідалися, як можна прискорити індексацію сайту .

Тепер нам треба цей процес контролювати. Тобто. стежити за сторінками, які потрапляють до індексу, а які ні. Здійснити перевірку індексації сайтуне складно. Для цього є два рішення: ручний метод та спеціальний seo-софт.

Насамперед можна скористатися системою автоматичного просування SeoPult. Система звичайно платна, але багато інформації по своєму сайту можна подивитися безкоштовно! Зокрема, які сторінки проіндексовані, подивитися релевантні запити, поради щодо оптимізації сторінок та багато іншої та корисної інформації. Раджу частіше туди заглядати.

Також можна скористатися безкоштовною програмою Site-Auditor від Ашманова. Як я сказав, вона безкоштовна, періодично оновлюється і цілком справляється із цим завданням. Щоб перевірити індексацію сайту через програму Site-Auditor, завантажуємо її з офіційного сайту. Запускаємо софт і в меню експрес аналіз вбиваємо наш урл, тиснемо перевірити.

Прога видає нам кількість сторінок в індексі Яндекс та Google. Натиснувши на ці цифри, ми потрапимо у видачу ПС, де і будуть наші проіндексовані сторінки. Таку ж перевірку можна зробити, якщо у вас є програма Yazzle, якою ми оцінювали конкурентів.

Але трапляються випадки, коли подібний аналіз не зовсім зручний чи неможливо зробити. Наприклад, ПС оновили щось і софт перестав працювати (поки його не оновлять), а вам треба терміново перевірити. Або що частіше, треба перевірити індексацію конкретної сторінки, а в загальному списку шукати не завжди зручно. Тут і допоможе другий (ручний) метод.

Перевірка індексації сайту в Яндексі

Перевірити індексацію свого сайту в Яндексі можна на панелі вебмайстра webmaster.yandex.ru/. Але для цього сайт доведеться додати до цієї панелі і підтвердити права на сайт. Без реєстрації, на жаль, він не покаже всі дані щодо індексації. Ось розділ з даними індексації в панелі вебмайстра.

Там ви зможете подивитися індексацію сторінок за останній тиждень, за 2 тижні та за весь час.

Індексацію окремої сторінки в Яндексі найпростіше в самому пошуку. Тупо вбиваємо сторінку в рядок пошуку та тиснемо знайти. Якщо вона в індексі, Яндекс покаже її сніппет. Якщо її немає, то відповідно не покаже.

Там же, якщо натиснути зелену стрілку поруч із url станиці, ми зможемо подивитися збережену копію документа. Це та версія сторінки, яка зберігається зараз у кеші Яндекса. У кеші міститься дуже важлива інформація - дата, коли робот востаннє відвідував ваш сайт. Завжди можна глянути в кеші, врахував Яндекс або Google ваші останні зміни на сторінці чи ні.

Перевірка індексації сайту в Google

Щоб перевірити, як ваш сайт проіндексував Google, достатньо в пошуковому рядку ввести спеціальну команду

site:ім'я_сайту.домен

Google покаже, скільки сторінок в індексі. А по зеленій стрілочці (як і в Яндексі) можна переглянути збережену копію сторінки (вміст кеша). Де ви побачите поточну версію сторінки в Google. Окрему сторінку також можна глянути просто вбивши її в пошуковий рядок.

Перевірка індексації сайту у Rambler

Індексацію в Рамблері на даний момент можна перевірити лише одним шляхом – вбити урл у рядок пошуку. Там же можна побачити, що знаходиться в кеші. Для цього треба натиснути копію.

Логічні міркування на тему: "Як перевірити, скільки сторінок в індексі пошукових систем".

І числові розрахунки, які показують, як я зводила баланс, вивчаючи, що проіндексовано, а що ні чому.

Я вирішила розібратися з цим уважніше і розкласти все по поличках.

Розглянемо на прикладі Яндекса та Google.

Проблема індексування або що таке індекси.

Проблема індексування постійно хвилює власника будь-якого сайту. Коли сторінки сайту потрапляють до індексів пошукових систем, це забезпечує стабільний і, що найголовніше, безкоштовний трафік. Сторінки беруть участь у пошуковій видачі, а відвідувачі самі шукають інформацію та потрапляють на Ваш сайт. Це ж прекрасно!

Ну, ось нарешті сайт починає стабільно індексуватися.

Тепер власників хвилює вже те, щоб кожна нова стаття потрапляла в пошук якнайшвидше, і вони мріють, щоб сайт відвідував так званий «швидкоробот».

Для цього радять додавати інформацію на свій сайт регулярно та розміщувати посилання на нові статті у соціальних мережах, особливо і .

Це можна легко зробити за допомогою .

Але життя йде, алгоритми змінюються. Якщо сайт раніше відвідував швидкоробот, і стаття потрапляла в пошук Яндекса протягом декількох годин, то останнім часом (листопад 2014) багато вебмайстрів скаржаться, що на це йде кілька днів.

Я теж помітила, що після того, як я почала додавати інформацію на сторінку в сервісі вебмайстрів Яндекса перед публікацією (що мені настійно порадили робити фахівці цього пошуковика), нова стаття потрапляє в пошук тільки при черговій пошуковій видачі Яндекса. Якраз кілька днів і минає.

Виходить щось на кшталт того: ваш текст уже у нас у кишені, ви й так від нас нікуди не подінетесь, і поспішати нам не обов'язково.

А як можна в такому разі визначити, що стаття вже проіндексована?

Я роблю це за допомогою розширення браузера Google Chrome.

Таке саме розширення встановлено у мене і на браузері Opera. Воно дозволяє для будь-якої відкритої сторінки визначити, чи вона проіндексована чи ні.

Як самостійно додати сторінку до індексу Google.

Google у цьому питанні більш оперативний. Він дозволяє кожному примусово додавати нову сторінку до індексу. Це можна зробити . Там потрібно спочатку вибрати вкладку «Подивитися як Googlebot», де потім з'являється можливість самостійно додати сторінку в індекс, якщо вказати її Url.

Як то кажуть: і вам добре, і нам непогано.

У такий спосіб можна додавати до 500 сторінок на місяць.

А як справи з кількісними показниками індексації для сайту?

Скільки сторінок в індексі пошукових систем?

Це найпростіше подивитися у сервісах для вебмайстрів пошукових систем.

Допустимо, у мене на сайті 106 статей та 10 сторінок (це видно в адміністративній панелі сайту) плюс Головна сторінка, або стрічка новин. Далі легко підрахувати (106+10+1=117). Отже, всього буде 117 Url на sitemap.

До речі там же можна переглянути показники додаткового та основного індексу Google для його сайту. У нього вони виявилися значно ближчими один до одного.

На жаль, на моєму Вордпрес блозі соплів достатньо.

Ех, треба вчитися створювати сайти більш професійному рівні. А не використовувати готові шаблони.

Виходить, що сайти потрібно будувати так, щоб дубльованого контенту на них не було і всі посилання на сторінки, що є там, відразу йшли в справу, тобто. основний індекс.

Може, і WordPress колись так доросте.

А поки що виходить, що, якщо використовувати короткі посилання на сторінки, це не сприяє SEO (оптимізації). А якщо застосовувати ЧПУ посилання, то виходить дубльований контент.

З нетерпінням чекаю на ваші коментарі.

Які думки щодо цього Вас відвідали?

(12)

Якщо ви хочете дізнатися, чи є певна сторінка в індексі пошукової системи і скільки в цілому сторінок вашого сайту беруть участь у пошуку, вам варто дізнатися про чотири найпростіші способи перевірки індексації сайту, якими користуються всі SEO-фахівці.

У процесі індексування порталу пошуковий бот спочатку сканує його, тобто обходить для вивчення контенту, а потім додає інформацію про веб-ресурс до бази даних. Потім пошукова система формує пошук на цих базах. Не плутайте сканування з індексацією – це різні речі.

Щоб розуміти, скільки сторінок вашого проекту не проіндексовано, потрібно знати їхню загальну кількість. Це дозволить зрозуміти, як швидко індексується ваш сайт. Зробити це можна кількома способами:

1. Подивитись карту сайту.Її ви знайдете за адресою: назва_вашого_сайта.ru/sitemap.xml. Тут показуються переважно показуються всі сторінки, розміщені на ресурсі. Але іноді карта сайту може генеруватися неправильно, і частина сторінок у ній може бути.
2. Скористайтеся спеціальною програмою.Ці програми сканують весь ваш сайт і видають всі сторінки вашого сайту, приклад таких програм Screaming Frog Seo (платна) або Xenus Links Sleuth (безкоштовна).

Способи перевірки індексації сайту

Пропонуємо до вашої уваги 4 найпоширеніші та найпростіші способи, що дозволяють перевірити, які сторінки є в індексі, а які – ні.

1. Через панель вебмайстра

Цим методом власники веб-ресурсів перевіряють їх наявність у пошуку найчастіше.

Яндекс

1. Авторизуйтесь в Яндекс.Вебмайстер.
2. Перейдіть до меню «Індексування сайту».
3. Під ним знайдіть рядок «Сторінки у пошуку».

Можна піти і іншим шляхом:

1. Оберіть «Індексування сайту».
2. Далі перейдіть до "Історія".
3. Потім натисніть на вкладку «Сторінки у пошуку».

І першим, і другим способом ви зможете вивчити динаміку зростання чи спаду числа сторінок у пошуковій системі.

Google

1. Зайдіть у панель управління сервісу Google Webmaster Tools.
2. Клацніть на вкладку Search Console.
3. Перейдіть до «ІндексGoogle».
4. Натисніть на опцію «Статус індексування».

2. Через операторів пошукових систем

Вони допомагають уточнити результати пошуку. Так, застосування оператора "site" дозволяє побачити приблизну кількість сторінок, які вже знаходяться в індексі. Щоб перевірити цей параметр, у рядку пошуку Яндекс або Google вкажіть: «site:адреса_вашого_сайту».

Важливо!Якщо результати в Google і Яндекс сильно відрізняються між собою, то значить ваш сайт має якісь проблеми зі структурою сайту, сміттєвими сторінками, індексацією або на нього накладені санкції.

Для пошуку ви можете також використовувати додаткові інструменти, наприклад, щоб дізнатися, як змінювалася індексація сторінок за певний період часу. Для цього під пошуковим рядком натисніть на вкладку "Інструменти пошуку"і виберіть період, наприклад, «За 24 години».

3. За допомогою плагінів та розширень

Використовуючи спеціальні програми, перевірка індексації веб-ресурсу відбудеться автоматично. Це можна зробити за допомогою плагінів та розширень, ще відомих як букмарклети. Вони є javascript-програмами, які зберігаються в браузері у вигляді стандартних закладок.

Перевага плагінів та розширень у тому, що вебмайстру немає необхідності щоразу по новій заходити в пошукову систему та вводити там адреси сайтів, оператори та інше. Скрипти зроблять все в автоматичному режимі.

Найпопулярнішим плагіном, що застосовується з цією метою, є RDS bar, який можна завантажити в магазині додатків будь-якого браузера.

Варто відзначити, що в Mozilla Firefox у плагіна значно більше можливостей, ніж в інших браузерах. RDS bar надає інформацію щодо і всього веб-сайту, та його окремих сторінок

На замітку.Є платні та безкоштовні плагіни. І найбільший мінус безкоштовних плагінів у тому, що в них потрібно регулярно вводити капчу.

Не можна залишити без уваги і букмарклет «Перевірка індексації». Щоб увімкнути програму, просто перетягніть посилання на панель браузера, а потім запустіть свій портал і натисніть закладку розширення. Так ви відкриєте нову вкладку з Яндекс або Google, де вивчіть потрібну інформацію щодо індексації певних сторінок.

4. За допомогою спеціальних сервісів

Я переважно користуюся сторонніми сервісами, тому що в них наочно видно які сторінки в індексі, а які там відсутні.

Безкоштовний сервіс

https://serphunt.ru/indexing/ - є перевірка як по Яндекс, так і по Google. Безкоштовно можна перевірити до 50 сторінок за добу.

Платний сервіс

З платних мені найбільше подобається Topvisor - вартість 0.024р. за перевірку однієї сторінки.

Ви завантажуєте в сервіс усі сторінки вашого сайту і він вам покаже, які в індексі пошукових систем, а які ні.

Висновок

Головна мета власника будь-якого веб-ресурсу – домогтися індексації всіх сторінок, які будуть доступні пошуковим роботам для сканування та копіювання інформації до бази даних. Реалізувати це завдання на великому сайті може бути непросто.

Але при правильному комплексному підході, тобто грамотної SEO-оптимізації, регулярному наповненні сайту якісним контентом і постійному моніторингу процесу включення сторінок в індекс пошукових систем, можна досягти позитивних результатів. Для цього ми в цій статті розповіли про чотири методи перевірки індексації сайту.

Індексація сайту в пошукових системах є важливою для кожного вебмайстра. Адже для якісного просування проекту слід слідкувати за його індексацією. Я опишу процес перевірки індексації у Яндексі.

Індексація в Яндекс

Робот Яндекса день за днем ​​переглядає сайти в пошуках чогось «смачного». Збирає в топ видачі ті сайти і сторінки, які, на його думку, найбільше цього заслуговують. Ну чи просто Яндекс так захотів, хто його знає 🙂

Ми, як справжні вебмайстри, будемо дотримуватися теорії, що чим якісніше зроблено сайт, то вище його позиції і більше трафік.

Перевірити індексацію сайту в Яндексі можна декількома способами:

• за допомогою Яндекс Вебмайстра;
• із використанням операторів пошукової системи;
• за допомогою розширень та плагінів;
• за допомогою онлайн-сервісів.

Індексація сторінок сайту в Яндекс Вебмайстер

Щоб зрозуміти, що ж там пошуковик накопав на наш сайт, потрібно зайти до нашого улюбленого Яндекс Вебмайстер в розділ «Індексування».

Статистика обходу в Яндекс Вебмайстер

Для початку зайдемо до пункту «Статистика обходу». Розділ дозволяє дізнатися, які сторінки вашого сайту оминає робот. Ви можете виявити адреси, які робот не зміг завантажити через відсутність сервера, на якому знаходиться сайт, або через помилки у вмісті самих сторінок.

Розділ містить інформацію про сторінки:

• нові - сторінки, які недавно з'явилися на сайті або робот їх щойно обійшов;
• що змінилися — сторінки, яку пошуковик Яндекса раніше бачив, але вони змінилися;
• історія обходу - кількість сторінок, які обійшов Яндекс з урахуванням коду відповіді сервера (200, 301, 404 та інші).

На графіку відображені нові (зелений колір) і сторінки, що змінилися (синій колір).

А це графік історії обходу.

У цьому пункті відображено сторінки, які Яндекс знайшов.

N/a - URL не відомий роботу, тобто. Робот її раніше не зустрічав.

Які висновки з скрин можна зробити:

1. Яндекс не знайшов адресу /xenforo/xenforostyles/, що власне логічно, т.к. цієї сторінки немає.
2. Яндекс знайшов адресу /bystrye-ssylki-v-yandex-webmaster/, що також цілком логічно, т.к. сторінка нова.

Отже, в моєму випадку в Яндекс Вебмайстрі відображено те, що я і очікував побачити: що не треба - Яндекс видалив, а що треба - Яндекс додав. Значить, з обходом все у мене добре, блокувань ніяких немає.

Сторінки у пошуку

Пошукова видача постійно змінюється - додаються нові сайти, видаляються старі, коригуються місця у видачі тощо.

Інформацію у розділі «Сторінки у пошуку» ви можете використати:

• для відстеження змін кількості сторінок в Яндексі;
• для стеження за доданими та виключеними сторінками;
• для з'ясування причин виключення сайту із пошукової видачі;
• для отримання інформації про дату відвідування сайту пошуковою системою;
• для отримання інформації щодо зміни пошукової видачі.

Щоб перевірити індексацію сторінок та потрібен цей розділ. Тут Яндекс Вебмайстер показує сторінки, додані у пошукову видачу. Якщо всі ваші сторінки додані до розділу (новий додадуться протягом тижня), значить зі сторінками все гаразд.

Перевірка кількості сторінок в індексі Яндекса за допомогою операторів

Крім Яндекс Вебмайстра, перевірити індексацію сторінки можна за допомогою операторів безпосередньо в самому пошуку.

Будемо використовувати два оператори:

• «site» — пошук по всіх піддоменах та сторінках вказаного сайту;
• «host» — пошук сторінок, розміщених на даному хості.

Скористайтеся оператором «site». Зауважте, між оператором та сайтом немає пробілу. 18 сторінок знаходиться у пошуку Яндекса.

Скористайтеся оператором «host». 19 сторінок проіндексовано Яндексом.

Перевірка індексації за допомогою плагінів та розширень

Перевірити індексацію сайту за допомогою сервісів

Таких послуг дуже багато. Я вам покажу два.

Serphunt

Serphunt – онлайн-сервіс для аналізу сайту. Вони мають корисний інструмент для перевірки індексації сторінок.

Одночасно можна перевірити до 100 сторінок сайту за двома пошуковими системами - Яндекс і Google.

Натискаємо «Почати перевірку» і за кілька секунд отримуємо результат:

Windows 7