Як відбувається індексація сайту в Яндекс і Google - Блог Zegeberg

Від індексації залежить кількість сторінок у пошуку та трафік, тому будь-який оптимізатор прагне прискорити цей процес. Бажають якнайшвидше загнати в індекс сторінки новинного сайту, адже новини за тиждень не мають цінності, і web-документи магазинів, порталів та статейників. Як же відбувається індексація сайту і чи можна цей процес прискорити?
Індексація в Яндексі
В Яндексі два шари індексу – основний та швидкий. У першому випадку індексація відбувається так:
- - Бот знаходить сторінку,
- - Документ сканується та заноситься до листа очікування,
- - Web-документ потрапляє до індексу у найближчий текстовий апдейт (частота, як Бог дасть).
Потрапляння сторінок у пошук через швидкий індекс виглядає скорочено - бот знаходить і сканує документ, після чого відразу або з короткою відтяжкою за часом (до доби) сторінка потрапляє в пошук і на неї (при правильній оптимізації) капає трафік.

Помилково думати, що для швидкого шару використовується спеціальний бот - швидкоробота, як окремого бота немає. І в першому і другому шарі є один робот.
Чому одні сторінки потрапляють у швидкий індекс, а інші ні?
Як змусити Яндекс полюбити сайт
Домогтися кохання в житті складно, для цього потрібні або художні зовнішні дані, або геніальний розум або великий рахунок у банку. Так і з ПС. Вона полюбить той сайт, який:
- - не порушує вимоги системи пошуку,
- - Пропонує цікаву та актуальну для користувача інформацію,
- – Має відмінні риси.
Блог Zegeberg швидкий індекс любить, але дорога до цієї любові була довгою та важкою. Для цього треба було не переписувати чужі статті, а перекручуватися надсвоїми думками, домагаючись їхньої синхронізації та перенесення на електронні сторінки. Думки спиралися на факти, факти враховували інтереси користувача. Коло замкнулося, сторінки індексуються за кілька годин.
Як змусити Яндекс переіндексуватиweb-документ?
Тут все просто – треба привести на сторінку бота, який порівняє кеш із новим текстом, помітить відмінності та надішле документ на оновлення у видачі, у найближчий текстовий апдейт сторінка переіндексується.
Індексація в Google
ПС Google має більше ресурсів (серверів для зберігання даних, грошей у буржуїв більше), тому й сторінки швидше індексуються. Якщо до сайту з боку ПС немає нарікань (немає спаму, не порушуються пошукові технології), то бот приходить швидко і швидко сторінка потрапляє в індекс.
Про пісочницю скажу – це фантазія запаленого мозку, якщо документ правильно оптимізовано, то одразу після індексації він приносить трафік. Звичайно, позиції запиту змінюються (враховуються зовнішні та внутрішні посилання), але документ не стоїть по два тижні в аркуші очікування, як переважно пошуку Яндекса.
Текстових апдейтів у Googlt немає, точніше вони є і постійно проводиться онлайн: бот потрапляє на сторінку, сканує їй документ попадає в індекс.
Ще одна відмінність процесу індексації в Яндексі та Google – це можливості переіндексації. У заморській пошуковій системі з цим немає питань, оскільки оновлений документ просто повторно надсилається в індексі через панель веб-майстра або аддурл. В Яндексі документ, який в індексі відправити через аддурл не вийде, система наївно скаже вам, що сторінка вже в індексі.