Сайт не проіндексований через налаштування сервера - глюк Яндекса

Через налаштування сервера, на якому знаходиться сайт, робот Яндекса не міг отримати доступ до нього і сайт не був проіндексований. Уточніть у Вашого хостингу, чи не був блокований IP робота 95.108.156.251 при зверненні до сайту.
Насамперед, звичайно, пішов розбиратися з хостером, мовляв, що таке, як там може бути і т.п. У мене на тому хостингу є невелика особливість - кілька разів через занадто велику свою активність з фтп, сайтів мій ip потрапляв до списку підозрілих, і доступ мені закривали. Мабуть, це такий захист від DDOS чи якихось поганих дій. Загалом відразу згадав цю особливість хостера і написав повідомлення в тих. підтримку.
За кілька хвилин мені надходить відповідь.
Так-с, думаю, коло підозрюваних помітно звузилося. Хостер виходить не винен, або вони напару з Яндексом там щось начудили. Заходжу знову в панель Яндекс.Вебмайстра і пишу питання вже на підтримку Яші — мовляв, як так сталося, хостер каже все, як далі жити і що робити?
Чекати на відповідь довелося помітно довше, але я її отримав.
Якийсь час тому у нашого робота дійсно виникали проблеми при з'єднанні з Вашим сайтом, пов'язані зналаштуваннями сервера, на якому він знаходиться (швидше за все блокувався доступ індексуючому роботу). На даний момент цієї проблеми не виникає, доступ до сайту з'явився, він скоро почне індексуватися і потім повинен з'явитися в результатах пошуку протягом 2 тижнів. Прискорити цей процес вручну ми, на жаль, не маємо можливості. Зачекайте, будь ласка.
Смішно — як завжди ніхто ні в чому не винен:) На щастя з індексу випали 2 сайти, яким не критична індексація Яндексом. Ну точніше, якщо все утворюється швидко, сайти нічого не відчують. На WordPress inside трафік просів на 100-150 унік десь, залишалося ще 300. Чайному блогу довелося трохи складніше, переходів з Яндекса там була майже половина. Але найсумніше те, що ніяк не індексувалися сторінки GoGetLinks. Добре, що є термін 45 днів для індексації. А якби під приціл потрапили сайти, які заробляють у сапі або інших біржах посилань — я б напевно дуже засмутився (хоча і ситуація, що склалася, не додавала оптимізму).
Після тижня невизначеності ситуація, на жаль, ніяк не змінилася, йшли 10-ту добу і намічався апдейт пошукової видачі - схрестивши пальці вкотре пішов дивитися чи повернулися сайти в індекс. Як кажуть у таких випадках, мало не посивів увесь — до двох минулих додався ще один блог із 400 сторінками в індексі. І найсумніше, що він потихеньку заробляв собі в Сапі. Тепер же деякі вебмайстри поспішили знімати посилання і щоденний дохід трохи падав.
Втрата трафіку та доходу не найстрашніше, в принципі. Я почав сумніватися у своєму хостингу, який мені вже довгий час служив вірою та правдою. А немає нічого клопотнішого за пошук нового нормального хостера, який би тебе у всьому влаштовував і перенесення всіх сайтівтуди. Цілком очевидно щось потрібно було робити, оскільки крім 3-х сайтів, що вилетіли, були дуже важливі інші проекти. Цілком випадково зрозумів пошукати вихід із ситуації на seo форумах — адже не міг я один потрапити в таку неприємну ситуацію. Найбільше інформації знайшов на Серчі.
Як виявилося, проблема "Сайт не проіндексований через налаштування сервера" виникла вже відносно давно, зокрема, тема була від 22.06, де народ зіткнувся з такими ж проблемами. Я там почитав і жахнувся — у когось вилетіло 15(!) сайтів із 20 створених, у когось вилітали проекти з тисячами сторінок в індексі. Це, звичайно, бляха, якій і ворогу не забажаєш. Закінчувалась тема тим, що сайти все ж таки поверталися в індекс через деякий час, але при цьому не дорахувалися певної кількості сторінок і трафіку. Тоді під приціл потрапив переважно хостинг sweb та деякі інші.
Разом. Всі факти свідчать про те, що проблема в Яндексі. Більше того, незважаючи на те, що стільки часу пройшло з появою такого глюк, ніхто схоже не придумав, як від нього захиститися. Я розумію, що пошук у великих обсягах даних — річ складна, але яка недалекоглядна людина вигадала такий «геніальний» алгоритм роботи, коли через один глюк чи проблеми з сервером так легко і швидко можна тупо знищити праці 2-3 років розробки та розвитку проекту. Невже не можна передбачити подібний перебіг розвитку подій, перевіряти декількома шляхами доступність сайту, не знаю… Просто виникає мало не риторичне питання — «чому з Ґулом ніколи такого не відбувається?»
Весь сумнів щодо хостингу Hostpro були з легкістю відкинуті і слава богу, дуже вже не хотілося з'їжджати від такого класного хостера:) На даний момент сайти повернулися в індекс, що,звичайно, підвищило настрій і утихомирило гнів у бік співробітників Яндекса, хоча неприємний осад залишився.