Чи потрібний і навіщо Черговий рудимент пошукової оптимізації

При роботі з файлом sitemap.xml у вебмайстрів часто виникають питання, відповіді на які немає навіть в офіційній довідці пошукових систем. Наприклад, цікаві такі моменти:

- Для чого саме потрібен sitemap?- Чи впливає він на індексацію сайту?- Як часто його потрібно оновлювати?

навіщо
Зізнайтеся чесно, чи можете ви відповісти на них прямо? :) Ми звикли використати sitemap, сподіваючись, що це якось покращить індексацію сайту або вплине на рейтинг, але дати гарантію цих покращень ніхто не може.

З опису зрозуміло, що sitemap потрібен для того, щоб повідомити пошукачі про сторінки сайту (нові або старі). Але що це нам дасть, подробиць немає, просто дані начебто можуть допомогти пошукача оптимізувати свої алгоритми краулінгу. При цьому чітко говориться:

Google не гарантує, що ми будемо сканувати або індексувати всі ваші URL.

Файли Sitemap враховуються при обході сайту, однак ми не гарантуємо, що всі URL із вашого файлу Sitemap будуть додані до пошукового індексу Яндекса.

Ну і щоб переконати нас все ж таки використовувати сайтмеп, вони кажуть:

У більшості випадків веб-майстри отримують переваги від передачі файлів Sitemap і ніколи не мають ніяких неприємностей.

Тобто, завуальовано звучить: «краще вам навряд чи буде (ми не можемо цього обіцяти), але гірше ви не зробите, хоча час витратите» :)

На мій погляд, сайтмепи мають свої плюси і мінуси, про які буде сказано нижче, але в цілому, це рудимент пошукової оптимізації, на кшталт meta-keywords, який раніше давав пошуку певні сигнали і ми могли його використовувати на свою користь, але зараз це марне заняття.

Плюси Sitemap.xml

У деяких випадках сайтмеп буде корисний. Наприклад:

— Деякі сторінки сайту можуть бути доступні лише через javascript чи flash-навігацію. Пошуковик їх просто не знайде на сайті в процесі краулінгу, якщо не буде зовнішніх або внутрішніх текстових посилань, тому sitemap тут буде доречний.

Мінуси Sitemap.xml

Якщо ви все ж таки працюєте з sitemap, то враховуйте наступні моменти:

— Забувши про sitemap, є ймовірність, що в ньому залишаться непотрібні сторінки, які ведуть неактуальний контент (биті посилання) або той, який ви вирішили закрити від індексації. Даючи протилежні інструкції робота, є шанс, що він зробить все не так, як ви очікуєте.

— Ліві парсери сайтів (грабуючи контент) насамперед дивляться, чи є sitemap, у ньому зазвичай власник сам вказав усі важливі документи і не потрібно їх шукати, аналізуючи структуру сайту.