Файл для блогу, блог для блогів створення блогу на Blogspot
Привіт дорогі мої читачі і всі, хто заскочив на вогник. Сьогодні у нас важливий урок, розбиратимемося, що ж це за файл такий robots.txt, який настійно радять створити для покращення індексування нашого ресурсу. Прочитавши масу інформації, хочу поділитися з Вами своїми міркуваннями у створенні цього файла.
Можна створити для всіх роботів відразу, заблокувати індексувати архів
Allow: / Sitemap: https://www.bdblogov.ru/sitemap.xml
Такий файл robots.txt-дозволити індексувати все і всім роботам
User-agent: * Disallow: Sitemap: https://www.bdblogov.ru/sitemap.xml
Що цікаво, Яндекс з'їв цей файл, а в іншому блозі horizon-s.blogspot.com не прийняв. Причина, як я вважаю в домені, цей блог на персональному домені ru.
Заблокувати архів або певну сторінку
Видалити з індексу всі зображення
Заблокувати одну з картинок
Disallow: /search - Цей пункт забороняє індикацію сторінок.
Андрій Кравцов привіт. Disallow:/search справді забороняє індексацію. Але в мене додано рядок Allow: / дозволено індексувати. Disallow:/search Allow: / це дозвіл індексувати всі сторінки. , індексуються усі сторінки.
чому тоді у мене стояв такий файл робот і сторінки всі крім головної не індексувалися. але це не суть питання як видалити файл роботс? я його видаляю, але на search console пише все одно цей файл.
Ось вам приклад.User-agent: Mediapartners-Google Disallow:
User-agent: * Disallow: /search Allow: /
такий файл. http://prnt.sc/ako2yd А ось приклад щоіндекс заборонено.
Ви його не видалите, без файлу не вийде, гугл буде відображати свій для своїх блогів на платформі гугла. Тоді відобразиться правильно в яндексі та інших пошукових системах, і зміниться в гугле. Додайте найпростіший User-agent: * Disallow: Sitemap: http://www.bdblogov.ru/sitemap. xml Дозволити індексувати все в блозі та для всіх роботів. Якщо, звичайно, потрібно щось заблокувати, тоді доведеться додати властивість.
Я про що й говорю. /search цей запис видалив та пішли в індекс сторінки. Але я про це не знав. я місяць чекаю чому немає відвідувачів на блозі а виявляється сторінки закриті від індексу. Тепер то так я поставив просто дозволено все. я покладався на людей що дають правильні роботс файл а виявилося тим самим приховав сторінки.