Як перевірити внутрішні посилання сайту після переїзду на HTTPS, Блог Міндубаєва Рамазана

При переїзді сайту на протокол HTTPS потрібно перевірити, чи всі внутрішні посилання були переведені у відносні, чи всі зовнішні скрипти підключені через HTTPS, чи всі зображення підключені за безпечним протоколом.

Щоб не нишпорити по сайту вручну, є автоматичний метод, який може допомогти в цьому.

Нижче дам покрокову інструкцію, як перевірити ваш сайт.

Крок1

Запуск програм Screaming Frog SEO Spider

Крок 2

Переходимо в налаштування Configuration – Spider, встановлюємо налаштування як на скріншоті для якісного обходу сайту.

Крок 3

Переходимо в налаштування Configuration - Robots.txt - Setting, встановлюємо налаштування, як на скріншоті, для того, щоб ми бачили, зокрема, заблоковані ресурси.

Крок 4

Переходимо в налаштування Configuration - HTTP Header - User-agent, встановлюємо налаштування, як на скріншоті (YandexBot або GoogleBot Regular)

У разі ризик блокування сайтом нашого краулера знижується, т.к. ми маскуємось під ПС.

Крок 5

Переходимо в налаштування Configuration - Exclude, встановлюємо налаштування для виключення обходу дзеркал на http:// і http://www.

.* — обов'язково вказуйте наприкінці URL.

Крок 6

Вказуємо сайт, що перевіряється, на https і тиснемо кнопку Start

Крок 7

Чекаємо на повне сканування.

Крок 8

Робимо розвантаження зовнішніх посилань Bull Export - All Outlinks.

Крок 9

Розбиваємо вивантаження по стовпцях за допомогою Excel - вкладка Дані - Текст по стовпчикам.

Якщо у вас пливе кодування, можна відкрити спочатку Notepad++, аПісля скопіювання в Excel, в такому випадку кодування буде коректним.

Крок 10

Включаємо фільтр для зручної роботи.

Включаємо фільтрацію за http:// та сортування від А до Я.

---