Ahrefs врет за битые ссылки

Отчет «Битые бэклинки» в Ahrefs показывает не те данные, которые есть в реальности.

Разберем на этом примере. Что нам говорит Ahrefs? Что битых внешних ссылок нет.

А так ли это на самом деле?

Чтобы понять это я использую комбинацию Ahrefs и Screaming Frog.

Если коротко

1. Экспортируйте все обратные ссылки из Ahrefs.
2. Просканируйте все URL через Screaming Frog, используя режим «List». Проверьте:
   1. Нет ответа;
   2. 404;
   3. 5XX ошибки;
   4. Цепочки перенаправления;
   5. Цепочки перенаправления длиннее 5 редиректов.

Если длиннее

1. Перейдите в Ahrefs, введите URL в строку поиска Site Explorer и кликните на «Бэклинки» на левой боковой панели.
2. Важно: убедитесь, что в выпадающем списке выбрано «Все обратные ссылки»:

Дальше:

1. Нажмите «Экспорт».
2. Обязательно измените «Количество строк» ​​на «Все». Экспортируйте и откройте таблицу.

В таблице:

1. Скопируйте URL из столбца «Целевой URL».
2. Запустите Screaming Frog в режиме «List» и скормите все ссылки лягушке.

После завершения сканирования в SF:

1. Щелкните вкладку «Коды ответов».
2. На вкладке «Обзор» справа (скрин выше) кликаем на следующее:
   1. No Response
      1. Если урлов не много, проверьте их вручную (убедитесь, что это не ложное срабатывание), потому что иногда сайт плохо обрабатывает SF.
      2. Если ссылок много, нажмите «Экспорт» и повторно просканируйте их в режиме списка в конце этого списка.
   2. Server Error (5xx). Поступаем аналогично с 1 пунктом.
   3. Client Error (4xx). Поступаем аналогично с 1 пунктом.
3. Объедините списки реально неработающих ссылок в одну таблицу.
4. Для каждого URL определите целевой URL, на который следует перенаправить неработающую ссылку. В идеале это будет не домашняя страница. Почему? Google считает, что перенаправление на домашнюю страницу по сути является 404, что не поможет с передачей ссылочного веса.
5. Загрузите редиректы на сайт.
6. Еще раз просканируйте список урлов в Screaming Frog, чтобы увидеть, правильно ли они работают.