Как проверить битые ссылки на наличие входящих ссылок

Новички, размещайте в этом форуме свои вопросы и получайте рекомендации по SEO продвижению сайта, юзабилити сайта, дизайну. Обсуждаем внутреннюю и внешнюю оптимизацию, поисковые системы, SEO инструменты и сервисы.
justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 05 мар 2018, 12:13

Здравствуйте! Подскажите пожалуйста, как проверить битые ссылки на наличие входящих ссылок?

Аватара пользователя
Вадим Костин
Сообщения: 182
Зарегистрирован: 28 янв 2017, 18:01
Благодарил (а): 3 раза
Поблагодарили: 6 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение Вадим Костин » 05 мар 2018, 13:29

Добрый день! Вы хотите найти на сайте битые ссылки?
После легкой регистрации у Вас появится возможность комментировать и создавать свои темы ;) Регистрация занимает меньше 1 минуты ;)




justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 05 мар 2018, 14:49

Да. Вроде бы нашла. Для этого зашла в Яндекс.Вебмастер - Индексирование - Страницы в поиске - Исключенные. Если есть какой-то другой способ, то подскажите пожалуйста. Моя цель - избавиться от дублей. Прочитала в одном из блогов, что после определения списка битых ссылок, нужно проверить на наличие входящих ссылок, далее настроить редирект 301 дублей на нормальные страницы. Если есть какой-то другой способ избавиться от дублей, напишите пожалуйста, буду Вам благодарна.

Аватара пользователя
Вадим Костин
Сообщения: 182
Зарегистрирован: 28 янв 2017, 18:01
Благодарил (а): 3 раза
Поблагодарили: 6 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение Вадим Костин » 05 мар 2018, 20:07

Битые ссылки и дубли это разные темы.

Дубли страниц бывают четкие и нечеткие.

Четкие дубли имеют разные url, но при этом одинаковый контент.

Например у главной страницы бывает несколько дублей:

- site.ru
- site.ru/index.php
- site.ru/index.htm
- site.ru/index.html

Это и есть четкие дубли. Довольно часто встречается данная проблема.

В данном случае можно решить задачу настроив 301 редирект со страниц дублей на основную (продвигаемую страницу).

Есть нечеткие дубли. Например страницы постраничной навигации каталога в интернет-магазине, 1, 2, 3, 4, 5 , 6 и т.д страница каталога. Страницы с разными url, но при этом контент не меняется. В данном случае можно указать на 2, 3, 4, 5, 6 специальный тег <link rel="canonical" href="http://www.example.com/blog"/>, который будет указывать, что основная страница для индексации это 1 страница.

Подробности тут: https://yandex.ru/support/webmaster/controlling-robot/html.html#canonical

Вообще к каждой проблеме с дублями существую разные подходы решения.

Какие дубли у Вас на сайте? Скиньте примеры url

justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 06 мар 2018, 09:32

Вот пример https://nalog.center/catalog/servisy/obuchenie/onlayn_kurs_zakupki_po_223_fz_povyshenie_kvalifikatsii_72_ak_chasa/
https://nalog.center/catalog/servisy/obuchenie/schooltorg/onlayn_kurs_zakupki_po_223_fz_povyshenie_kvalifikatsii_72_ak_chasa/

Аватара пользователя
Вадим Костин
Сообщения: 182
Зарегистрирован: 28 янв 2017, 18:01
Благодарил (а): 3 раза
Поблагодарили: 6 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение Вадим Костин » 06 мар 2018, 12:29

Каким образм появляются дубли с каталогом "schooltorg"

Я правильно понимаю, что вторая ссылка дубль?

justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 06 мар 2018, 12:46

Если честно, то не помню, какая именно является дублем. Вот другой пример https://nalog.center/catalog/onlinekassyioborudovanie/fiskregistr/?set_filter=y и https://nalog.center/catalog/onlinekassyioborudovanie/fiskregistr/.1-я ссылка дубль.

justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 06 мар 2018, 12:47

Я не понимаю, каким образом появился дубль.

Аватара пользователя
Вадим Костин
Сообщения: 182
Зарегистрирован: 28 янв 2017, 18:01
Благодарил (а): 3 раза
Поблагодарили: 6 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение Вадим Костин » 06 мар 2018, 14:26

В 1-м случае дубля нужно: настроить сайт таким образом, чтобы на запрос несуществующей страницы отдавался 404 ответ сервера и показывалась несуществующая страница.

Во 2-м случае дубли можно закрыть в robots.txt

Dissalow: /*?*

В том случае, если вам не нужны в индексе страницы с "?"

После правки robots.txt обязательно проверьте в анализаторе robots.txt в вебмастере Яндекс и Google,
чтобы продвигаемые страницы были доступны для индексации, а не продвигаемые (страницы-дубли) запрещены.

justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 06 мар 2018, 14:52

Сделала изменения в роботс, как Вы говорили. После этого страницу на переобход отправить,да? А как быть в этом случае https://nalog.center/upload/iblock/bc2/1766440cf445b975a9109a5b6e76a455.pdf и https://nalog.center/upload/iblock/b6d/dc979ba15165605040ad857b3347a940.pdf ? Одна ссылка из них - дубль.

Аватара пользователя
Вадим Костин
Сообщения: 182
Зарегистрирован: 28 янв 2017, 18:01
Благодарил (а): 3 раза
Поблагодарили: 6 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение Вадим Костин » 06 мар 2018, 17:35

Нет, на переобход можно не отправлять. Вы ведь страницы не изменяли. Robots.txt отправьте на переобход в Яндексе и Google

Аватара пользователя
Вадим Костин
Сообщения: 182
Зарегистрирован: 28 янв 2017, 18:01
Благодарил (а): 3 раза
Поблагодарили: 6 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение Вадим Костин » 06 мар 2018, 17:38

С дублями pdf нужно с программистом пообщаться и понять, почему один и тот же файл доступен по двум разным адресам. Попытаться сделать так, чтобы был доступен по одному адресу, а по второму должен быть 404 ответ сервера.

justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 06 мар 2018, 17:42

Техподдержка Битрикс сказала, что "Действительно, данные страницы фактически можно считать дублями.
Дело в том что по прямой ссылке на файл ядро Битрикс не подключается. Т.е. сам Битрикс повлиять на то, что эти страницы являются дублями не может.
Создаются дубли по причине того, что при создании нового элемента для него создается отдельная папка и в нее загружается сам файл. Т.е. в случае если файлы одинаковые, то получатся копии. Повлиять на это, к сожалению, в данный момент никак нельзя."

justmary
Сообщения: 111
Зарегистрирован: 23 июл 2017, 19:04
Благодарил (а): 2 раза
Поблагодарили: 1 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение justmary » 06 мар 2018, 17:43

Подскажите пожалуйста, как быть с "недостаточно качественными страницами"?

Аватара пользователя
Вадим Костин
Сообщения: 182
Зарегистрирован: 28 янв 2017, 18:01
Благодарил (а): 3 раза
Поблагодарили: 6 раз

Re: Как проверить битые ссылки на наличие входящих ссылок"

Сообщение Вадим Костин » 06 мар 2018, 21:26

justmary писал(а):
06 мар 2018, 17:42
Повлиять на это, к сожалению, в данный момент никак нельзя."
Надо с программистами общаться, можно наверное сделать так, что если файл одинаковый по двум url, то был бы 301 редирект на канонический файл.

Ответить