SeVlad, этот сайт моя душа…
Сезонно выжимал 100 000 в сутки (2014 год) на новогоднем трафике.
Сейчас дает 3500 хостов в сутки..
Ничего сделать не могу..
Контент уникальный, авторский, не переоптимизированный, темы расскрытые, ютуб канал продкручен..
Вот и роюсь по подобным вопросам.. Может еще реанимировать получиться.
Сейчас удалю ссылки выше)
Удалять не нужно. Нужно поправить так, что бы люди поняли, но боты увидели только нужное, а не битое.
Откуда берутся подобные ссылки
Давайте ещё раз попробую пояснить.
Чтобы ПСы узнали о ссылках (любых, не важно — правильных или поломанных) — им нужно как-то сообщить. Это возможно если
1) есть ссылка на своём сайте.
2) есть ссылка на чужом сайте (беклинк, обратная ссылка).
3) дать ссылку в вебмастере или др. сервисе ПС.
4) открывание ссылки в браузере.
Вот про последнее мы с Flector-ом говорили выше. Если Вы откроете неправильную ссылку в браузере, будучи залогиненым в сервисы ПС и/или в браузере будут аддоны-стучалки (в гуглохроме по-моему даже аддонов не нужно), то ПСы узнают о них и начнут проверять — стучаться.
Вообще-то, получая 301 они выкинут их базы со временем. Но вот если у Вас это длиться долго — явно где-то битая ссылка живёт. На вашем сайте, на внешнем или в закладках/аддонах браузера.
Я поняла, только пока не знаю как это сделать…
Я про «удалять» написала о форуме, чтобы «неправильные»ссылки не проиндесировались и не стали «вечными».
Плагин поставила, проверила… Нашла несколько битых ссылок, исправила…
Кривые плагины в браузере РАЗРАБОТЧИКА.
да причем тут разработчик то?
если пользователь установит яндекс.браузер, поставит в него кривое расширение, добавляющее левые ошметки к ссылкам — яндекс моментально сожрет эти страницы в индекс, ибо и яндекс и гугл шпионят за пользователями. и это ведь даже не предположение — это факт. сколько уже было скандалов с тем, что яндекс и гугл индексируют страницы админок, недоступным обычным посетителям?
Flector, а какой тогда выход…
Внести изменения в роботс (директивы, которые Вы написали выше)?
Мне просто все это сложно дается… Сейчас вон дуплю, пытаюсь понять что такое рефферер и как реально можно вычислить эту ошибку.
если пользователь установит яндекс.браузер, поставит в него кривое расширение, добавляющее левые ошметки к ссылкам — яндекс моментально сожрет эти страницы в индекс,
Теоретически я такое допускаю, но практически.. Если бы так было — это было бы массовой проблемой на всех сайтах. Но такого нет. А если бы и появилось, то наверняка быстро бы пофиксилось — ибо массовость.
А вот когда залогиненый в сервисы подставит/получит и перейдет неправильную ссылку — вот тут уже точно они это сожрут. Проверено лично 🙂
И заметьте в данном случае это не «левые ошметки», а вполне реальные ссылки. Такая склейка происходит когда даётся ссылка как относительная — без протокола. Это уже не редкость.
Теоретически я такое допускаю, но практически.. Если бы так было — это было бы массовой проблемой на всех сайтах.
да в том то и дело, что это на практике подтверждается.
вот у человека в индекс попали ссылки с /http — точно такие же, какие лет 7 назад у меня схавал яндекс. вот откуда они взялись? ведь у меня более 700 страниц таких в индекс попало — тут уже одной криво вставленной ссылкой не отделаешься.
про ошметки вроде ?referer и прочую гадость и говорить не стоит — один какой-нибудь кривой сервис\плагин такое добавит и все — чисти их потом из индекса. и зараза — каноникл ни хрена не помогает, только запреты в robots.txt
залогинненость в сервисы тут совершенно не причем — хром и я.браузер и без логина шпионят на ура.
пытаюсь понять что такое рефферер и как реально можно вычислить эту ошибку.
рефферер — ссылающаяся страница. Страница, на которой обнаружена такая ссылкой. И это показывает Я.Вебмастер.
SeVlad, это я поняла…
В Вебмастере отфильтровала все внешние ссылки, которые ведут на искомую страницу…
нашлось ссылок 20 за все 8 лет существования сайта. Но ничего подобного с дублирующим урлом — нет.
Но ничего подобного с дублирующим урлом — нет.
А в самом начале Вы говорили
Все такие ссылки в вебмастере перенаправляются 301 редиректом
Вот там же и рефферер указан (насколько я помню)
SeVlad, так это внутренние ссылки…
Получается как… Основной робот Яндекса заходит на страницу с двойный урлом и перенаправляется на искому страницу 301 редиректом..
До есть рефферер получается данный сайт…
Только откуда и что генерирует такие ссылки
Вот скрин:
А под троеточнием?
Или это не тут надо смотреть, а на др страниц в вебмастере. Сейчас нет возможности посмотреть.
Вам нужно увидеть именно рефферер у этих ссылок. Там есть такой заголовок столбца (был во всяком случае).
Под троеточием вот что:
https://prnt.sc/h7aiz0
