Учитывает ли Гугл ссылки с непроиндексированных страниц?

[vold57 942]

Из книги Эрика Энжа (это касается Гугла):

Цитата

Что делать, если я хочу избежать проблем с дублированием контента, но у меня есть контент из других веб-источников, который я лицензировал для показа своим посетителям?
Используйте код <meta name="robots" content="noindex, follow"/>. Поместите его в верхнем колонтитуле вашей страницы, и поисковые движки будут знать, что этот контент не для них. Это лучшая практика, поскольку люди все равно смогут посетить эту страницу и сделать на нее ссылку, а ссылки на этой странице будут сохранять свою ценность.

По моему убеждению ссылки с непроиндексированных страниц вес не передают как в Гугле, так и в Яндексе. С поддержкой Яндекса я на эту тему переписывался и они подтвердили, что ссылки со страниц, которых нет в индексе на ранжирование никакого влияния не оказывают.

Кто, что думает по данной теме?

[Windakolit 1030]

Немного задевали этот вопрос в других темах, например по редиректу и каноникалу. Если страницы в данный момент нет в видимом индексе поисковых систем, не обязательно, что ссылки с нее не оказывают влияния на ранжирование. Пример - страницы с настроенным 301 редиректом, которые передают вес как в Яндексе, так и в Гугле.

Другой вопрос - ссылки со страницы, на которую еще не заходил поисковый бот или заходил, но не смог распознать (например контент на неадаптированном для поисковиков Ajax). С таких страниц ссылки учитываться не могут, так как поисковый бот их пока не распознал или не видел

[vold57 942]

301 редирект это особый случай. Это и для Яндекса работает в то время как Яндекс высказался однозначно по поводу ссылок с непроиндексированных страниц. Видимо при 301 редиректе идет просто перенаправление входящих ссылок. Но при этом в расчет не берется вес самой страницы, так как ее в индексе нет.

Дальше в книге обнаружил:

[vold57 942]

Последний скриншот, который я привел, вообще, не о том. Это я ошибся. Сначала хотел его удалить, потом решил прокомментировать.

[Windakolit 1030]

Да, кстати, напоминаю, что Гугл даже запрещенные в robots.txt страницы показывает при наличии на них ссылок. Так что думаю, что если страницы в индексе не видно, это не значит, что при наличии например внешних сигналов она не учитывается и соответственно ссылки с нее.

Я кстати готов на эксперимент Например возьму со своего сайта страницу, на которую есть обратные ссылки с других сайтов, затем запрещу ее в роботсе. И сделаю на ней ссылку с читабельным уникальным анкором (числовым кодам я не доверяю) например на один из своих сайтов (или можно на один из твоих). Эффект будем смотреть по проиндексированным внешним ссылкам в панели вебмастера Гугла или/и отслеживая позиции по уникальному анкору сайта-реципиента (например в оллпозишнс).

[vold57 942]

@Windakolit тогда анкор нужно придумать уже сейчас и уже сейчас начать мониторить позиции по нему целевой страницы. То есть, нужно до того как ставить ссылку с уникальным анкором и запрещать страницу для индексации, получить устойчивую картину, что позиций по этому запросу нет. 

53 минуты назад, Windakolit сказал:

Да, кстати, напоминаю, что Гугл даже запрещенные в robots.txt страницы показывает при наличии на них ссылок.

Приведу небольшой отрывок из того, что сказал Джон Мюллер:

Цитата

Вы должны держать в уме одну вещь - если одна из ваших страниц заблокирована в robots.txt, теоретически возможно, что кто-то случайно поставит ссылку на эту страницу. И если они сделают это, может случиться так, что мы проиндексируем этот URL безо всякого контента по причине блокировки в роботсе. То есть мы могли бы не знать, что вы не хотите, чтобы эти страницы действительно были проиндексированы.

То есть по идее анкор ссылки не должен будет работать.

По поводу того, что "мы могли бы не знать, что вы ...", это к данной теме не относится, но очень смешной ответ. Могли бы не знать только в одном случае. Если бы не заглянули в robots.txt. 

[Windakolit 1030]

11 часов назад, vold57 сказал:

@Windakolit тогда анкор нужно придумать уже сейчас и уже сейчас начать мониторить позиции по нему целевой страницы. То есть, нужно до того как ставить ссылку с уникальным анкором и запрещать страницу для индексации, получить устойчивую картину, что позиций по этому запросу нет. 

Определился с анкором - уникальная фраза, то есть слово с нулевой частотностью в Вордстате с пустой выдачей в кавычках в Яндексе и в Гугле. Добавил проект на отслеживание по этой фразе в allpositions.ru, сейчас соответственно нет в топе. Закрыл страницу донора, с которой планирую сделать ссылку на реципиент в robots.txt, жду, когда она выпадет из индекса в обеих поисковых системах или обновится сниппет, что содержимое закрыто в роботсе. Затем проставлю ссылку и буду отслеживать позиции при ежедневной проверке в оллпозишнс.

[Windakolit 1030]

В Яндексе страница удалена из индекса, а Гугл не торопится. Подожду еще дней 10

[vold57 942]

1 час назад, Windakolit сказал:

В Яндексе страница удалена из индекса, а Гугл не торопится. Подожду еще дней 10

Ты в Гугле через Search Console удалял?

[Windakolit 1030]

Нет, но вроде там страница должна отдавать код ответа 404?

[vold57 942]

На странице удаления:

Здесь вы можете временно удалить свои URL из результатов поиска. Чтобы удалить контент насовсем, надо удалить или изменить исходную страницу. Подробнее...

Если перейти по ссылке, то там объясняется, что страницу можно удалить из индекса при помощи файла robots.txt, при помощи атрибута noindex и т.д.
То есть временно удалить из индекса в консоли, а постоянно, используя рекомендации по ссылке.)

[Windakolit 1030]

Как и предполагал, Гугл страницу оставил в индексе, но сделал пометку в сниппете мол что запрещено отображение. Тем, кому важно удалить страницу из индекса Google даю совет - нужно или сделать запрет 403, или удалить страницу физически, то есть создать ошибку 404 или закрыть страницу через <meta name="robots" content="noindex">

Оказалось, что в Опенкарте, на котором я провожу эксперимент, не предусмотрено функционала с роботс ноиндекс. Пока ищу модуль, который бы позволял это сделать. Нашел один платный но в рамках цен на приложения Опенкарта он недешевый а кроме как закрывать и открывать в ноиндекс нофолоу/индекс фолоу ничего не может. Если не найду ничего другого дельного то куплю его

[vold57 942]

Петр, а сколько модуль стоит?

[Windakolit 1030]

20$ при средней цене функциональных модулей на Опенкарте в 5-10$

[CarLSon 24]

В 04.09.2018 в 21:19, Windakolit сказал:

Тем, кому важно удалить страницу из индекса Google даю совет - нужно или сделать запрет 403, или удалить страницу физически, то есть создать ошибку 404 или закрыть страницу через <meta name="robots" content="noindex">

ИМХО, в роботс закрывать бессмысленно, если страница была проиндексирована ранее - поисковики проигнорят эту рекомендацию.

[vold57 942]

@CarLSon хотите сказать, что и через длительное время она останется в индексе?

[CarLSon 24]

Если текста на странице достаточно, то да. Я несколько лет назад случайно обнаружил, что некий мерзкий сервис успел заархивировать один мой новенький сайт, где я тупанул - забыл закрыть от индексации в роботс "технические страницы" - дубли, тэги и т.п.). Причём гадёныш успел нагенерить ссылок в сеть за пару дней моего тупежа - я на выходных был, а в понедельник всё позакрывал. Ну не думал, что страницы нового домена могут самостоятельно так быстро влететь в индекс. В результате до сих пор не могу удалить их из гула. Самое обидное, что имя у домена-агрессора вредное - содержит слово "нагон". Теперь сайт потерян для продажи ссылок с него, ибо ни один вменяемый сеошник, проверяя ссылочное этого сайта, не станет размещать там ссылки. 

[Windakolit 1030]

Сначала забыл а потом забил на эксперимент. В этом году вспомнил и довел до результата.

Вкратце напомню входные данные: есть сайт, на котором одна из страниц было закрыта от индексации через метатег роботс noindex. После того, как страница вылетела из индекса, в текстовом контенте на ней было размещено предложение со ссылкой на другой сайт. Анкором была фраза "пушистиковая клепшна" - не символьный код, слово человеческое, но не имеющее под собой значения какого то предмета или явления. Позиции сайта реципиента (куда вела ссылка с указанным анкором) начали проверяться за несколько недель до начала эксперимента. Видимости в топ 100 ни в яндексе ни в гугле не было.

После того, как ссылка была проставлена, прошло несколько месяцев. Ссылка не появилась в кабинетах вебмастера гугла и яндекса сайта реципиента. Сайт не получил видимости по данному запросу в топ 100 Гугла и Яндекса

Вывод из эксперимента - ни Гугл ни Яндекс не учитывает ссылку, проставленную со страницы, которой нет в индексе поисковых систем. Во всяком случае, когда ссылка была проставлена после закрытия этой страницы от индексации

 

[Алексей Паластров 29]

@Windakolit А если бы ты указал на этой странице в метатеге роботс noindex, follow, то тогда, наверно, поисковики увидели бы ссылку?

[Windakolit 1030]

Хорошее замечание, не подумал об этом. На странице стояли директивы noindex, nofollow. Сейчас сменил на noindex, follow

Посмотрю ближайший месяц на изменения

[vold57 942]

@Windakolit , я и не подумал сразу, что ты прописал nofollow. Подумал, что только noindex. А оно вон как оказалось.)  Можно было теперь не прописывать follow, а просто убрать nofollow.

[Windakolit 1030]

Да я сам про нофолоу забыл) поставил автоматом и все

Но к слову по вопросу нофалоу и ссылок в гугл вебмастере - посмотрел, что отображаются ссылки, размещенные с атрибутом rel nofollow. Это конечно не то же что и ссылки со страницы запрещенной через мета нофалоу, но суть аналогичная

[Windakolit 1030]

Сегодня увидел материал в тему нофалоу ссылок от Мегаиндекса

 

[lalmazl 28]

Есть сайт там кучу ботов регится и добавляет свою ссылку в профиль, я даже не заморачиваюсь по этому поводу тег robots = noindex,nofollow.

Никаких последствий.

Эксперимент про rel=nofollow  к ссылке очень было бы интересно.

К примеру все тоже самое, только 2 ссылки одна с тегом другая без. С тегом robots index,follow.