Может ли Twitter ускорить индексацию?
Я решил проверить известный миф о влиянии социальной сети Twitter на ускорение индексации веб-страниц в поисковых системах Google и Яндекс в 2022 году.
Предыстория ускорения индексации через социальные сети
Когда-то давно аддурилки (инструменты для добавления веб-страницы в список обхода роботом поисковой машины) были очень низкоэффективны - можно было добавить в соответствующий сервис поисковой системы Google или Яндекс url-адрес веб-страницы и ждать попадания в поиск очень долго. Тогда и были популярны социальные сети для ускорения индексации: facebook, twitter, одноклассники, вконтакте, instagram и google plus. У каждой были свои преимущества, но в целом они значительно ускоряли индексацию веб-страниц поисковыми роботами. Даже слабый google plus аккаунт позволял загнать веб-страницу в индекс через 1-1.5 часа. Интересный момент был в том, что множество ссылок с социальный сетей не просто сканировались, но и учитывались, то есть успешно попадали в Яндекс вебмастер и в аналогичный раздел Google Search Console.
В какой-то момент социальные сети перестали использовать для ускорения индексации, почему?
Ответ прост - социальные стали шифровать ссылки и делать всё, чтобы поисковые роботы не учитывали ссылки, чтобы вес не уходил на сторонние сайты, а перераспределялся внутри социальной сети. Если раньше в адресе ссылки можно было увидеть домен или даже полный урл, то после этих изменений его стало прочитать невозможно. Ссылки стали вставляться автоматически через свой промежуточный сайт прокладку (сервис сокращения ссылок), который был полностью запрещен к индексации всеми возможными способами, включая запрет IP-адресов роботов через htaccess. Все вставляемые ссылки автоматически шли через сервис сокращения ссылок.
В чем суть статьи?
В Яндекс Кью мне встретился псевдо-эксперт по поисковому продвижению сайтов, который утверждал, что Google без проблем индексирует ссылки с Twitter, то есть не только переходит по ним, но и индексирует их.
Публикую скриншот для того, чтобы он потом не отказался от своих слов, как очень часто бывает с любителями перезаказывать услуги у других. И да, вопрос был "Индексируется ли Twitter поисковиками?".
Как это обычно бывает - такие специалисты могут только говорить, а вот провести эксперимент он побоялся. Я не испугался провести такой эксперимент провести и решил поделиться с вами его результатами.
Эксперимент по индексации ссылок в Twitter
Постановка задачи
В качестве полигона для экспериментов используем сайт КонтинентСвободы.рф - новые страницы индексируются в течении дня без инструментов ускорения индексации, если использовать инструменты ускорения индексации, тогда в течение часа.
Нам нужно подготовить четыре материала - в силу концепции сайта будет подготовлено 4 описания программ, которые ранее отсутствовали на сайте.
Все четыре материала прорекламируем в твиттер. Большое количество лайков является важным параметром.
Два материала будут прорекламированы при помощи биржи SmmLaba - постинг сообщения со ссылкой на соответствующую страницу.
Один материал будет прорекламирован на популярных страничках Twitter при помощи биржи Blogun.
Последний материал будет прорекламирован на популярных страничках Twitter при помощи биржи Ротапост.
Для исключения сторонних факторов отключено отображение этих материалов в карте сайта и на самом сайте - страницы доступны только по прямой ссылке, которая будет упомянута только в твиттер.
Также отключен обход по счетчикам Яндекс Метрики.
Привожу снимок карты, чтобы доказать отсутствие этих материалов в карте сайта.
Покупка постов в Twitter
Пришла пора покупать посты на биржах.
SmmLaba
При помощи SmmLaba рекламируем:
- "Jeneo - WYSIWYG-редактор родословной" (02.03.22) - 20 постов;
- "ERDesignerNG - ERD диаграмма" (02.03.22) - 25 постов.
20 разных страниц в Twitter опубликовали Jeneo и 25 опубликовали ERDesignerNG.
К сожалению, именно постинг сообщений на этой бирже отслеживать очень сложно, поэтому дополнительно опубликую ссылки на эти два материала у себя (скриншот можно найти в начале статьи).
Blogun
На данной бирже будет прорекламирован материал "Fachwerk - Модели распорок железобетонных конструкций".
Было куплено два поста на популярных страницах.
К данным постам лайки и ретвитты не накручивались. Адреса страниц скрыты, чтобы не палить авторов, так как все люди по разному относятся к публикации постов за деньги.
RotaPost
В Ротапосте прорекламируем материал "Wake On LAN - Включение по сети".
Тут я купил два поста на непопулярных страницах и два на популярных.
Тут я уже накручивал лайки - к каждому посту накрутил по 50 лайков, соответственно, всё что свыше 50 - естественные лайки.
Результаты эксперимента по ускорению индексации веб-страниц через Твиттер
Эксперимент продлился месяц (без одного дня) и ни один пост из приведенных на скриншотах не был удален или заблокирован.
Теперь проверим что знает Google Search Console про эти страницы.
Что мы видим на скриншоте?
- URL нет в индексе Google;
- Ссылающаяся страница не найдена;
- Последнее сканирование, робот и вся прочая информация отсутствует.
Аналогичная история по остальным страницам, то есть Google не узнал про эти четыре материала через посты в Твиттер, что подтверждает мои слова о полном отсутствии КПД (Коэффициент Полезного Действия) для ускорения индексации веб-страниц при помощи постинга сообщений в Твиттер, даже если посты будут популярны.
Пришло время проверить что знает про эти материалы Яндекс.
Как можете видеть - все 4 страницы неизвестны роботу Яндекса.
Кто-то может сказать, что Твиттер-страницы на самом деле были непопулярными и живых переходов с них не было.
Однако, это не так и в доказательство покажу статистику просмотров этих страниц сразу после публикации, то есть в тот момент, когда через сайт их еще не нашел ни один пользователь.
Как можете видеть, по ссылкам из этих твиттер аккаунтов было очень много переходов:
- Jeneo получил 74 перехода;
- Wake On Lan получил аж 460 переходов;
- Fachwerk получил 191 переход;
- ERDesignerNG получил 49 переходов.
Из этой статистики становится ясно, что твиттер аккаунты были действительно популярными!
Вывод из результатов эксперимента
Результаты эксперимента показали, что посты в твиттер не оказывают эффекта на ускорение индексации веб-страниц, то есть КПД в таких условиях равен 0.
Конечно, следует упомянуть, что при включенном обходе по счетчику страницы бы успешно попали в поиск, так как переходов было много, но ведь спор был именно про индексацию ссылок в твиттер, а не про счетчик Яндекс Метрики.
Твиттер использует сервис сокращения ссылок твиттера t.co (абсолютно для всех ссылок). Достаточно открыть t.co/robots.txt и увидеть там:
User-agent: *
Disallow: /
Данная строчка указывает на полный запрет индексации сайта t.co для всех поисковых машин.
Помимо robots там явно используется запрет для IP-адресов роботов известных поисковых машин.
Их интерес в том, чтобы не передавать вес из социальной сети на сторонние веб-сайты.
Сейчас для ускорения индексации веб-страниц вашего сайта лучше использовать встроенные инструменты Яндекс Вебмастер и Google Search Console, так как они позволяют загнать страницу в поиск в течение пары часов.
Вывод: Поисковые системы Google и Яндекс не переходят по ссылкам в твиттер, которые автоматически сокращаются при помощи их сервиса.
Записывайтесь на мой курс по SEO, ссылка на который опубликована ниже.
