Может ли Twitter ускорить индексацию?

Категория: Разработка Теги: Веб-разработка , социальные сети Опубликовано: 1 апреля 2022 г. 21:05
Попытка ускорить индексацию веб-страниц через Твиттер
Попытка ускорить индексацию веб-страниц через Твиттер

Я решил проверить известный миф о влиянии социальной сети Twitter на ускорение индексации веб-страниц в поисковых системах Google и Яндекс в 2022 году.

Предыстория ускорения индексации через социальные сети

Когда-то давно аддурилки (инструменты для добавления веб-страницы в список обхода роботом поисковой машины) были очень низкоэффективны - можно было добавить в соответствующий сервис поисковой системы Google или Яндекс url-адрес веб-страницы и ждать попадания в поиск очень долго. Тогда и были популярны социальные сети для ускорения индексации: facebook, twitter, одноклассники, вконтакте, instagram и google plus. У каждой были свои преимущества, но в целом они значительно ускоряли индексацию веб-страниц поисковыми роботами. Даже слабый google plus аккаунт позволял загнать веб-страницу в индекс через 1-1.5 часа. Интересный момент был в том, что множество ссылок с социальный сетей не просто сканировались, но и учитывались, то есть успешно попадали в Яндекс вебмастер и в аналогичный раздел Google Search Console. 

В какой-то момент социальные сети перестали использовать для ускорения индексации, почему?

Ответ прост - социальные стали шифровать ссылки и делать всё, чтобы поисковые роботы не учитывали ссылки, чтобы вес не уходил на сторонние сайты, а перераспределялся внутри социальной сети. Если раньше в адресе ссылки можно было увидеть домен или даже полный урл, то после этих изменений его стало прочитать невозможно. Ссылки стали вставляться автоматически через свой промежуточный сайт прокладку (сервис сокращения ссылок), который был полностью запрещен к индексации всеми возможными способами, включая запрет IP-адресов роботов через htaccess. Все вставляемые ссылки автоматически шли через сервис сокращения ссылок.

В чем суть статьи?

В Яндекс Кью мне встретился псевдо-эксперт по поисковому продвижению сайтов, который утверждал, что Google без проблем индексирует ссылки с Twitter, то есть не только переходит по ним, но и индексирует их.

Псевдо SEO специалист

Публикую скриншот для того, чтобы он потом не отказался от своих слов, как очень часто бывает с любителями перезаказывать услуги у других. И да, вопрос был "Индексируется ли Twitter поисковиками?".

Как это обычно бывает - такие специалисты могут только говорить, а вот провести эксперимент он побоялся. Я не испугался провести такой эксперимент провести и решил поделиться с вами его результатами.

Эксперимент по индексации ссылок в Twitter

Постановка задачи

В качестве полигона для экспериментов используем сайт КонтинентСвободы.рф - новые страницы индексируются в течении дня без инструментов ускорения индексации, если использовать инструменты ускорения индексации, тогда в течение часа.

Нам нужно подготовить четыре материала - в силу концепции сайта будет подготовлено 4 описания программ, которые ранее отсутствовали на сайте.

Все четыре материала прорекламируем в твиттер. Большое количество лайков является важным параметром. 

Два материала будут прорекламированы при помощи биржи SmmLaba - постинг сообщения со ссылкой на соответствующую страницу.

Один материал будет прорекламирован на популярных страничках Twitter при помощи биржи Blogun.

Последний материал будет прорекламирован на популярных страничках Twitter при помощи биржи Ротапост.

Для исключения сторонних факторов отключено отображение этих материалов в карте сайта и на самом сайте - страницы доступны только по прямой ссылке, которая будет упомянута только в твиттер. 

Также отключен обход по счетчикам Яндекс Метрики.

Материалы отсутствуют в карте сайта для исключения сторонних факторов

Привожу снимок карты, чтобы доказать отсутствие этих материалов в карте сайта.

Покупка постов в Twitter

Пришла пора покупать посты на биржах.

SmmLaba

При помощи SmmLaba рекламируем: 

  • "Jeneo - WYSIWYG-редактор родословной" (02.03.22) - 20 постов;
  • "ERDesignerNG - ERD диаграмма" (02.03.22) - 25 постов.

20 разных страниц в Twitter опубликовали Jeneo и 25 опубликовали ERDesignerNG.

К сожалению, именно постинг сообщений на этой бирже отслеживать очень сложно, поэтому дополнительно опубликую ссылки на эти два материала у себя (скриншот можно найти в начале статьи).

Blogun

На данной бирже будет прорекламирован материал "Fachwerk - Модели распорок железобетонных конструкций".

Было куплено два поста на популярных страницах.

Пост fackwerk в твиттер для ускорения его индексации

Еще один пост о fackwerk для проверки влияния twitter на индексацию

К данным постам лайки и ретвитты не накручивались. Адреса страниц скрыты, чтобы не палить авторов, так как все люди по разному относятся к публикации постов за деньги.

RotaPost

В Ротапосте прорекламируем материал "Wake On LAN - Включение по сети".

Тут я купил два поста на непопулярных страницах и два на популярных.

Пост о WOL в твиттер

Пытаемся ускорить индексацию страницы Wake On Lan

Платный пост в твиттер для эксперимента по эффекту от него

Последний пост в твиттер для проверки эффекта ускорения индексации

Тут я уже накручивал лайки - к каждому посту накрутил по 50 лайков, соответственно, всё что свыше 50 - естественные лайки.

Результаты эксперимента по ускорению индексации веб-страниц через Твиттер

Эксперимент продлился месяц (без одного дня) и ни один пост из приведенных на скриншотах не был удален или заблокирован.

Теперь проверим что знает Google Search Console про эти страницы.

Проверяем результаты попытки ускорить индексацию через Твиттер

Что мы видим на скриншоте?

  1. URL нет в индексе Google;
  2. Ссылающаяся страница не найдена;
  3. Последнее сканирование, робот и вся прочая информация отсутствует.

Аналогичная история по остальным страницам, то есть Google не узнал про эти четыре материала через посты в Твиттер, что подтверждает мои слова о полном отсутствии КПД (Коэффициент Полезного Действия) для ускорения индексации веб-страниц при помощи постинга сообщений в Твиттер, даже если посты будут популярны.

Пришло время проверить что знает про эти материалы Яндекс.

Результат попытки ускорить индексацию веб-страниц в Яндекс через Твиттер

Как можете видеть - все 4 страницы неизвестны роботу Яндекса.

Кто-то может сказать, что Твиттер-страницы на самом деле были непопулярными и живых переходов с них не было.

Однако, это не так и в доказательство покажу статистику просмотров этих страниц сразу после публикации, то есть в тот момент, когда через сайт их еще не нашел ни один пользователь.

Количество переходов из Твиттер на рекламируемые страницы

Как можете видеть, по ссылкам из этих твиттер аккаунтов было очень много переходов:

  • Jeneo получил 74 перехода;
  • Wake On Lan получил аж 460 переходов;
  • Fachwerk получил 191 переход;
  • ERDesignerNG получил 49 переходов.

Из этой статистики становится ясно, что твиттер аккаунты были действительно популярными!

Вывод из результатов эксперимента

Результаты эксперимента показали, что посты в твиттер не оказывают эффекта на ускорение индексации веб-страниц, то есть КПД в таких условиях равен 0.

Конечно, следует упомянуть, что при включенном обходе по счетчику страницы бы успешно попали в поиск, так как переходов было много, но ведь спор был именно про индексацию ссылок в твиттер, а не про счетчик Яндекс Метрики.

Твиттер использует сервис сокращения ссылок твиттера t.co (абсолютно для всех ссылок). Достаточно открыть t.co/robots.txt и увидеть там:

User-agent: *
Disallow: /

Данная строчка указывает на полный запрет индексации сайта t.co для всех поисковых машин.

Помимо robots там явно используется запрет для IP-адресов роботов известных поисковых машин. 

Их интерес в том, чтобы не передавать вес из социальной сети на сторонние веб-сайты.

Сейчас для ускорения индексации веб-страниц вашего сайта лучше использовать встроенные инструменты Яндекс Вебмастер и Google Search Console, так как они позволяют загнать страницу в поиск в течение пары часов.

Вывод: Поисковые системы Google и Яндекс не переходят по ссылкам в твиттер, которые автоматически сокращаются при помощи их сервиса.

Записывайтесь на мой курс по SEO, ссылка на который опубликована ниже.

Курс «Как стать seo-специалистом уровня Гуру»

Похожие материалы:


Код функции-контроллера с декоратором
Разрешить только определенные HTTP запросы при помощи require_http_methods в Django
Автор: Алексей Черемных3 января 2021

В Django существует довольно простой способ разрешить только определенные типы HTTP запросов при помощи декоратора представлений require_http_methods.

Для этого необходимо во …

Форма заявки (пример)
Django автоматическое заполнение поля в модели при её создании
Автор: Алексей Черемных10 января 2021

Появилась необходимость заполнить поле с номером заявки до формирования формы, связанной с моделью, но как это сделать? В интернете много способов, …

Код функции
Простой способ в Django блокировать конкретные IP на всем сайте
Автор: Алексей Черемных3 января 2021

На любом сайте приходится блокировать определенные IP адреса. Если таковых нет, это значит только одно - что этим сайтом никто не …

VisualSEOStudio
Бесплатная программа для создания карты сайта
Автор: Алексей Черемных30 ноября 2020

Сегодня не так много бесплатных программ для создания карты сайта. Пара штук, и те работают как не очень. О переводе …

Код
Способ передать варианты выбора choices в forms.ChoiceField из views.py
Автор: Алексей Черемных21 июня 2021

Недавно сам столкнулся с проблемой передачи вариантов выбора для поля формы с типом виджета Radio и типом формы forms.ChoiceField из views.py. Зачем, …

Прогон по каталогам
Есть ли эффект от прогонов по каталогам?
Автор: Алексей Черемных28 ноября 2020

Уже давно разного рода сео специалисты спорят о пользе от прогона по каталогам. Под прогоном имеется в виду рассылка объявлений, …

Все теги:

Подписка на рассылку свежих статей