Как увеличить скорость индексирования новостей сайта

Для ускорения индексирования новых материалов поисковой системой Google не требуется особого мастерства и времени, достаточно просто создать Twitter-аккуант, набрать там 2000-5000 тысяч подписчиков, и установить скрипт авто-постинга в DLE-шаблон (движок DLE до сих пор поддерживается и является, как ни странно, оптимальным вариантом для новостных сайтов). После чего останется только ретвитить новости в свой аккуант. Ко всему прочему, следует зарегистрировать сайт в Google Search Console, что значительно увеличит скорость индексации. Для поисковой системы Google этого будет более чем достаточно, а вот с Яндекс-поисковиком, придётся повозиться.

Как увеличить скорость индексирования новостей сайта в Яндексе

Последнее время поисковые роботы Яндекс довольно сильно "обленились", они почти не индексируют содержание всех социальных сетей — лень им по чужому СПАМу лазить. Если ранее добавив ссылку на новую тему в Twitter или прогнав её по социальным закладкам, можно было быть уверенным в её быстрой индексации, то сейчас это почти не приносит никакойвыгоды. И у нас смертных остаётся только возможность пользования Яндекс-сервисами.

Действенней всего, в первую очередь, зарегистрировать сайт в Яндекс.Вебмастере (по аналогии с Google), а также создать как минимум с десяток немного раскрученных Яндекс-аккуантов (получить Яндекс.Паспорт) и подписаться всеми ими на RSS-канал сайта. Причем, подписаться именно на RSS-ленту сайта. Для этого, после получения Яндекс.Паспорта зайдите на вкладку Яндекс.Новости, нажмите в правом верхнем углу иконку шестерёнки и добавьте приоритетный источник получения новостей. Не забудьте в аккуанте Яндекса добавить информацию о себе, загрузить аватар и подписаться на несколько рассылок. В этом случае ваш аккуант, даже оставленный в "автономке" проживёт намного дольше, чем если просто завести почтовый ящик.

Впрочем, это всего-лишь самые основные вещи для ускорения индексации. Естественно, что время от времени вам придётся добавлять новые учетные записи в Яндексе, но это не так и сложно — дело трёх минут.
Кроме того, добавьте ту же RSS-ленту во все известные RSS-каталоги. Это не только ускорит индексацию новых новостей и статей, но возможно поднимет тИЦ сайта. Хотя, конечно, ни тИЦа, ни ускорения индексации большинство этих каталогов недадут, поскольку они сами индексируются через пень колодой. Также не стоит забывать про использование пинг-серверов и устранение дублей, на этом подробнее останавливаться не будем. 

Как увеличить скорость индексирования новостей сайта

Для увеличения скорости индексирования новостей, мало просто препроводить робота на главную страницу сайта, нужно чтобы он с неё не сбежал.

1. Закройте все внешние и внутренние ссылки в теги nofollow и noindex.
2. Модули меню, архивы, теги, популярное и т.д. также рекомендую спрятать в noindex.

Если быть совсем прагматичным, то скройте всё, кроме самих постов, а на всех внутренних страницах, с помощью вмешательства в шаблон, добавьте ссылку на главную страницу сайта (если, конечно, свежие материалы у вас публикуются именно там).

И, естественно, почаще заходите на сайт и модерируйте добавленные пользователями (постерами и журналистами) материалы.
Да и посмотрите на исходник кода, в метатеге <meta name="revisit-after" content="1 days" />, вдруг там стоит не 1, а 3 или 7.
Для прапорщиков — этот метатег сообщает ПСам (поисковым роботам), как часто обновляется сайт. Хотя, конечно, поисковики давно забили на этот метатег, но чем черт не балует. Плюс, не забывайте обновлять xml карту сайта, благо это делается нажатием одной кнопки в административной панели или установкой модуля, который будет её обновлять автоматически. Их в сети много.