как ускорить индексацию вашего сайта поисковыми системами
Как ускорить индексацию вашего сайта поисковыми системами
Как ускорить индексацию вашего сайта поисковыми системами
Сегодня рассмотрим, как ускорить индексацию вашего сайта поисковыми системами. Вопрос актуален, если вы хотите продвигать блог в поисковых системах, чтобы статьи вашего блога находились в ТОП-10 выдачи и приносили вам новых посетителей.
Чтобы это было не просто «хотением», а реальностью, нужно работать над индексацией сайта.
Что это вообще такое?
Если объяснять простым языком, то у поисковых систем есть своя база данных, куда они заносят страницы сайтов в Интернете. Логично, чтобы выводить результаты поиска, нужна база страниц, среди которых искать, верно? Так вот, индексация сайта – это процесс занесения страниц вашего блога в базу поисковых систем.
1. Страницы вашего сайта будут быстрее появляться в ТОПе выдачи поисковых систем
Ну здесь, думаю, все логично: чем раньше окажется новая страница в поисковой базе, тем быстрее она сможет занять хорошие позиции. Если вашей страницы нет в индексе поисковиков, значит они о ней не знают, следовательно, продвигать её не смогут.
2. Ваш сайт будет лучше защищен от воровства материалов
Ох, как часто это происходит. Объясню. Поисковики очень не любят, когда на сайте появляется копированный текст. За это они могут ваш сайт наказать. Вывод напрашивается сам собой: пишите только сами, не копируйте текст с других сайтов!
Но бывает и другая ситуация. К примеру, у вас молодой блог. Вы пишете сами статьи, стараетесь, ничего ни у кого не копируете. Но вот проблемка: индексируются статьи вашего блога долго. Это замечает какой-то хитрый автор, у которого есть уже блог постарше вашего и на котором индексация налажена на «ура». Он берет, копирует вашу уникальную статью и размещает у себя на блоге или сайте.
Что получается: индексация у его сайта хорошая, ваша статья на его блоге быстро попадает в поисковую базу, и засчитывается как статья ЕГО блога, а не вашего! Когда, наконец, поисковики доходят через время до вашего блога и видят эту же самую статью, то вы вдруг оказываетесь копипастером, который взял и слямзил с «того» сайта статью.
И тут уже никому ничего не докажешь. Поисковики – не люди, там все построено на алгоритмах: у кого статья первая проиндексировалась, тот и владелец.
И вот представьте: автор молодого блога может писать статьи и не знать, что другой сразу их копирует и они присуждаются как статьи вообще чужого сайта.
А автор все пишет, пишет и думает: « Почему у меня ни позиций нет, ни посещаемости? ».
Вот такие вот дела. И чтобы не допустить такого на вашем блоге, даю ряд шагов, как ускорить индексацию вашего сайта.
Правильные шаги оптимизации сайта
Шаг № 1. Добавьте ваш блог в сервисы для вебмастеров
Для Яндекса это сервис «Яндекс.Вебмастер». Вам нужно либо зарегистрироваться, либо зайти под своим логином и паролем, если у вас есть уже аккаунт на Яндексе.
Далее нужно добавить в этот сервис свой сайт через специальную форму.
После добавления адреса вам нужно будет подтвердить права на его владение, а именно скачав специальный файл от сервиса и разместив его в папке с вашим сайтом на хостинге. В самом сервисе приводится подробное объяснение, думаю, разберетесь.
Для Google это сервис «Инструменты для Вебмастеров». Почти все то же самое. Регистрируетесь или входите через аккаунт Google, если он у вас есть, добавляете сайт и подтверждаете права на него.
Добавление блога в эти сервисы сообщает поисковикам, что у вас есть сайт и пора обратить на него внимание
Также вы сможете увидеть, сколько страниц попало в индекс, сколько не попало, что это за страницы, какие ошибки были при сканировании, ну и еще много полезной информации.
Шаг № 2. Создание файла Sitemap.xml
Так называемая карта сайта. Для этого существуют специальные плагины, которые автоматически такую карту генерируют. Например, если блог на MaxSite CMS, обычно используют стандартный плагин «xml_sitemap».
Если у вас блог на каком-то другом движке, то набираете в поисковики «плагин для генерации sitemap для X», где вместо X поставить название вашего движка. Уверен, что-то обязательно найдете.
Если вы все установите правильно, то по адресу вашсайт.ru/sitemap.xml появится карта сайта. Ну бывают исключения, в зависимости от движка, что адрес карты сайта другой, но, в основном, так.
Шаг № 3. Добавление файла Sitemap в сервисы для вебмастеров
В сервисах, о которых мы говорили выше, есть возможность добавить адрес карты Sitemap вашего сайта.
В сервисе Яндекса нужно выбрать в левом меню «Настройки индексирования» — «Файлы Sitemap» — «Добавить».
В сервисе от Google выбрать в левом меню «Сканирование» — «Файлы Sitemap» — «Добавить».
В файле Sitemap приведены все (или почти все) страницы вашего блога, поэтому, когда поисковики загрузят данный файл к себе, то ваш сайт проиндексируется довольно быстро.
Шаг № 4. Делаем ссылку в меню блога «Архив статей»
По умолчанию, такая ссылка есть на любом блоге, поэтому просто её не убирайте. По сути, это та же карта сайта, только в привычном для нашего глаза формате
Это тоже позволит поисковикам довольно быстро индексировать ваш блог.
Шаг № 5. Сделайте RSS ленту вашего блога и добавьте её в каталоги RSS
Для создания RSS с возможностью подписки на новости рекомендую воспользоваться сервисом FeedBurner от Google.
После настройки RSS ленты желательно добавить её адрес в каталоги RSS. Где искать эти каталоги? Да очень просто, вбиваете в поисковике «добавить RSS» или «RSS каталог» и добавляете туда свою ленту
Еще один вам плюс к быстрой индексации сайта, так как на RSS каталоги частенько посещают поисковые роботы.
Шаг № 6. Поставьте везде в соц.аккаунтах ссылку на ваш блог
По любому, вы где-то зарегистрированы: Вконтакте, Facebook, Google+, Twitter, Одноклассники и т.п. Так вот, везде есть поле «Сайт», куда нужно добавить свой сайт.
Если у вас несколько аккаунтов в разных соц.сетях, то нужно написать адрес вашего сайта в каждый из них. На сайтах соц.сетей поисковые роботы буквально живут. Поэтому, все что туда попадает, довольно быстро индексируется.
Шаг № 7. Добавляйте адрес вашего блога везде, где только можно
Я не имею в виду специально спамить все попавшие под руку каталоги и сайты. Но возьмите за правило: если вы где-то регистрируетесь и видите поле «Сайт», которое можно заполнить, то это поле не должно остаться пустым.
Регистрируетесь где-то, – укажите сайт, оставляете комментарий на каком-то блоге – там тоже это поле есть. Чем больше адрес вашего сайта светится по Интернету, тем лучше индексация вашего сайта.
Но это еще не все. Здесь я рассказал вам, по сути, разовые способы, которые один раз настроил и они работают. Данные способы помогают заявить о вашем сайте поисковым системам, чтобы они начали его индексировать ну и ускорить индексацию вашего блога в целом в несколько раз.
Но, чтобы добиться действительно быстрой индексации ваших статей, нужно выполнять определенные ритуалы при добавлении каждой статьи.
Например, данные ритуалы помогают загнать страницу в индекс Яндекса и Google в течение 1 дня после её выпуска, порой даже быстрее.
Рекомендации он агентства Папусь Ивана, как в Yandex и Google ускорить индексацию сайта
Для эффективной работы веб-сайта важно применять различные методики в его продвижении. В данной статье рассмотрим способы ускорения индекса веб-страниц в ПС. Чем быстрее происходит этот процесс, тем быстрее ссылка компании окажется в ТОП-10 и они станут доступны пользователям, и портал скорее всего, будет обозначен источником вашего веб-контента.
От рационализации и объема, зависит как быстро роботы просканируют его, следовательно, он окажется в поиск-выдаче, к сожалению, невозможно определить точно, когда это случиться.
Существуют следующие проблемы, возникающие со сканированием.
Если Гугл и Yandex не сканируют веб сайт, убедитесь, что вы верно соблюдаете нормы индексации ПС.
В поисковую выдачу попадут только часто обновляемые трастовые сайты. Те, которые внушают доверие, Яндекс-ботами они сканируются ежедневно.
Регулярно проверяются живые форумы с актуальными новостями. Все зависит от категории веб-сайта, третьесортные или молодые веб-странички, могут игнорироваться в течение месяца.
Страница долго проверяется.
Существует много причин, почему приходится долго ожидать сканирования:
При исследовании сайта, можно увидеть фильтры и все изменения индексирования.
Пример индексации ПС и санкций.
Если ваши показатели по всем фильтрам анализа, указывают на медленную проверку, тогда постарайтесь ускорить процесс индексации.
Как сделать индексацию максимально быстрой?
Представитель от Гугл, Джон Мюллер, прокомментировал проблему сканирования следующим образом:
“Для улучшения процесса нужно создавать убедительный и непохожий на другой контент. Именно такой, интересный сайт будут рекомендовать посетители друг другу и увеличится посещаемость. Важно учитывать, что абсолютно все в Интернет, не обязательно индексируется системами.”
Поэтому сразу создавайте незаурядный контент. Давайте рассмотрим варианты, что возможно предпринять, чтобы ускорить процесс.
Как говорят специалисты, даже если вы закрываете проверку в robots.txt, это не означает, что удастся уберечь страницы от сканирования. Это обусловлено тем, что строгого запрета на скан нет, они просто воспринимают это, как рекомендацию.
В любом случае, сделайте проверку robots files, на наличие/отсутствие запретов и возможно мета-боты учтут ваше пожелание.
Создание Карты сайта
Такое решение помогает ботам поисковиков, понять всю систему и находить качественные стороны сайта.
Ускорить сканирование поможет динамичная карта. Она будет самостоятельно обновляться, с созданием новых страничек.
Для проектов, таких, например, как «Tilda» блочный конструктор сайтов, не требуются навыки программирования и применяется также «WIX-конструктор», здесь карта создана уже сразу динамичной. Для остальных CMS существуют свои проги, спец сервисы и плагины. Например, “All in One SEO-Pack”, способен проработать все ошибки и задачи WordPress.
Для новостей, фотографий и видео, сделайте отдельные карты, если у вас достаточно много материала, это будет актуально.
Поисковым роботам будет проще найти сегментированный контент, тогда как с помощью обычных скан-методов его найти будет сложнее. Например, загрузить через JavaScript. Это актуально для больших Web-сайтов, которые подразделяются на категории и разделы.
Если у вас большой объем карты, свыше 50 Мегабайт или 40 000 страниц, создайте необходимое количество карт. Все они размещаются на одном индексе, там будут находиться созданные ссылки с XML-files. Файл Sitemap, возможно обновить вручную.
В Гугл рекомендуется обновление с помощью тега на Карте. Отправляйте файлы одним отчетом. Не загружайте один и тот же file многократно, так как без изменений ничего нового не произойдет.
Как запустить перелинковку всех разделов, отсканировать структуру?
Учтите, что на портале должны отсутствовать несовместимые странички, которые не задействуются в перелинковке. Независимые друг от друга страницы, усложняют работу. Поисковым системам некуда переходить для сканирования и сложнее обозначить актуальность. Подобные веб-страницы обычно именуют “сиротами”.
Пример, как выглядит страница «сирота» в конструкции сайта.
Ниже показано, что у каждой страницы есть родительские ссылки. Их необходимо выстроить в общую цепочку, тогда они хорошо будут линковаться друг с другом.
Демонстрация того, что для меню лучше подходит упрощенный вариант.
«Click Distance from Index» воздействует на поведение робота. Учитывается количественный показатель кликов от исходной до текущей страницы. И чем показатель ниже, тем весомее воспринимается страничка и выше ее приоритет. Робот смотрит ее, как правило, самой первой.
Отметим, DFI не выявляется по числу УРЛ-директорий, так как они могут не совпадать.
Пример. ТОП-товар, определенная модель телефонов, будет находиться на главной странице, тогда DFI-показатель составит отметку 2. Таким образом, карточка данной модели будет размещаться в подразделе или в самом каталоге. Так директории, соответственно увеличатся.
Когда страничка не проходит индексацию, обязательно проверьте во всей сайт-структуре ее местонахождение. Это касается и количества кликов от главной страницы до последующих.
Старайтесь как можно чаще наполнять контент и делать новые публикации.
Если на вашем портале нет никаких изменений, поисковики просто не заходят. Только с появлением свежего контента и регулярно, есть вероятность. что роботы будут чаще заходить на ресурс.
Можно предпринять следующее шаги для ускорения индексации:
Особого внимания заслуживают социальные сети.
Какие действия предпринять?
Добавлять ссылки в профиль не достаточно. Чтобы робот заинтересовался, нужна популярность. А именно:
Рейтинг соцсетей по скорости скана ссылок:
Как ускорить загрузку?
Чтобы повысить скорость индексации, нужно провести ряд комплексных работ. Оптимизируйте минификацию кода, используя нужные сжатия, добавьте изображения и полезный контент.
Как правило, проверка и анализ осуществляются автоматическими программами, выносится вердикт по направлениям, которые нужно доработать и вывести сайт на должный уровень.
Долгий ответ от сервера, является причиной ограничения скорости. Джон Мюллер из компании Гугл, заявляет, что Google не будет сканировать вашу платформу, если задержка будет больше двух секунд. Либо обработает меньшее число ссылок, чем мог бы.
В чем вред от медленной загрузки:
Ниже приведен пример, как выглядит проверка и оценка веб-сайта. Это лишь фрагмент, но можно увидеть какие параметры учитываются при анализе.
Конечно, это далеко не полный перечень SMM и SEO-инструментов, которые задействует наша команда.
Что способно еще повлиять на индексацию?
Ждать, что само решиться или действовать?
Когда вы обнаружили проблемы в работе сайта, не стоит мешкать, процесс сканирования требует постоянного внимания и немедленного решения всех недочетов.
Отправляйте заявку в нашу компанию и мы подберем подходящий вариант для решения любого, даже самого сложного вопроса.
Как ускорить индексацию сайта: 5 способов на все случаи жизни
Все способы подходят для Яндекса и Google, проверены и работают в 2020 году
Всем хочется, чтобы опубликованные страницы мгновенно попадали в индекс и сразу же приводили посетителей.
Если вы хотите, чтобы новые страницы сайта побыстрее стали доступны в выдаче, следуйте нашим советам.
Почему не индексируется сайт
Проблемы с индексацией сайта бывают трех типов:
Узнайте, какие именно страницы проиндексированы Яндексом и Google. В помощь — специальный инструмент от PromoPult. После этого вы сможете оценить характер и масштаб проблемы. Подробная инструкция — здесь.
Последние две проблемы устраняются или очень легко (если нужно просто разрешить индексацию страниц) или очень долго (если придется выводить сайт из-под санкций Яндекса или Google). В этой же статье рассмотрим именно способы ускорения индексации.
Давайте разберем способы ускорения индексирования сайта поисковиками.
1. Улучшите внутреннюю SEO-оптимизацию
Начните с сайта. Проблемы с внутренней оптимизацией могут усложнить индексацию.
Проверьте файл robots.txt
Найти ошибки в robots.txt можно в Яндекс.Вебмастере в разделе Инструменты / Анализ robots.txt:
В разделе можно проанализировать текущую и предыдущие версии файла, инструмент покажет ошибки. Здесь же можно скачать файл для того, чтобы отредактировать:
В этом же разделе есть функционал для проверки доступности для индексации отдельных URL — просто укажите интересующий URL в поле «Разрешены ли URL?», нажмите «Проверить», и система выдаст ответ.
Создайте sitemap.xml
Этот файл содержит ссылки на все страницы сайта и помогает поисковикам сориентироваться в его структуре. Если появляются новые страницы, они попадают в sitemap.xml, и роботы их быстрее находят.
После создания sitemap.xml пропишите в robots.txt строку для указания роботу пути к файлу:
Также укажите путь в панелях для вебмастеров:
Чтобы не обновлять файл вручную после появления новых страниц, используйте динамический sitemap.xml. Он настраивается с помощью плагинов (например, один из популярных для WordPress – All in One SEO Pack) или средствами PHP. Динамический файл sitemap.xml создается каждый раз перед обращением робота (а значит, всегда актуален).
Добавьте HTML карту сайта
Создайте отдельную страницу, с которой будут идти ссылки на все значимые страницы ресурса. Это полезно не только для посетителей, но и для индексации роботами, а также является одним из способов перелинковки.
Интересно, что этот способ утратил свою актуальность для Google: представители поисковика советуют лучше прорабатывать структуру сайта, тогда надобность в HTML карте отпадет. Но от Яндекса подобных заявлений пока не было, так что создавайте по принципу «хуже не будет». Тем более делается это буквально за несколько минут штатными средствами CMS или при помощи специальных плагинов.
Важно! HTML и XML-карта — не одно и то же. HTML-карта располагается на сайте, ее видят пользователи. XML-карта нужна только поисковикам, пользователи ее не видят.
Проверьте ответы сервера
Сервер при обращении поискового робота должен отдавать код 200 (если страница существует) и код 404 (если страницы не существует). Кроме того, время ответа не должно превышать 1,5-2 с — в противном случае робот может не дождаться и покинуть сайт.
Проверить ответ сервера можно в Яндекс.Вебмастере в разделе Инструменты / Проверка ответа сервера.
Подробно о кодах ответа сервера мы рассказывали в этой статье.
Поработайте над внутренней перелинковкой
Чтобы поисковый бот понял, что на новую страницу стоит зайти, поставьте ссылки на нее с уже проиндексированных страниц. Контент, в котором находится ссылка (ссылочное окружение) должен быть близким по тематике:
Лучше всего работают ссылки с главной и других посещаемых страниц сайта, поэтому разместите на них линки на новые статьи или товары.
В блогах добавьте похожие записи (в конце статей) и популярные или новые записи (в сайдбаре).
В интернет-магазинах – блоки рекомендуемых товаров или комплектующих/аксессуаров:
Следите за уровнем вложенности
Как быстро робот доберется до нового url, зависит в том числе от его уровня вложенности. Идеальный вариант – не более трех кликов от главной. Страницы на 5, 6 и далее уровнях индексируются хуже.
Хотите научиться расставлять внутренние ссылки так, чтобы улучшить поведенческие показатели и позиции в поиске? В статье «Как сделать перелинковку для успешного SEO и роста конверсий» описаны все самые эффективные подходы.
Пишите полезные и уникальные тексты
Если вы размещаете плагиат или поверхностный рерайт, то не удивляйтесь, что страницы не попадают в индекс. Поисковики считают такой контент дублирующимся и не несущим ценности для пользователей. О том, какими должны быть грамотно оптимизированные тексты для сайта, читайте здесь.
Чаще публикуйте записи и обновляйте страницы
Поисковики любят «живые» сайты. Если несколько месяцев ничего не размещали, то робот перестает регулярно посещать сайт.
Как поддерживать актуальность сайта:
Устраните дубли на сайте
Дубли создают не только неудобства для вебмастеров, но и ухудшают качество сайта в глазах поисковиков. Они могут быть:
Устраняются они путем настройки 301 редиректа, указания канонических страниц, с помощью robots.txt. Все способы с примерами описаны в статье «Что такое дубли на сайте и как с ними бороться?».
2. Используйте инструменты для вебмастеров
После запуска сайта обязательно зарегистрируйте его в панелях для вебмастеров: в Яндекс.Вебмастере и Google Search Console. Так вы сообщите поисковикам о появлении нового сайта, сможете отслеживать динамику индексации, будете получать уведомления об ошибках.
После создания новой страницы или обновления старой необходимо уведомить об этом поисковики, чтобы ускорить индексацию (переиндексацию). Делается это с помощью так называемых «аддурилок» (от англ. «add URL» — «добавить URL»).
В Яндексе этот инструмент находится в Вебмастере (раздел Индексирование / Переобход страниц). Введите новый URL и нажмите «Отправить».
В Google Search Console после обновления интерфейса в 2018 году как таковой «аддурилки» нет. Но можно воспользоваться функцией проверки URL:
Вбиваете новый URL, получаете данные о его статусе и нажимаете «Запросить индексирование». Таким же способом можно отправлять на переобход гуглобота страницы с внесенными изменениями:
Эти действия — не гарантия попадания страницы в индекс или ускорения процесса (сами же поисковики ничего не обещают). Но поскольку такие инструменты есть, ими грех не воспользоваться.
3. Добавьте сайт в RSS-каналы, каталоги, рейтинги и соцсети
Каталоги и рейтинги хорошо индексируются поисковыми системами, и если в них будут ссылки на ваш сайт, то повысится вероятность быстрой индексации.
RSS-агрегаторы уходят в прошлое. Из тех, что еще работают в 2020-м году, отметим:
Добавить блог можно в такие каталоги:
Нелишним будет добавить сайт в бесплатные рейтинги:
Здесь важно серьезно подойти к отбору площадок, на которых регистрируете свой ресурс. Обходите стороной заспамленные «братские могилы» сайтов. Обращайте внимание на посещаемость, траст и ИКС. Отдавайте предпочтение тематическим каталогам и рейтингам а также тем, которые принадлежат к региону, в котором вы продвигаетесь.
Также для ускорения индексации советуем разместить ссылку на новую запись в соцсетях – в своих и тематических группах. Для России особенно важны ВКонтакте и Одноклассники, для продвижения на западных рынках – Twitter и Facebook.
Еще один канал для привлечения дополнительного трафика на новые материалы – Яндекс.Дзен. Трансляция публикаций в канале с хорошей посещаемостью обеспечит переходы и поспособствует быстрому добавлению страницы в индекс.
Для новостных сайтов актуальна работа с быстровыдачей Яндекса, которая формируется по актуальным на данный момент запросам. Для этого нужно подключить сайт ко всем доступным агрегаторам новостей, транслировать свежие статьи в соцсетях. Кроме этого, нужно использовать актуальные ключевые слова в заголовках и избегать кликбейта. Пользователь должен находить ценность в материале. Высокий процент отказов подскажет Яндексу о низком качестве источника. В этом случае путь к высоким местам в быстровыдаче будет закрыт.
4. Используйте пинг-сервисы
С помощью пинг-сервисов вы уведомляете поисковые системы о появлении новых страниц на сайте. В интернете можно найти громадные списки пинг-сервисов, и многие используют сразу все. Это ошибка. В данном случае принцип «чем больше, тем лучше» не работает. Достаточно 5-7 сервисов:
Пример списка пинг-сервисов для блога на WordPress
Практика показывает, что использование пинг-сервисов ускоряет индексацию — особенно это заметно в случае с молодыми сайтами, которым меньше 6 месяцев.
5. Нарабатывайте «сильные» ссылки
Чем больше будет ссылок на ваш ресурс с авторитетных площадок, тем лучше. Это повысит значимость сайта в глазах поисковиков. Проблема в том, что на «добычу» естественных ссылок нужны годы.
Ускорить процесс можно, сотрудничая напрямую с вебмастерами с целью интеграции ссылок на трастовых ресурсах. Найти релевантные площадки можно с помощью модуля PromoPult «Естественные ссылки» — достаточно добавить сайт, и система самостоятельно подберет ключи, посадочные страницы и внешние ресурсы.
Если у вас возникнут вопросы, то всегда можно воспользоваться услугой «Персональный менеджер» — специалист проведет аудит сайта, будет регулярно высылать рекомендации по его улучшению и отвечать на возникающие вопросы.