1. Гость, теперь Вы можете заходить на форум с гаджетов работающих на ОС Android, версии 4.4 и выше, через наше приложение. Приложение доступно по .
    Скрыть объявление
  2. Гость, на данный момент выплаты с форума превысили 16000 долларов! Присоединяйся к нам и начинай зарабатывать!
  3. Подписывайтесь на наш Telegram канал @finforumnet, на нём выходит ещё больше новостей и посты с юмором. Обсуждайте новости и зарабатывайте на этом!
    Скрыть объявление
  4. Гость, любите смотреть фильмы? Зарабатывайте на этом в Конкурсе Киноманов!
    Скрыть объявление

Ускорение индексации страниц сайта

Тема в разделе "SEO оптимизация сайта", создана пользователем Kplay, дек 1, 2015.

  1. Kplay

    Kplay Пользователь Стандартная ставка оплаты

    Регистрация:
    окт 6, 2015
    Сообщения:
    145
    Симпатии:
    43
    Баллы:
    1
    аавв.png
    Многие вебмастера сталкиваются с проблемой долгой индексации страниц своего сайта либо же вообще отсутствием таковой. Мнений на этот счет существует очень много, и в этой статье мы постараемся структурировать актуальную на сегодняшний день информацию в единое руководство.

    Как происходит процесс индексации



    За индексацию новых страниц сайтов (включение их в базу данных поисковика) отвечает, так называемый «краулер». В случае с Яндексом вначале на сайт приходит быстробот, который сканирует новые страницы. После него, через некоторое время, страница индексируется основным ботом системы. Делается это для того, чтобы добавлять в индекс актуальную информацию, но на время.

    Существование аналога яндексовского быстробота у Googleне признано официально. Крупнейшая в мире ПС вообще не очень любит раскрывать свои секреты, и вопросы индексации не являются исключением. При этом сам Google индексирует довольно быстро и в реальном времени (в отличие от яндексовских апов) если сайт обновляется часто.

    В чем может быть причина отсутствия индексации



    В большинстве случаев отсутствие индексации может говорить о проблемах на сайте либо в алгоритмах самого поисковика. Если страницы вашего сайта не попадают в индекс, то причин может быть несколько:

    • Невысокая уникальность контента;
    • Поисковик решил, что страницы не отвечают запросам;
    • Большое количество страниц сайта - робот не заглядывает так глубоко;
    • Отсутствие внятной перелинковки. Поисковый робот движется по ссылкам внутри сайта, и некоторые страницы могут быть просто недоступны;
    • Запрет на индексацию определенных страниц в файле robots.txt.

    Как ускорить страницы сайта



    Если же индексация имеется, но при этом происходит долго, то можно попытаться помочь этому процессу. И вот несколько способов сделать это:

    Частая публикация контента на сайте

    Многие новостные сайты индексируются за минуты, а все потому, что на них контент обновляется очень часто, и поисковые роботы, как говорится, там «гостят». Первым шагом всех тех, кто хочет ускорить индексацию своего сайта, является частая публикация контента. Как часто публиковать контент? В первое время, чтобы приучить робота заходить к вам почаще, можно публиковать по несколько статей в сутки.

    Добавление новых страниц в аддурилки

    У поисковых систем имеется сервис Addurl, также называемый «аддурилкой». Там мы можем указать адрес новой страницы, приглашая поискового робота посетить наш сайт. Как правило, это действие значительно ускоряет индексацию.

    Устроить сканирование

    Способ работает для Google. В инструментах для вебмастеров имеется функция «Просмотреть как Googlebot». Добавляете в них свои страницы, и они очень быстро попадают в индекс. Ограничение – 500 страниц в неделю.

    Привлечение социальных сетей

    Социальные сети – очень трастовые ресурсы. Ссылки с них не помогают в ранжировании, однако по ним постоянно гуляют поисковые роботы для индексации самого актуального контента. Следовательно – если на новую страницу сайта стоят ссылки с социальных сетей, то это может ускорить приход поискового робота. Особенно в этом плане выделяется Twitter. Опыт вебмастеров показывает, что его очень сильно любит робот Google.

    Естественно, расставлять ссылки собственноручно очень непросто. И тут можно воспользоваться двумя инструментами:

    • Плагин, позволяющий осуществлять кросспостинг в аккаунты сайта на соцсетях;
    • Сервисы вроде http://indexgator.com, которые за скромные деньги проставят на вашу страницу большое количество ссылок с социалок. Сейчас таких сервисов очень много.
     
  2. Жардо

    Жардо Постоянный участник Стандартная ставка оплаты

    Регистрация:
    дек 9, 2015
    Сообщения:
    197
    Симпатии:
    27
    Баллы:
    1
    В целом достаточно планомерно обновлять сайт, если каждый день в какое-то время с разницей в пару часов у вас будет публиковаться контент, то он часто будет захаживать. Отсюда и фокус с новостниками.
    А использовать какие-либо инструменты под гугл даже не думайте. Это не имеет никакого смысла, так как в любом случае гугл моментально индексирует сайты. Вам достаточно для первого раза купить несколько твитов на главную и внутренние страницы с популярных страниц, и считай через пару минут уже страница в индексе.
     
  3. monahyip

    monahyip Старожила Стандартная ставка оплаты

    Регистрация:
    дек 7, 2015
    Сообщения:
    694
    Симпатии:
    75
    Баллы:
    6
    1) добавляю в гугл+
    2) добавляю в группу фейсбук.
    Также на некоторых ВП-сайтах стоят пинг-сервисы. Новые сайты через пару дней попадают, а на старых - новые статьи за пару часов кушаются гуглом (яндексом дольше)
     
  4. hidrotechnik

    hidrotechnik Постоянный участник Стандартная ставка оплаты

    Регистрация:
    фев 24, 2016
    Сообщения:
    338
    Симпатии:
    226
    Баллы:
    6
    Для того чтобы поисковики быстро индексировали страницы сайта необходимо чтобы поисковые роботы имели к ним доступ. Так что этот момент надо учитывать в первую очередь. Правильная внутренняя перелинковка страниц и присутствие карты сайта тоже значительно повышают скорость индексации сайта. И самым важным фактором индексации страниц сайта является качество контента. Если контент низкого качества, то ожидания могут оказаться напрасными.
     
  5. Arkad

    Arkad Завсегдатай форума Стандартная ставка оплаты

    Регистрация:
    ноя 3, 2015
    Сообщения:
    10,693
    Симпатии:
    3,903
    Баллы:
    35
    Насколько помню, в админ интерфейс большинства движков встроена возможность выбора частоты посещения поисковыми роботами сайта. Правда не в курсе, работает ли это. Насчет уникальности контента было упомянуто, считаю, что это главный фактора скорой индексации страницы, гуглом точно, яндекс может как всегда тупить. При добавлении статьи на сайт, добавляйте ссылки на нее в социалки, особенно в твиттер. Если не будете регулярно обновлять контент сайта, то при любых раскладах поисковые роботы будут посещать его не часто. Ну и все это конечно же работает только для СДЛ.
     
  6. SvetJlaya

    SvetJlaya Постоянный участник Стандартная ставка оплаты

    Регистрация:
    мар 11, 2018
    Сообщения:
    190
    Симпатии:
    37
    Баллы:
    1
    А вот вопрос такой, регистрировать свой сайт есть смысл для индексации поисковиками? Или если у тебя платный хостинг - индексация сайта и так, без регистрации начнет работать? Просто я не знаю, есть ли между этим какая - то разница.
     
  7. Yurbol

    Yurbol Пользователь Стандартная ставка оплаты

    Регистрация:
    апр 5, 2018
    Сообщения:
    60
    Симпатии:
    3
    Баллы:
    0
    Постоянное обновление контента, добавления страниц в адурилку Гугл и Яндекс, плюс прогон по твитеру, и даже копипаст будет влетать в течении пары минут Яндекс, и пары секунд в Гугл. Правда после добавления адреса в адурилку Гугла, страницы и так влетают мгновенно.
     
  8. Andy086

    Andy086 Пользователь Стандартная ставка оплаты

    Регистрация:
    июл 2, 2018
    Сообщения:
    32
    Симпатии:
    1
    Баллы:
    0
    А есть бесплатные сервисы, такие как вы описали?
     
  9. Arkad

    Arkad Завсегдатай форума Стандартная ставка оплаты

    Регистрация:
    ноя 3, 2015
    Сообщения:
    10,693
    Симпатии:
    3,903
    Баллы:
    35
    Andy086, а зачем нужны бесплатные сервисы по разбрасыванию ссылок по инету? Это не ускорит индексацию страниц сайта, к тому же, большинство из них в скором времени отвалятся. Регулярно пишите уникальные интересные тематические статьи, добавляйте их на сайт и поисковики будут четко добавлять страницы с таким контентом в индекс.
     
    SvetJlaya нравится это.
  10. Cryptomancer

    Cryptomancer Постоянный участник Стандартная ставка оплаты

    Регистрация:
    мар 1, 2018
    Сообщения:
    244
    Симпатии:
    45
    Баллы:
    2
    От бесплатного спама ссылок на ваш ресурс где только можно, только чтобы было толку будет ну очень мало
     
  11. Andy086

    Andy086 Пользователь Стандартная ставка оплаты

    Регистрация:
    июл 2, 2018
    Сообщения:
    32
    Симпатии:
    1
    Баллы:
    0
    все равно не против узнать ссылочку :)
     
  12. Cryptomancer

    Cryptomancer Постоянный участник Стандартная ставка оплаты

    Регистрация:
    мар 1, 2018
    Сообщения:
    244
    Симпатии:
    45
    Баллы:
    2
    Это не ко мне, к сожалению, но часто вижу на многих форумах откровенный спам неуместными ссылками, другой раз сомневаешься, человеческих ли рук это дело, или бот какой нибудь
     
  13. Andy086

    Andy086 Пользователь Стандартная ставка оплаты

    Регистрация:
    июл 2, 2018
    Сообщения:
    32
    Симпатии:
    1
    Баллы:
    0
    жаль, спасибо все равно.
     
  14. monahyip

    monahyip Старожила Стандартная ставка оплаты

    Регистрация:
    дек 7, 2015
    Сообщения:
    694
    Симпатии:
    75
    Баллы:
    6
    Буквально на днях проверил опять схему: просто загнать ссылки в твитер. Но до этого оптимизировать сайт.
    Итог - сайту меньше недели, в индексе больше 16 тисяч записей. Все посты. Индекс - на 2 день после добавлялки в твитер.
    Это по яндексу, по гуглу постепенно все идет. Сначала 300-500, на следующий день около 1000 страниц.
     
  15. Mamikon

    Mamikon Матёрый юзер Стандартная ставка оплаты

    Регистрация:
    окт 23, 2015
    Сообщения:
    2,448
    Симпатии:
    317
    Баллы:
    30
    Социальные сети реально помогают. Особенно твиттер. С его помощью страницы быстро попадают в индекс. Гугл+ тоже хорош. У него еще бэклинки в вебмастере яндекса появляются с тицом 150К. Googlebot-ом тоже пользовался.
    Тут еще многое зависит от того, насколько часто информация на сайте обновляется.
     
  16. monahyip

    monahyip Старожила Стандартная ставка оплаты

    Регистрация:
    дек 7, 2015
    Сообщения:
    694
    Симпатии:
    75
    Баллы:
    6
    гугл еще не пробовал, а твитер реально тема.
    Я настроил сайт на вордпресс, весь контент - это 20 тыс страниц копипаста, обьем одной страницы - 200-500 символов текста.
    Сразу спарсил все ссылки и через автопостер загнал в твитер (получилось всего 200 штук загнать, потом апи блокнул, но рассказ не об этом). Сайт проиндексировался полностью через 5 дней, первые страницы появились на 2 день (около 2500 страниц).
     
  17. FiredFraud

    FiredFraud Пользователь Стандартная ставка оплаты

    Регистрация:
    июн 20, 2018
    Сообщения:
    27
    Симпатии:
    1
    Баллы:
    0
    Ранее неплохой прирост индексации давал Твиттер. Заводили целые фермы ботов, которые постили ссылки на сайты. Кто знает как сейчас обстоят дела с твиттером? Ускоряет ли он индексацию?
     
  18. Mamikon

    Mamikon Матёрый юзер Стандартная ставка оплаты

    Регистрация:
    окт 23, 2015
    Сообщения:
    2,448
    Симпатии:
    317
    Баллы:
    30
    Гугл, в первую очередь, при индексации, обращает внимание на ссылки на новую страницу, а потом на сайтмап. Социальные сигналы играют большую роль в быстрой индексации.
     
  19. monahyip

    monahyip Старожила Стандартная ставка оплаты

    Регистрация:
    дек 7, 2015
    Сообщения:
    694
    Симпатии:
    75
    Баллы:
    6
    у меня сейчас настроен автопостинг в твитер и фейсбук, вчера статья за 2-3 часа после публикации уже была в индексе и пошли первые посетители.
     
  20. FiredFraud

    FiredFraud Пользователь Стандартная ставка оплаты

    Регистрация:
    июн 20, 2018
    Сообщения:
    27
    Симпатии:
    1
    Баллы:
    0
    Понял, спасибо. А у вас именно твиттер ферма или просто один аккаунт? Помню раньше ещё фермами можно было в топы пробиваться. Как сейчас обстоят дела, не в курсе?