Как ускорить индексацию сайта в google и яндекс! 15 полезных советов!

Всем привет! Раньше, когда я писал статьи, то замечал, что после добавления в блог они слишком долго индексируются поисковыми системами Яндекс, Google, Rambler и т.д.

Напишешь статью, а в выдаче она появляется только через 1-2 дня. Это, на самом деле очень долго и говорит о том, что с блогом что-то не так! Набравшись опыта, изучив кучу различной информации в интернете и применив полученные знания на практике, теперь мои новенькие, свеженькие статьи в блоге индексируются поисковыми системами после публикации в течение 5-30 минут!

Чтобы помочь и вам ускорить индексацию сайта (блога), я решил написать подробнейшую статью на эту тему. Давайте сначала, как обычно, для новичков. Что такое индексация сайта и что такое выдача?

Индексация сайта — это процесс прихода на ваш сайт или блог поисковыми роботами Google, Яндекс и т.д., который сканирует ваш новый добавленный контент на сайт (блог) и добавляет его в свою индексную базу. То есть теперь, ваша статья будет выдаваться в выдаче поисковых систем.

Выдача думаю понятно что это такое. Зашли вы в любой поисковик, набрали какую-то фразу, нажали «поиск» и он вам выдает список различных сайтов, где имеется информация по вашему запросу. Вы запросили, вам выдали.

Почему индексация сайта так важна?

Во-первых, ваши новые статьи будут быстрее заноситься в индексную базу и появляться в выдаче поисковых систем. Соответственно увеличение трафика на сайт пойдет быстрее.

Во-вторых, если вы будете продавать ссылки с сайта допустим на бирже Gogetlinks, то индексация сайта там играет очень важную роль. Если ссылка на вашем сайте (блоге) после продажи не успеет проиндексироваться в течение определенного времени, то денег вы не заработаете, деньги вернутся обратно человеку, который заказал у вас размещение ссылки!

Кто не понимает о чем я говорю, имеется в виду, что такое продажа ссылок, то почитайте вот эту статью — «Как заработать на ссылках». Так же вебмастера при покупке ссылок обращают внимание на индексацию тех сайтов, на которых они покупают ссылки, если индексация плохая, то это уже минус...

На картинке вы видите, что сайт в первой строчке и последней имеют 100% индексацию, это очень хорошо. В середине сайты с индексацией по хуже. Вроде бы мелочи, но все же... Это кстати скриншот из Gogetlinks.

Хорошо! Я думаю вы теперь поняли, что индексация сайта (блога) очень важна. Давайте теперь я дам вам несколько полезных советов, применив которые на практике, я уверен, вы ускорите индексацию своего ресурса в несколько раз.

Как ускорить индексацию сайта (блога)?

Совет №1. Не переживайте! «В смысле, не переживайте?», — можете спросить вы. Многие ребята, которые вот вот на днях сделали себе сайт или блог удивляются, почему же их новые статьи, да и весь сайт в целом, так долго индексируются поисковыми системами. Дело все в том, что у поисковых систем есть свой уровень доверия к каждому сайту (траст).

Траст — показатель качества сайта. В него входят: показатели ТИЦ, PR, AlexaRank, возраст самого сайта, количество страниц в индексе, количество внешних ссылок на сайт (их качество), наличие сайта в таких каталогах как DMOZ, Yandex, Mail, посещаемость и т.д... Траст блога можно проверить здесь.

Пока ваш сайт (блог) молодой и зеленый, то не стоит ждать супер мега индексации, работайте и все будет хорошо!!!

Совет №2. Добавляйте на сайт (блог) только уникальный контент. Вы должны писать сами, ни в коем случае контент не должен быть краденым, скопированным с других ресурсов (ctr + с, ctr + v), скопированным и немного переделанным и т.д. Только ваш контент и ни чей больше!!! Поисковые системы относятся к копированному контенту как к мусору. Пишите уникальные и полезные статьи!

Совет №3. Пишите регулярно! Очень и очень важный момент. Сам замечаю, если не пишу в блог 3-5 дней, то скорость индексации новых статей уменьшается. Писать нужно один раз в 2-3 дня, а лучше каждый день! Приучите робота к постоянному приходу на ваш ресурс.

Совет №4. Сделайте на сайте (блоге) 2 карты сайта. О том как сделать карту сайта sitemap.xml я описывал здесь — «Sitemap.xml для wordpress». После того как карта сайта сделана, кроме того, что вы закинете ее в корень вашего блога (папка public_html или httpdocs), вам необходимо отправить ее поисковым системам Google и Yandex.

Сделать это можно в разделе «Инструменты для вебмастеров» — «Отправить sitemap.xml». Об инструментах для вебмастеров я писал здесь — «Инструменты, SEO сервисы и программы для блоггера». Для wordpress есть один очень хороший плагин создания карты сайта, он называется Google XML Sitemaps. Скачать его можно здесь. Этот плагин обязательно должен стоять на вашем блоге.

Кроме создания невидимой для человека карты сайта, нужно так же сделать видимую карту сайта на самом сайте (блоге). У меня это раздел «Все статьи блога» в котором имеются ссылки на все статьи моего блога. Это очень хорошо сказывается на индексации. Робот приходит на блог, заходит в этот раздел и видит сразу все ссылки в одном месте.

Сделать такую карту сайта можно при помощи плагина для wordpress — sitemap generator. Скачать его можно здесь. После того как установите плагин, его можно настроить в настройках. На странице, которой вы хотите видеть вашу карту сайта нужно через редактор HTML вставить вот такой код - <!-- ddsitemapgen -->.

Совет №5. Сделайте внутреннюю перелинковку на сайте (блоге). Об этом я писал здесь — «Внутренняя оптимизация wordpress». Правильная внутренняя перелинковка — залог хорошей индексации сайта.

Совет №6. Сделайте RSS трансляцию всех статей вашего блога в различных RSS каталогах. Все анонсы ваших статей будут публиковаться в них. Поисковики довольно не плохо индексируют RSS каталоги. Для прогона своей RSS ленты в каталогах я пользовался программой RSS Adder. Скачать программу можно здесь.

Выглядит она вот так:

Делается все просто. Открываете программу, заполняете все поля: адрес блога, название блога, адрес rss фида, ключевые слова, описание, e-mail. Далее идете по списку. Нажимаете 2 раза на 1 rss каталог в списке, нажимаете — «заполнить форму», вводите капчу где нужно и жмете «добавить», и так по всем каталогам. В программе забита база каталогов от 24.08.2010, в ней 82 каталога.

Совет №7. Поставьте ссылку на главную страницу блога в профиле аккаунта на форуме. Зарегистрируйтесь на 3-5 самых мощных форумах по тематике вашего сайта (блога) и поставьте в профиле (подписи) ссылку на главную страницу вашего блога. Форумы постоянно обновляются и хорошо индексируются поисковыми системами.

Было бы не плохо если бы вы после написания каждой статьи в блог, заходили на эти форумы и оставляли в каких-нибудь интересных вам НОВЫХ темах 2-3 сообщения. Соответственно в сообщениях отобразится ваша подпись, а в ней ссылка на ваш сайт (блог).

Совет №8. Комментируйте популярные блоги вашей ниши. Опять же, возьмите 2-3 трастовых блога вашей тематики, с хорошими показателями, хорошей посещаемостью и индексацией и оставляйте комментарии к постам. Кроме ускорения индексации вы получите еще и дополнительный трафик на сайт (блог).

Совет №9. Удалено 1.03.2014 — не актуально!

Совет №10. Удалено 1.03.2014 — не актуально!

Совет №11. Делайте анонсы своих новых постов в социальных сетях и группах в Subscribe.ru. Более подробно об этом я писал здесь — "Как увеличить трафик на блог. 8 полезных ресурсов". Кроме трафика, это еще и ускорение индексации. Вот допустим, я заметил, что добавленные мной ссылки в социальную сеть Grabr индексируются очень быстро, ссылки с Subscribe еще быстрее.

Совет №12. Удалено 1.03.2014 — не актуально!

Совет №13. Добавляйте ссылку на новую статью в социальные сети (Facebook, mail.ru) и Twitter. Для упрощения этой работы советую установить кнопки социальных сетей. Твиттер очень быстро индексируется поисковыми системами.

Совет №14. Сделайте правильный файл robots.txt для блога. Вообще этот пункт надо было в начале статьи написать, ну да ладно! В общем правильно составленный файл robots.txt так же залог успеха в индексации вашего ресурса. Более подробно об этом файле вы можете почитать здесь — «Robots.txt для wordpress».

Совет №15. Купите ссылку с главной страницы трастового, мощного сайта вашей тематики, который постоянно обновляется! Если на ваш сайт (блог) будет стоять такая мощная ссылка с главной страницы, то быстрая индексация вам обеспечена. Поищите в интернете где можно купить такие ссылки.

Можете зайти в поисковик google и набрать к примеру «Продам ссылки с морды» или «Продаю ссылки с главной страницы». Можете поискать на форуме о поисковых системах в разделе «Ссылки — обмен, покупка, продажа». Вот только платить за эту ссылку в большинстве случаев придется каждый месяц, можно купить и вечную ссылку.

Добавлено 4.06.2011:

Совет №16: Добавьте список пинг сервисов в админке wordpress. Зайдите в админке — Параметры — Написание и в самом низу в графу серсивы обновления вставьте вот этот список:

http://rpc.pingomatic.com/
http://1470.net/api/ping
http://a2b.cc/setloc/bp.a2b
http://api.feedster.com/ping
http://api.moreover.com/RPC2
http://api.moreover.com/ping
http://api.my.yahoo.com/RPC2
http://api.my.yahoo.com/rss/ping
http://bitacoles.net/ping.php
http://bitacoras.net/ping
http://blogdb.jp/xmlrpc
http://blogdigger.com/RPC2
http://blogmatcher.com/u.php
http://blogoole.com/ping
http://blogoon.net/ping
http://blogpeople.net/servlet/weblogUpdates
http://blogshares.com/rpc.php
http://blogsnow.com/ping
http://blogstreet.com/xrbin/xmlrpc.cgi
http://blog.goo.ne.jp/XMLRPC
http://bulkfeeds.net/rpc
http://coreblog.org/ping
http://lasermemory.com/lsrpc
http://mod-pubsub.org/kn_apps/blogchatter/ping.php
http://newsisfree.com/xmlrpctest.php
http://ping.amagle.com
http://ping.bitacoras.com
http://ping.blo.gs
http://ping.bloggers.jp/rpc
http://ping.blogmura.jp/rpc
http://ping.cocolog-nifty.com/xmlrpc
http://ping.exblog.jp/xmlrpc
http://ping.feedburner.com
http://ping.myblog.jp
http://ping.rootblog.com/rpc.php
http://ping.syndic8.com/xmlrpc.php
http://ping.weblogalot.com/rpc.php
http://ping.weblogs.se
http://pingoat.com/goat/RPC2
http://rcs.datashed.net/RPC2
http://rpc.blogbuzzmachine.com/RPC2
http://rpc.blogrolling.com/pinger
http://rpc.pingomatic.com/
http://rpc.technorati.com/rpc/ping
http://rpc.weblogs.com/RPC2
http://snipsnap.org/RPC2
http://trackback.bakeinu.jp/bakeping.php
http://topicexchange.com/RPC2
http://weblogues.com/RPC
http://xping.pubsub.com/ping
http://xmlrpc.blogg.de
http://bblog.com/ping.php
http://blogbot.dk/io/xml-rpc.php
http://catapings.com/ping.php
http://effbot.org/rpc/ping.cgi
http://thingamablog.sourceforge.net/ping.php
http://blogsearch.google.com/pingRPC2
http://rpc.newsgator.com
http://newsisfree.com/RPCCloud
http://mod-pubsub.org/ping.php
http://pingqueue.com/rpc
http://rpc.britblog.com
http://services.newsgator.com/ngws/xmlrpcping.aspx
http://holycowdude.com/rpc/ping
http://wasalive.com/ping
http://blogpeople.net/servlet/weblogUpdates
http://blogsearch.google.com/pingRPC2nd
http://api.my.yahoo.com/rpc2
http://pinger.blogflux.com/rpc
http://rpc.icerocket.com:10080
http://blog.goo.ne.jp/xmlrpc
http://pingoat.com/goat/rpc2
http://rcs.datashed.net/rpc2
http://rpc.blogbuzzmachine.com/rpc2
http://newsisfree.com/rpccloud
http://queerfilter.com/ping
http://weblogues.com/rpc
http://api.mw.net.tw/RPC2
http://api.my.yahoo.com/ping
http://blogsdominicanos.com/ping
http://blogsearch.google.co.uk/pingRPC2
http://blogsearch.google.us/pingRPC2
http://feedsky.com/api/RPC2
http://fgiasson.com/pings/ping.php
http://focuslook.com/ping.php
http://holycowdude.com/rpc/ping
http://imblogs.net/ping
http://ping.blogg.de
http://ping.blogs.yandex.ru/RPC2
http://ping.fakapster.com/rpc
http://ping.wordblog.de
http://pinger.onejavastreet.com
http://rpc.tailrank.com/feedburner/RPC2
http://rpc.wpkeys.com
http://rssfeeds.com/suggest_wizzard.php
http://rssfwd.com/xmlrpc/api
http://signup.alerts.msn.com/alerts-PREP/submitPingExtended.doz
http://weblogalot.com/ping
http://xianguo.com/xmlrpc/ping.php
http://zhuaxia.com/rpc/server.php
http://focuslook.com/ping

Ну вот наверное и все по этой теме. Теперь и вы знаете как ускорить индексацию сайта. Может быть кто-то подскажет еще какие-то хорошие способы ускорения индексации? Пожалуйста напишите в комментариях!

Теперь давайте поговорим о другом.

Как запретить индексацию сайта?

Если вы хотите запретить к индексации поисковыми системами какую-то часть контента на вашем сайте, то можете просто заключить его в тег <noindex>здесь контент</noindex>. Но это действует только для Яндекса. Закрывать ссылки от индексации гуглом можно так:

Текст ссылки

Чтобы закрыть весь сайт от индексации, то необходимо открыть главный файл сайта (для wordpress это header.php) и между тегами <head></head> вставить вот такую строчку:

Наверняка похожая строчка там уже имеется и выглядит она вот так:

Вот ее нужно заменить на первую. Но вообще закрывать весь сайт от индексации не нужно я думаю. Ну вот и все на сегодня! Думаю из этой статьи вы возьмете для себя много полезного! Ускоряйте индексацию своих сайтов и блогов! Пока пока!!!

P.S. Как вам статья? Советую получать свежие статьи на e-mail, чтобы не пропустить информацию о новых бесплатных видеокурсах и конкурсах блога!

C уважением Александр Борисов