Тема дня: Доходный СДЛ – Выбор тематики сайта.
Некоторые сайты охотно лезут в индекс поисковиков, другие же наоборот – загоняются туда пинками в виде хороших внешних ссылок. Пробуя разные методы, мне понравился такой малозатратный, как регистрация сайта в социальных закладках, либо же покупка постового на хорошем блоге, но здесь речь не об этом.
Замечено, что проблема индексации сайта возникает лишь при большом количестве страниц, которые появились не постепенно, в результате ежедневного обновления, а одновременно при добавлении сайта в адурилку. Представьте картину, когда ваш ресурс впервые посещает поисковый робот и, сканируя его, видит массу сгенерированного контента. К тому же картина может усугубиться наличием неграмотной перелинковки. Одностраничные сайты или сайты-визитки, как правило, в индекс попадают довольно быстро при наличии на них уникального контента.
Исходя из вышесказанного и собственных практических примеров, могу утверждать, что постоянное (или регулярное) обновление сайта прибавляет ему траста, что, в свою очередь, заставляет робота поисковой системы изменять своё расписание обхода сайта и ускоряет его индексацию. Попадание страниц в индекс происходит практически моментально, особенно, если добавить сюда дополнительный действенный способ ускорить индексацию сайта.
Вот, предложенный мною алгоритм для быстрого попадания в индекс:
1. Выделяем на сайте разделы, которые периодически обновляются.
Это могут быть новости, отзывы, статьи или что-либо ещё.
2. Устанавливаем RSS.
Для выбранных разделов устанавливаем rss канал. С помощью ленты RSS поисковик может узнать точную дату публикации материала и анализировать вашу активность на сайте.
3.Регистрируемся в FeedBurner
FeedBurner нужен для того, чтобы придать вашему каналу стандартный вид для разных юзер-агентов. Также этот сервис позволяет посылать пинги в различные поисковые и другие сервисы, уведомляя о добавлении нового контента.
4. Регистрируемся в Twitter
Если вы ещё не зарегистрированы в твиттере, советую это сделать сейчас. Эта социальная сеть дает много возможностей как в плане маркетинга, так и в плане помощи для индексации сайта (см. след. пункт).
5. Настраиваем кросспостинг RSS в Twitter
С помощью RSS2Twitter или Твиттерфида настраиваем кросспостинг в твиттер. Записи из RSS будут автоматически добавляться в ваш твиттер-аккаунт и фолловеры (подписчики) смогут быстро отслеживать обновления на вашем сайте.
Таким образом, как только вы публикуете новый контент на сайте, запись попадает сначала в rss канал, потом в feedburner с пингом крупных поисковых сервисов и далее в twitter. Поисковики обязательно заметят этот контент и не замедлят добавить его в свой индекс, конечно если он более-менее уникален.
Для подтверждения этих доводов проведен эксперимент. В seo-словаре, где настроены все вещи, описанные выше, был добавлен новый термин “портянка” и каждую минуту отслеживалось движение в индексе Google (индексация сайтов в Яндекс работает чуть по-другому).
Через 3 минуты после добавления определения в словарь запись появилась в твиттере.
Сразу же была проиндексирована главная страница словаря (повторю, прошло 3 минуты).
Еще через 7 минут добавленная страница появилась в индексе.
Тут баг гугла в том, что он написал для сайта 31 минута, хотя на самом деле страница появилась не позже 10 минут назад.
Итого, весь процесс занял максимум 10 минут и сайт встал один из первых по запросу что такое портянка. Подобный способ пойдет даже для сайтов, предлагающих ремонт окон. На больших сайтах, где контент добавляется буквально каждую миниту (новостники и т.д.), страницы в индексе появляются, соответственно, ещё быстрее. Например, попробуйте поэкспериментировать с блог-платформой LiveJournal.
А какие вы используете методы для ускорения индексации?
Постовой: А вы уже выбрали кирпич для строительство своего дома?
66 Ответов
жанна
Март 4, 2010 at 12:55
1Интересный материал. Примем к сведению. С портянкой – это круто! :)
Alex Smith
Март 4, 2010 at 13:04
2Очень положительно влияет полуавтоматическая регистрация в каталогах прог-ой RSSAdder. Отличная вещь, только база заложена небольшая (около 50 каталогов и рейтингов).
hawot
Март 4, 2010 at 13:08
3Немного скомкано получилось в статье то, что в начале статьи говориться о первом посещении сайта роботом, а в алгоритм и пример дается для уже проиндексированного сайта. В целом все верно. Но в случае нового сайта есть некоторые нюансы.
Андрей
Март 4, 2010 at 13:15
4Кросспостинг RSS в твиттер – зло! )
Алексей Валеев
Март 4, 2010 at 13:16
5Думаю если юзать FeedBurner, гугл и без твиттера быстренько проиндексирует контент
Teimos
Март 4, 2010 at 13:17
6Я для индексации гуглом устанавливаю на сайт поиск от самого гугла :)
hawot
Март 4, 2010 at 13:23
7И что, поиска от гугла установленный на сайте как то помогает индексации сайта?
Bollexa
Март 4, 2010 at 13:40
8Вот мне тоже очень интересен данный вопрос! Что правда поиск от google ускоряет индексацию или нет? Если да, то как?
felix
Март 4, 2010 at 13:44
9Хорошая это вещь – кросспостинг, правда после последних нововведений Яндекса опасность только возрастает. Представим, что RSS блога транслируется в ЖЖ, Майл, Яндекс и Twitter. Одно дело когда только вступление, а другое когда полностью и самое ужасное, что некоторые блогоплатформы просто не имеют функции скрыть от ПС посты, получается куча копий, куча дублей, а соответсвенно и падение в выдаче, а быть может и какой-нибудь АГС :(
Teimos
Март 4, 2010 at 14:38
10Когда устанавливаешь поиск от гугл адсенс, на сайт приходит робот адсенса, и, видимо, определяет, что сайт еще не в индексе, а затем зовет на сайт уже поискового робота. Как то так. Могу лишь предполагать, но лично мои наблюдения показали, что так сайты входят в индекс ГОРАЗДО быстрее, чем через аддурилку.
FeAlSe
Март 4, 2010 at 15:35
11RSS2Twitter необязательно использовать, т.к. у FeedBurner есть своя опция кросспостинга в твиттер (раздел Публикуй, социальные). После обновления RSS канала, анонс тут же публикуется в Twitter, проверенно.
Саша
Март 4, 2010 at 17:16
12>> 5. Настраиваем кросспостинг RSS в Twitter
На самом деле это пункт 3.1 Потому что это есть в FeedBurner!
Кстати, у меня после добавления в него тоже через 3-5 минут блог индексируется, но ему уже больше года.
SEO отшельник
Март 4, 2010 at 17:44
13Как только мой блог попал в поиск яндекса по блогам, то он стал моментально индексироваться. А попал он сразу как только я добавил в него фид блога в FeedBurner
andy
Март 4, 2010 at 18:12
14я почти все также делаю, а сайт не хочет залазить в индекс.
а зона .com влияет на скорость индексации?
spiller
Март 4, 2010 at 18:40
15Спс за статью. Попробую с новым сайтом так. А суда по последнем махинациям Яндекса скоро в яндекс тоже можно будет попасть за 10 минут
Pistolero
Март 4, 2010 at 19:24
16C помощью Твиттера загоняю все новые страницы своих сайтов в индекс Яндекса и Гугла за пару частов, так что всем советую Твиттер.
Света
Март 4, 2010 at 20:19
17Спасибо! Пошла прожигать фид, а то как-то совсем расслабилась, завела новый бложок и сижу жду у моря погоды пока его проиндексируют… да, и перепост из FeedBurner в Twitter организую, а то Гугл проиндексировал только одну страничку… а Яндекс 4.
alexey
Март 5, 2010 at 11:36
18twitter отличная вещь для ускорения индексации
Гугл пока еще активно просматривает подобные соц. сети на новый контент
webb
Март 5, 2010 at 11:54
19Статья понравилась, но на мыло пришло уведомление о ней тока сегодня ((.
Деньга
Март 5, 2010 at 14:53
20Вопрос насчет твитера. Он же делает другие ссылки вместо тех что ставишь(не знаю как это правильно назвать) Как тогда индексируется сайт? И еще, очень интересная статья, но меня мучает вопрос а как часто гугл пересматривает роботом уже проиндексированное? Это в плане редактирования давно опубликованных страниц.
alexey
Март 5, 2010 at 15:43
212 Деньга – твитер ни при чем, все зависит от доп. сервисов по сокращению имени ссылки
а обход Гула зависит от того как часто ваш сайт обновляется в принципе …
Devaka
Март 5, 2010 at 18:59
22>> Потому что это есть в FeedBurner!
Саша, спасибо! Видимо, эта функция недавно появилась, будем теперь знать.
Валера
Март 5, 2010 at 19:12
23Могу поделиться своим опытом: я особо не старался, но после написания пяти хороший обзоров меня гугл с яндексом сразу начали внимательно индексировать :)
Видимо, успех в “стандартном” “пишите интересно”.
Zircool
Март 5, 2010 at 23:05
24Спасибо за статью. Очень полезная. Я еще использую прогон по соц. закладкам. И добавляю сайт в Yandex закладки.
Алексей
Март 6, 2010 at 00:45
25У меня один раз сайт авто-тематики вошел в индекс с помощью быстро-робота яндекс, т. е. сегодня добавил в аддурилку, морда через пару часов в индекс вылезла, а после 1 апдейта залезли все несколько сот страниц качественного уникального контента ручной работы. Меня это навело на мысль, что может быть скорость индексации зависит от тематики ресурса, (только вот как он ее определил с 1 раза не понятно), т.е. чем востребованней тематика сайта, тем он быстрее в индекс заходит. В довод этой теории могу сказать, что этот сайт находился в момент на IP, на котором еще у меня есть несколько сайтов (схожи по внутренней перелинковки, количеству страниц, качеству контента, возрасту доменов (+- 1 месяц)), только тематика у них разная, ну и контент, естественно, тоже разный. Так вот, эти сайты входили в индекс уже не так быстро, хотя и не медленно, 2 недели и несколько сот страниц в индексе прочно сидят, по сей день. Хотя могу и ошибаться (сомнения здесь навеяны вопросом: как ПС мог определить тематику сайта), может просто повезло с одним сайтом, 2-3 дня и все странице в индексе.
Также скорость индексации зависит от IP сайта. На разных IP по разному скорость протекает. Не трудно догадаться, на каких хуже, а на каких лучше.
Xstroy
Март 6, 2010 at 14:46
26Заметил, что статья на блоге WP индексится в течение минут (очевидно пинг), а на строительном сайте с редко обновляемым контентом 1-3 недели.
КордиМэн
Март 6, 2010 at 15:35
27С дуру, выбрал себе для пары сайтов домен инфо. Так больше месяца не мог попасть в индекс. Что я только не делал. Пришлось писать Платону, за одно и спросил, по поводу индексации этого домена, правда ли что он плохо индексируется. Ответ поразил гениальностью и лаконичностью – “Это не правда”
Что бы попасть быстро в индекс, нужно выбирать “нормальные” домены.
З.Ы но это я только про яшку.
woman
Март 7, 2010 at 16:44
28Спасибо за “портянку” :)
ИнфоМастер
Март 7, 2010 at 17:00
29Выводы вполне логичные, хотя бывает и наоборот :)
К примеру, у меня один сайт на 30 страниц в гугле проиндексировался за несколько дней (кстати, такое я видел впервые) а вот в яндексе его не было видно почти 3 месяца. Уж не знаю с чем это было связано, но пришлось писать платонам…
mumitroll
Март 8, 2010 at 23:33
30не буду юзать тегов )
очень познавательная статья, такой мне не хватало, когда я только начинал себя на сео-поприще. Спасибо, Сергей. а вот отписка – скорее бы. лучше уж от тебя новости получать, а не уведомления о новых комментариях
Andrew
Март 9, 2010 at 17:41
31Поразила скорость Гугла
Плохо, Что он мои бесплатные домены так не индексит
hawot
Март 9, 2010 at 17:48
32Отлично индексируются бесплатные домены. Вот применение им найти все труднее.
Василий
Март 9, 2010 at 20:10
33А как заставить рамблер индексировать не подскажите?Он почему-то любит брать одну страницу и дальше не выкладывать.
Beauty
Март 10, 2010 at 08:55
34Я так понимаю, что можно таким образом подтянуть в индекс те страницы сайта, которые бот обошел своим вниманием, регулярно добавляя коментарии на странице?
Teimos
Март 10, 2010 at 11:43
35Лучше сделайте комментариям подписку РСС, а не почтой.
Serg
Март 11, 2010 at 09:48
36интересная статья
Грим
Июнь 26, 2010 at 10:11
37Ерунда. В вордпрессе есть же пингатор, в гугл залетают махом все посты. И фид с твиттером тут вовсе не нужны.Лучше напишите, как в яндекс загонять.
Jim
Август 12, 2010 at 12:56
38>Лучше напишите, как в яндекс загонять.
Тоже было бы интересно узнать.
GT7
Сентябрь 21, 2010 at 14:37
39Badindex.ru – сайт о проблемах индексации сайтов и поисковой выдачи
Если вам приходилось сталкиваться с проблемами индексации ваших сайтов поисковыми системами и исключением страниц вашего сайта из поисковой выдачи, вам будет небезынтересна информация, размещенная на сайте badindex.ru, где вы можете обсудить данные проблемы и оставить свои комментарии.
Андрей
Октябрь 4, 2010 at 15:44
40Интересная статья.
Domxoz
Октябрь 22, 2010 at 23:12
41Спасибо, а что важно eще сделать , кроме выбора PingShot в Feedburner
Алекс
Октябрь 28, 2010 at 08:38
42Эти методы так же эффективно действуют для яндекса как и для гугла?
Евгений
Ноябрь 5, 2010 at 19:32
43У меня такой вопрос – а разве ссылки, проставленные через сервисы коротких ссылок ускоряют индексацию? Они вроди через 301 редирект пашут, и по ним боты не переходят. Или я не прав?
Андрей
Ноябрь 22, 2010 at 23:38
44Индексация в Google, это не прорблема. Вот яндекс побороть на индексацию єто роблема.
ctac
Ноябрь 30, 2010 at 13:17
45С яшей другие методы
Андрей
Декабрь 5, 2010 at 23:10
46“С яшей другие методы”
Поделитесь своими методами если можно?!
Домены в зоне net, com Яша обходит стороной.
Я бы ему денег дал, да прямой услуги такой нет.
Только посредники.
Евгений
Декабрь 5, 2010 at 23:40
472Андрей – Яндексу абсолютно по-фигу на то какая зона – хоть ru, хоть pro, хоть любая другая. Важен сам сайт, а не адрес.
Андрей
Декабрь 6, 2010 at 01:41
48“2Андрей – Яндексу абсолютно по-фигу”
А как же тогда с сайтом motors.hmarka.net – 97 страниц в индексе (Google) , а ЯШЕ точно похе…
Яша мне пишет: Ваш сайт в очереди, только не говорит когда очередь подойдет. Четыре месяца прошло! Вот так!
Slavonic
Декабрь 6, 2010 at 13:02
49Яндекс также хорошо реагирует на твиттер?
Sarre
Декабрь 18, 2010 at 15:42
50google уже и так моментально индексирует, без необходимости вышеуказанных дейсвий
Devaka
Декабрь 18, 2010 at 19:37
51Slavonic, яндекс-поиск пока что не так хорошо реагирует на твиттер, но их другой сервис яндекс-блоги – вполне отлично :)
Эдуард орлов
Январь 1, 2011 at 03:06
52У меня 2 сайта было. добавил в фид, добавил в поисковики, один добавил в закладки, другой нет.оба сайта через 2 недели после создания приносят 10-15посетителей с поисковиков.похоже что закладки уже не приносят особого ускорения.один сайт экономика, другой сочинения
faina
Февраль 4, 2011 at 14:28
53Вроде работает))
Rafael
Февраль 5, 2011 at 21:56
54Уважаемый!
Мой сайт сделан на joomla. Я настроил кросспостинг в твиттер через
Твиттерфид.
А ссылка rss канала идет только с главной страницы.
И как же мне сделать,что бы остальные страницы,а также вновь добавляемые страницы попадали в Твиттер?
newgeniy
Февраль 27, 2011 at 13:16
55Хорошая статейка, жаль что только для Google(
у меня вопрос яндекс блоги это вы имеете ввиду сервис “Ярушка” ????
bulat
Март 21, 2011 at 21:58
56Спасибо! примем к сведению… хотелось бы еще узнать как запихнуть уникальный контент паршивого качества в Яшу :) словно жопой чует сателлиты и не добавляет к себе.
VaDim_LA
Май 8, 2011 at 21:13
57twitterfeed пропускает максимум 5 сообщений в полчаса, и то порой сбоит, гугловский feedburner пошустрее будет
Blogger_
Май 30, 2011 at 08:51
58Twitter действитеольно хороший способ ускорить индексациию в Google. Думаю, что и наличие в FeedBurner тоже играет свою роль, ведь это дочерняя компания Google :D Так-же заметил, что кросспостинг в Friend-Feed так-же заметно прибавляет скорости к индексации в Google. (кстсати Friend-Burner тоже создал Google :D )
PlaGoSWM
Июнь 20, 2011 at 23:01
59Спасибо, роботы теперь действительно начали посещать мой сайт чаще.
Денис
Июнь 21, 2011 at 10:43
60Можно совместить и Twitter и Friendfeed. Сначала кросспостинг в Friendfeed, а уже из него (там есть такая функция) в Twitter.
Евгений
Июль 2, 2011 at 16:31
61Интересная тема, всё сделал, всё работает, но не так быстро, как у Вас. Я так понимаю нужен “крутой аккаунт” в твиттере с кучей фолловеров? Уменя просто страницы попадают через сутки-двое.
Дмитрий
Июль 24, 2011 at 00:15
62Спасибо за статью, буду пользоваться этими советами. Если чстно сделал только что первый свой сайт и только учусь как его раскручивать…
drugoidodi
Июль 29, 2011 at 09:33
63Дело в том, что на микроблогах типа твитера идентики и д.р. бегает быстро бот яндекса, он и индексирует ссылку, но тут есть подвох. Этот робот предназначен для быстрого индекса новости или свежего события, ЛЮБОГО, и так как новость может оказатся не качественной в глазах поисковика, то предусмотренна система защиты, и страница через некоторое время выпадает из индекса, иногда через несколько часов, и потом попадет в индекс только через два три апа. Так что тут можно и навредить сайту, задержав индексацию на один ап.
Иван Шипилов (dofollow site)
Сентябрь 30, 2011 at 03:21
64Можно еще добавить rss в яндекс-блоги.
Леонид
Январь 10, 2012 at 00:00
65Ну а без РРС?
Если я добавил допустим раздел на сайт и сообщил на корпоративной странице в Твиттер что мол “у нас новый раздел вот ссылка”.
И на личной в придачу мол “побывал там сегодня вот хороший раздел у них появился”.
Можно ли так ускорить индексацию нового материала?
Дмитрий
Январь 10, 2012 at 00:31
66Сделал новый сайт, пять страничек на народе, ну вы сами поняли какой ))) ни чего ни куда не добавлял в индекс гугла попал дня через два, в яндексе в веб мастере пока нету, но прошло менее недели, во вторых пользуясь сервисом xseo.in смотрю и морда сайта в яндексе… да ссылки не добавлял а sitemap сделал.
Ответить