«Яндекс» индексирует быстрее, но не всех

Давайте найдём причину появления бустрого робота. Ответ, как ни странно прост.
Причин две - плохой алгоритм, отстутствие бабла , чтобы скомпенсировать погрешности алгоритма. С алгоритмом всё понятно. Тут гордость не позволяет признать , что алгоритм стар и пора менять. Критику Волож в этом вопросе не приемлет. Остаётся лишь одно решение - увеичение серверов, замена старых на новые. Но и тут проблема.
Просто нету бабла, несмотря на активное надувание щёк. А ведь нужно просто поставить больше серверов ( по моим оценкам раз в десять). И все сайты будут индесироваться быстро и вовремя.
Обычный робот Яндекса обходит рунет раз в месяц. Сравните с Гуглем, они делают это раз в два дня. Яндексу ещё работать и работать над собой. Появление быстрого робота - это как мёртвому припарка. Яндекс, у вас сарай горит!!! Делайте что нибудь.
Конкуренты всё делают быстрее и лучше. Индексировать нужно быстро и все сайты!!! А иначе нужно закрывать лавочку. Гугль уже пришёл. И растёгивает штаны ...

Не все сайты и не всем одинаково полезны.

С моего личного "неоптимизированного" сайтика в июле робот Yandex забрал 5621 страниц, переходов с поиска Яндекса - 241, Google - 71/4, MSN - 4670/1.
Все, кроме MSN'а, по-своему правы.

Что касается "быстрого робота", его наличие (а не объявление об этом) действительно является скорее ПиАром. Разумеется, конкуренты, которые "всё делают быстрее и лучше", давно используют у себя "быстрых роботов", и введение этого механизма Яндексом всего лишь означает, что в данном случае мнение "не правильно делать изменения в поиске ради ПиАра" проиграло.

1

Насколько я знаю, все последние 3-4 года бизнес Яндекса - это реклама + Яндекс.Маркет

Доказывается это очевидным образом:
проведём маленькое исследование на число страниц популярных ресурсов Рунета, содержащихся в индексах Yandex, Rambler, Mail, Google, Yahoo

1. gazeta.ru
Yandex - 1635 страниц
Rambler - 59198 страниц
Mail - 57600 страниц
Google - 313000 страниц
Yahoo - 326000 страниц

2. lenta.ru
Yandex - 178147 страниц
Rambler - 311892 страниц
Mail - 156000 страниц
Google - 817000 страниц
Yahoo - 861000 страниц

3. rbc.ru
Yandex - 112223 страниц
Rambler - 42115 страниц
Mail - 45200 страниц
Google - 243000 страниц
Yahoo - 320000 страниц

4. bolero.ru
Yandex - 108937 страниц
Rambler - 101480 страниц
Mail - 51900 страниц
Google - 279000 страниц
Yahoo - 702000 страниц

5. ozon.ru
Yandex - 84375 страниц
Rambler - 68333 страниц
Mail - 272000 страниц
Google - 2160000 страниц
Yahoo - 6820000 страниц

Мысль правильная... У меня (за две последние недели) несколько другие цифры в паре Гугль-Яндекс, но и я Яндекса бесполезным не назову, в отлисие от Рамблера и MSN (вот эти точно - уродливая парочка) (цифра инверсна - страниц/реферов)

Гугль (все нац.) 582/134 = 4 (!!!!)

Яндекс 8939/85 = 105

Рамблер 7032/14 = 502
MSN 2822/1 = 2822 (?!?!)

Так что с нынешним яндексом еще можно жить...

Прохожему.
Если рассматривать поисковик с точки зрения - сколько он вам приносит переходов, то да, Вы правы. С Яндексом можно жить.
А если что то хочешь найти , особенно новое, появившееся меньше месяца назад, то с Яндексом жить нельзя. Согласен , что Яндекс сегодня - это реклама и яндекс маркет. Но уже не поисковик. Гуль - поисковик, а Яндекс нет.

Нельзя жить с Яндексом. Гы. Что еще скажете? Может поотрицаете, что у Яндекса лучший алгоритм поиска в Рунете? Про Гугль я молчу, так как при всей своей "шустроте" роботов пользоваться им как основным не стоит хотя бы потому, что он не адаптирован для России.

Добавление к только что сказанному,
to денис: вы статью читали? Быстрый робот ради смеха запустили?

Что касается количества проиндексированных страниц, то я, честно говоря, вообще не понимаю, какой вывод из этого должен последовать. Статистика моего сайта в Гугле, например, говорит о том, что на первых трех(!) страницах выводятся ссылки на главную страницу форума (прекратившего существование полгода назад), с разными параметрами session_id. Притом, кстати, что Яндексом он проиндексирован в 2 раза большем объеме и количество это вовсе не высосано из пальца. Статистика переходов тоже в пользу Яндекса (с учетом количества проиндексированных страниц в 6 раз больше).

клоуну: В чем-то я согласен, алгоритм устаревает, серверов мало. С деньгами могут быть проблемы. Но в целом, я уверен, вы переборщили. Волож не идиот, просто так щеки надувать не в его манере. Яндекс - стабильная компания, ей есть за что держаться и есть куда развиваться. И деньги, полученные от "рекламы и Маркета", уж поверьте, Волож грамотно распределить сумеет. Быстрый робот найдет приспособление, да и помехой для увеличения количество тех самых серверов он не является.

Последнее наблюдение: с удалением из базы несуществующих документов, особенно если сервер не возвращает ошибку 404, у обоих "гигантов" плохо. В случае с Яндексом возможно это объяснимо медленной переиндексацией, а вот для Гугля это кажется странным. Похоже, весь поиск Гугля это как быстрый робот Яндекса - и находит далеко не все на непопулярных ресурсах.

Гугл стал быстро обновляться уже года два. У рамблера тоже есть какой-то быстрый робот. В этих условиях ее делать в Яндексе это даже не пеар, это как-то унижение для разработческой гордости. Мои соболезнования Вам и респект тому, кто наконец-то заставил вас это сделать и внедрить.

А что, у Янедкса лучший поиск в Рунете? Из чего это следует? Чем же лучше?
Наличием дурацкой фразы "с учетом морфологии"? Нам мой взгляд, ищет он довольно средне, но самое главное, чем дальше, тем хуже. Не справляется со спамдексерами.

Что касается быстрого робота по "важной" части рунета, то Рамблер его запустил года полтора-два назад. Ну вот, теперь и Яндекс собрался.
Гугл же вообще до последнего времени, до середины 2004 года, переиндексировал базу раз в месяц. И всякий раз это был процесс не гарантированный, с приколами.

Да, считать, что Яндекс не может улучшить алгоритм из-за отсутствия денег - глупо.
Денег у них есть, у них ума не хватает.
Они делают по сути одно и то же уже семь лет, а эти подходы фактически перестали работать уже два года назад. Людей тоже не хватает, а взять негде.

Яндексом можно пользоваться для поиска товаров и услуг, (тем более что на нем гораздо больше коммерческих ссылок чем на google) для поиска другой информации пользую гугль

а мои странички постоянно пропадают из базы

хоть, как и утверждает их саппорт, их индексирует "быстрый робот"

толку от этого никакого - да, он их индексирует иной раз 2 раза в сутки

а в результатах поиска этих страниц не появляется вообще :(

Какой тогда прок в этих быстрых обходах :(

А для поиска товаров вобще лучше Тындексом пользоваться :)

to логофаг:
Я упоминал именно алгоритм, а не поиск. Пока что основные упреки сыпятся в адрес медленного и неумелого индексирования. Ну задел вас, простите. Это, конечно, мнение. Но мнение, подкрепленние большим личным опытом. Что бы вы не противопоставили (а что, интересно, вы противопоставите? Рамблер? Апорт? Mail.ru?), а "по умолчанию" все альтернативы Яндексу - не более чем альтернативы (про Гугль, опять же, молчу). Хотя время покажет.

"Они делают по сути одно и то же уже семь лет, а эти подходы фактически перестали работать уже два года назад"
Вот с чего вы это взяли?

Какие же циничные ублюдки собираются здесь.

Честно говоря, смешно читать, что Яндексу - старейшей уважаемой компании с огромным опытом работы - не хватает ума. Надеюсь, прочитав ваши комментарии, Волож и компания наконец выйдут на верный путь.

Ясно, все циники, кто смеет на наше все найдется замахнуться.

Яндекс - не старейшая компания. Ей всего по сути 6-7 лет.
Это молодая компания. Лидером на рынке поиска она является с 2002 года. до этого лидером был Рамблер.
На самоокупаемость Яндекс вышел всего два года назад, до этого он спаливал деньги инвесторов. Модель бизнеса, контекстная реклама, у Яндекса появилась только 3 года назад, до этого они даже не знали толком, чем зарабатывать.

Так что компания молодая и неопытная. С Микрософтом, Деллоом, ИБМ не сравнить.
К тому это это, по западной классификации, малый бизнес. Меньше трёхсот человек, меньше 20 миллионов дохода - типичный малый бизнес.
Не сравнить даже с отечественными IBS, АйТи, Техносервом, ЛАНИТом - у котоых обороты в десятки раз больше, и персонала тоже.
Это из болотца Вебпланеты кажется что эта самая большая лягушка - главный зверь в лесу.

Ум - понятие относительное. Многие выигрывали потому, что кругом полные придурки. Яндекс - просто самый умный из существующих поисковиков, ибо последние 3-4 года Рамблером и Апортом управляли совсем уже законченные идиоты, разваливавшие бизнес. На их фоне Яндекс - просто красавец. А по сути, обычная компания, не гениальная, мягко говоря.
Вы попробуйте поискать мобильный телефон или автмобиль Яндексом и потом уже делайте заключение об их уме.

Ну, а насчет ума в современных обстоятельствах - подождите, еще посмотрим. Сейчас Яндекс так забронзовел, так насосаля персонала, таких уродов понанимал за отсутствием других кадров на рынке, что остатки ума скоро растеряет. Да и продажа кусочков компании кому попало стратегического интеллекта не прибавляет.

но основная масса пользователей все же ориентируется на эту лягушку и сейчас вовсю страдает от конвульсивной переиндексации своих сайтов в Яндексе. На его форуме почти все такие сообщения о глючной индексации, выкидывании из базы сайтов - просто удаляются.

Вообще ситуация Голливудская на практике наблюдается. Сидит такой простой из себя собственник сайта и гадает, почему его сайт выкинут (пусть даже на время) из Яндекса. Вроде бы все прилично программировал. И на ум приходит недавно просмотренный фильм "Чужой - 4: воскрешение". Новый робот Яндекса (читай: порождение нового Чужого в конце фильма) находится в конфликте со старым роботом. По фильму он его и прикончил. И чуть было не угробил мать свою (прошу прощения за сравнение). Как поведут себя роботы в Рунете? Бегают ли они по однму и тому же сайту? Не связаны ли все эти глюки с кибер-конфликтами внутри поисковой системы?