На редкость слабая статья, Игорь Крейн. И зачем вы стыдливо закрыли запрос (который уже не работает), но не закрыли коды каждого сообщения?
Причина, по которой страницы были в яндексе, но не в гугле, проста и очевидна - на этих страницах стоит счетчик Яндекс.Метрика. Вам нужно было всего лишь нажать Ctrl+U в вашем браузере.
Так что, как ни крути, а виноваты во всем программисты Мегафона. 1. Страницы доступны всем, а не только отправителю. 2. В них был засунут текст сообщения, что вообще несусветная глупость. 3. Страницы не запрещены к индексированию (защита от честных людей, но могло бы и помочь). 4. На них болтался ненужный счетчик поисковика (небось в стандартный шаблон был засунут или хотели цели посчитать).
Другое дело, что с сайта смс отправляют халявщики, которые заранее согласились с условиями пользования сервисом. По этим условиям им, скорее всего, никто ничего не обещал. А сообщения вполне обычные. После нескольких лет работы в пейджинге тексты меня не удивляют ни капельки.
При такой популярности вконтакта как вы еще можете верить в человечество?
Роботы индексируют только те страницы, до которых могут добраться по ссылкам. Адреса этих страниц, мягко говоря, нетривиальны, и выдумать 8 тысяч адресов, в которые стукнуться, поисковик не может. А ссылок на них в интернете тоже нигде нет (не было до вчерашнего дня). Однако все страницы с яндекс.метрикой проиндексированы (яндекс узнает о них, наверное, тогда, когда дергается скрипт счетчика с сайта яндекса). Поэтому яндекс мог знать об этих страницах, а гугл нет.
И я вовсе не "господин из яндекса", как тут подумало "яндекс говно". И даже не был никогда.