Disallow: /site/ у вас отсутствует.
Хотя с site лучше делать редирект через .htsccess

gradicom написал:

Спасибо, все равно не понятно Disallow: /site/  остутствует, зато присутствует Disallow: /signup/ Disallow: /signup/, а кроме того Disallow: /cart/ который, по моему, с Disallow: /site/ вообще не связан

Так и есть. В выдаче могут быть страницы которые проиндексированы до того, как запрет появился в роботс.
Постепенно должны уйти. Можете подать заявку на удаление из индекса.
Почему еще могут быть - даже затрудняюсь.
Были какие-то ситуации со страницами на которые есть внешние ссылки, но врядли это ваш случай.

Обсаждали уже - гугл игнорирует Robots. вернее не считает его обязательным. Сам задрался уже разгребать. Можно удалять хоть до посинения, все равно найдет и добавит в сопли.

Отредактировано fxz (2015-02-20 00:37)

Все это я читал много раз. И про парольную защиту (ставится ли она на виртуальные директории?) и про метатеги и про ссылки с других сайтов. Но нет у меня ссылок с других сайтов на такое количество страницы отзывов и сортировок. А на недавно добавленные страницы тем более. И роботс у меня проверенный в том же гугл вебмастере, и называется он robots а не Robots. И обсуждали мы этот вопрос уже, с Вами даже...
Вот как вы у себя, например, решили этот вопрос с теми же страницами /reviews/ ? За остальное пока не спрашиваю - недавно приделал cannonical и meta=noindex посмотрим что будет.

Вам нужно внимательно пройтись по самому файлу дабы проверить его на наличие ошибок. Что бы наверняка, можно проверять как здесь http://seoprofy.ua/blog/optimizaciya-sajtov/robots-txt говорится, прочитать с помощью Google Вебмастерс, войти в свой аккаунт с подтвержденным на ним сайтом. Хотя конечно более детально ознакомится с robots.txt не мешало бы, тогда наверняка найдете свою неисправность.

Отредактировано Lembon (2015-03-24 12:00)