Сообщений в теме: 22

[Арти]

eugene_wb, при этом чпу генерирует ссылки так http://мой сайт/категория /под категория/ и что теперь делать с этим сайтом как можно его поправить

Обратиться в тех. поддержку Яндекса, задав вопрос об индексации из личного кабинета Яндекс.Вебмастера, кстати, там же (если вы не знали) находится информация о том, почему и отчего и какие страницы вашего сайта не прошли в индекс, для того чтобы информация эта появилась, нужно подгрузить в Яндекс.Вебмастер карту сайта и подождать. Кстати, robots.txt там же анализируется и по нему даются комментарии Яндекса.

Если вы вообще хотите индексировать корректно ваш сайт и управлять этим индексированием, то вперед регистрироваться в Google Webmaster, Яндекс.Вебмастер и Яндекс.Метрика (ИМХО для рунета все же он приоритетен).

может если у вас будет время поможете с проверкой сайта на индексацию у яши я бы в долгу не останусь совет говорят лишним не бывает но одна голова хорошо а 2 еще лучше

[egor]

Подниму тему, через столько времени какой robots на ваш взгляд наиболее правильный? Можете выложить сюда?

[Арти]

После испытаний у меня более актуальный получился такой файл ) может кому пригодится )

User-agent: *
Disallow: /?
Disallow: /*?
Disallow: /*&
Disallow: /*.php
Host: твой сайт ру
Sitemap:http://твой сайт ру /sitemap.xml