У вас «выпали» страницы или целые разделы из индекса поисковой машины без видимых на то причин? Давайте разбираться. Потому как без причины такое случается очень редко. В понимании «Яндекса» каждый сайт должен представлять интерес – в первую очередь для пользователей. Если какая-то страница или весь сайт не имеют с этой точки зрения никакой ценности, они могут исключаться из индекса. И если эта беда приключилась именно с вашим ресурсом, нужно искать причину в самом сайте, иначе продвижение сайтов самостоятельно значительно затрудняется.
1. Проверьте, корректно ли загружается обозначенная страница: если роботам «Яндекса» закрыт доступ к серверам провайдера, из индекса может «вывалиться» весь сайт. Хотя проблемы отображения могут исходить и из самой CMS. Проверить, относится ли ваша проблема к техническим, довольно легко: добавьте свой сайт в сервис «Яндекс.Вебмастер» и просмотрите раздел «Ошибки».
2. Описанные выше трудности могут появиться и из-за некачественного, неуникального или отсутствующего контента. Так, если поисковая машина обнаружила на странице вашего сайта плагиат, она просто исключает его из поиска, чтобы не тратить свои мощности на обработку бесполезной информации (ведь то же самое можно найти на сотне других сайтов). По такому же сценарию «поисковик» поступает с контентом дорвейного вида, машинным рерайтом и так далее. Кстати, если на вашей странице контент уникален, но его очень мало (например, это может быть страница галереи, на которой размещена одна лишь фотография с подписью), к вам тоже легко могут применить санкции – такие страницы тоже считаются малоинформативными.
3. Причиной исключения страниц из индекса может стать большое число исходящих ссылок. Причем в каждом конкретном случае число ссылок, которое не понравится «Яндексу», может быть разным: иногда это 10 ссылок на одной странице, а иногда 5.
4. Придирчивому роботу может не понравиться и весь ваш сайт в целом. Нередко случается, что представления владельца сайта и «Яндекса» об уровне ресурса в корне не совпадают. В этом случае выход может быть один: анализируйте сайты удачливых конкурентов, изучайте требования самого «Яндекса» («Помощь вебмастеру») и глубже погружайтесь в поисковое продвижение сайтов, просите опытных специалистов оценить ваш сайт.
5. Создавать проблему вам могут и внутренние дубли страниц – это страницы либо с одинаковым, либо с очень похожим содержанием, которым присвоены разные адреса. Такое чаще всего случается при неправильной настройке CMS сайта. Запретить создание дублей можно в текстовом файле robots.txt, который находится в корневой директории ресурса.