Скоростные препятствия для спайдеров на вашем сайте
Воскресенье, 12 Июн 2011 17:56Рубрика: Интересные статьи
Комментариев нет
Некоторые типы навигации могут создавать препятствия либо совсем делать невозможной обработку контента на сайте поисковиками. Спайдеры во время своего передвижения по сети в поиске новых документов или для повторного посещения измененных опираются на гиперссылки, точнее на их архитектуру. Глубокая структура сайта, сложные ссылки с малым количеством уникального контента могут стать своеобразным бампером. Данные, доступ к которым не может быть получен при помощи ссылок, принято называть стенами.
Какие скоростные препятствия могут возникнуть?
- — странички, которые были созданы на основе фреймового дизайна, как правило. Создают препятствия в обработке спайдером и определенные затруднения в момент определения результатов ранжирования;
- — странички, которые для включения навигации делают запрос Cookie или «ID сессии»;
- — странички, расположенные на расстоянии больше 3 кликов от главной страницы сайта (очень часто спайдеры игнорируют странички расположенные в глубинных уровнях сайта, поэтому тема «вязание салфеток» может быть не проверена ими;
- — странички со 100 уникальными линками и более на другие страницы сайта;
- — URL с наличием более одного динамического параметра ( сложные URL обрабатываются очень неохотно.
Какие стены могут возникнуть?
- — странички, перенаправляющие на другой ресурс с целью показа контента;
- — странички, которые требуют вводить логин;
- — намеренно заблокированные документы, которые требуют перехода по какой-либо ссылке;
- — документы, которые можно просмотреть только при помощи строки поиска;
- — странички, имеющие всплывающее меню для входа;
- — странички, на которые можно попасть только через клавиши Submit или формы выбора.