Создание, раскрутка и поддержка Вашего сайта (материалы сборника “Бизнес, Секс, Автомобиль...”)

Индексация сайта поисковым роботом

Индексация сайта
поисковым роботом.


От успешной индексации сайта поисковыми роботами во многом зависит, появится ли этот сайт в результатах поиска или нет. На сегодняшний день ситуация такова, что поисковые роботы это далеко не самые совершенные программы и они пока не научились ладить с самыми современными технологиями web-строительства.

Поэтому если есть желание получить бесплатный трафик на сайт, то нужно подружиться с поисковиком. И первым делом необходимо приручить робота-паука (crawler), ответственного за индексацию сайта. Успеха в этом можно добиться очень просто. Нужно лишь позаботиться о том, чтобы программный код сайта был понятным для паука.

Для этого достаточно знать и понимать, что робот-паук интерпретирует HTML код страницы как обычный текстовый файл. Его содержание можно посмотреть в браузере, нажав на "Исходный код страницы" в FireFox'е или "просмотр HTML кода" в IE.

Паук видит тоже самое. При этом он не понимает скриптов, Flash и прочих новомодных фенечек. Он понимает только текст и HTML, который ему нужен для того, чтобы найти ссылки и перейти по ним дальше. Если робот не находит не ссылок, не текста, то он не индексирует сайт.

Выполняя работы по созданию сайтов, мне приходится сталкиваться с просьбами заказчиков сделать для их проекта меню на Flash или JavaScript. Я всегда пытаюсь объяснить, почему этого лучше не делать, если можно не делать. Конечно, бывают случаи, когда использование этих технологий необходимо. И можно предусмотреть дополнительные карты сайта для поисковика. Но все же лучше избегать этого.

Предотвратить возможные проблемы с индексацией на стадии проектирования сайта гораздо проще, чем потом исправлять уже созданный проект. Но по непонятным мне причинам для подавляющего большинства заказчиков основным критерием "хорошего" сайта является навороченный дизайн с точки зрения визуального восприятия, что является заведомо проигрышным подходом к созданию сайта.

Такой подход через некоторое время заставит обратиться за советом по оптимизации сайта и все же разобраться что же такое SEO.

В этой статье я приведу обзор только самых основных моментов, на которые надо обращать внимание при разработке сайта, чтобы исключить препятствия роботу индексировать сайт.

Меню и ссылки на JavaScript

JavaScript – замечательная технология, но злоупотребление ею приведет к тому, что индексация сайта закончится на первой странице. Поисковые пауки просто не понимают скриптовый язык и игнорируют его.

JavaScript обойтись никак нельзя, то обязательно на сайте нужно предусмотреть специально созданную для паука карту сайта. Без графики, без меню. Только список страниц со ссылками, которые должны быть проиндексированы.

Если страниц на сайте очень много, то размер файла может иметь очень большие размеры. Толку от него не будет. Поэтому большой файл карты сайта необходимо разбить на несколько мелких, вес которых не будет превышать 100 Кб.

Flash-технология

Flash это красиво, потрясающе, динамично и завораживающе. И если бы к этим плюсам не добавлялись минусы, то я был бы "за" использование этой технологии к месту и не к месту. Но, к сожалению, минусы Flash-технологии заставляют совсем иначе смотреть на ее применение на сайтах.

Два основных минуса: индексация сайта на Flash невозможна на сегодняшний день. Сайт на Flash имеет слишком большой вес и его просмотр требует скоростного подключения к интернет.

Flash, созданная лишь для красоты впечатляет только при первом знакомстве с сайтом. Затем постепенно это переходит в раздражающий фактор. Не верите? Попробуйте обратить на это внимание и задайтесь ответом на вопрос, а много ли сайтов, которые Вы посещаете постоянно, используют Flash в навигации и в оформлении? Зайдите на любой рейтинг и пройдитесь по самым популярным сайтам. Так есть Flash, кроме как в рекламных баннерах?

Адреса страниц сайта

Если создаваемый сайт планируется сделать большим, то для удобства его обслуживания чаще всего применяется одна из серверных технологий: PHP, ASP, Cold Fusion, JSP. В этом случае адреса страниц сайта могут иметь приблизительно такой вид:

www.mysite.ru/page.asp?item=470&category=43

Причем количество различных параметров после знака вопроса может быть очень большим. Не смотря на то, что в последнее время наиболее продвинутые поисковики научились индексировать такие сайты, все же это не лучший вариант формирования URL.

Потому, что большинство поисковых систем вводят ограничения на индексацию подобных сайтов. И этого фактора должно быть достаточно для того, чтобы избегать подобного явления.

Еще большее зло представляют страницы, в адрес которых добавляется параметр сессий sessid: www.mysite.ru/common.php?sessid=2104466633425a339ad69a4&prod_id=212

Опасность этого явления в том, что в данном случае одна страница может иметь неограниченное количество адресов. Ведь каждый раз, когда паучек заходит на сайт, странице присваивается новый sessid, а это означает новую страницу, что в действительности не так. Вот и приходится поисковым роботам разбираться, индексировали они раньше эту страницу или нет… а кто любит дополнительную работу?

Фреймы

Поисковые роботы не понимают и фрейм-технологию. Поэтому если Вы используете ее на сайте, то можете быть уверены в том, что индексация сильно затруднена. И перед тем как применить фреймы надо очень хорошо подумать. А действительно ли их использование так необходимо?

И если придете к выводу, что без фреймов не обойтись, то позаботьтесь о содержании тега NOFRAMES на главной странице сайта. Внесите в него всю значимую информацию, которая должна быть проиндексирована. Задача, скажу я Вам по-секрету, не из простых.

www.mysite.ru или mysite.ru?

Проверьте, доступен ли ваш сайт с WWW. в адресной строке и без WWW. Если один из вариантов написания адреса сайта не открывает страниц, то попросите своего хостинг-провайдера внести соответствующие изменения в настройки домена.

На этом на сегодня все. Это далеко не полный список параметров, которые нужно предусмотреть при создании сайта.

И всегда помните, что дешевле и эффективнее предотвращать проблему, чем исправлять уже сделанное. Не пренебрегайте оптимизацией структуры сайта и отдельных страниц на стадии разработки. Старайтесь не создавать дополнительных трудностей поисковым роботам. Индексация сайта очень важный элемент его раскрутки, особенно для низко- и среднебюджетных проектов, которые не могут постоянно вкладывать значительные средства в поддержание популярности сайта.



Автор: Евгений Стрельников

Оставьте свой комментарий к статье!

На странице "Книги - бесплатно" Вы можете СВОБОДНО скачать некоторые материалы раздела "Бонус" немедленно.







Комментарии:

Комментариев еще нет. Вы будете первым!



Ваш комментарий к статье: Правила комментирования:

Имя (обязательно)
E-mail (не показывается, обязательно)
Защита от спама: введите сумму цифр 8+7= ? (обязательно)


Поиск по сайту:



Новые статьи
прямо в Ваш почтовый ящик!

В каждом выпуске ссылка
на БЕСПЛАТНОЕ скачивание
одной из книг раздела "Бонус".

Просто заполните
приведенную ниже форму!







[ В раздел ]  [ Вверх ]  

[ Главная ] [ Разделы сборника ] [ Бонус ] [ Заказ сборника ] [ Контакты ]
Copyright © 2007 - 2016 by Геннадий Нестеров