Размещено на http://www.allbest.ru/

Размещено на http://www.allbest.ru/

Диссертация

на соискание академической степени магистра

Исследование механизмов и методов поисковой оптимизации интернет-ресурсов

Введение

сайт поисковый интернет

Во всем мире непрерывно происходит процесс информатизации, что естественным образом сказывается на всех сегментах повседневной жизни, будь то работа, учеба или развлечения. Как и во всем мире, развитие информационных технологий в нашей Республике происходит во всех сферах повседневной жизни, основываясь на таких законах и постановлениях президента И.А. Каримова как «Постановление о мерах по дальнейшему развитию компьютеризации и внедрению информационно - коммуникационных технологий» и «Постановление о дополнительных мерах по дальнейшему развитию информационно - коммуникационных технологий». Благодаря существованию в нашей стране подобного рода законов, информационные технологии получают должное развитие, тем самым повышая уровень и качество получаемых знаний.

Стремительный рост информации требует как быстрых способов доступа к ней, так и удобных способов поиска. Совокупность всех этих факторов и послужила созданию поисковых систем, без которых мы уже не представляем повседневной жизни. Естественно, с развитием информационных технологий поисковые системы многократно претерпевали изменения, как малые так и кардинальные, но с каждым разом все более четко и точно создавался некий стандарт, свод правил, на основе которого и работали все Интернет-ресурсы. С момента зарождения поисковых систем ситуация кардинально изменилась: изначально поисковые системы подстраивались под сайты, но теперь поисковые системы сами диктуют нам правила, необходимые для полноценной и правильной индексации.

На данный момент времени в европейском и азиатском континенте бесспорное лидерство занимают два поисковых гиганта, носящих имена «Google» и «Yandex». Большинство прочих поисковых систем являются производными от выше упомянутых, такие как Рамблер, Mail.ru, Gogo, Апорт, Нигма.

То время, когда создание интернет-ресурса было главной и единственной задачей программиста, кануло в лету, теперь же в связи с бурным развитием средств поиска возник ряд проблем продвижения сайтов в поисковых выдачах, такие как:

1) высокая конкуренция;

2) подчинение всем правилам индексации;

3) значительное влияние сторонних ресурсов;

4) уникальность информации.

В связи с этим работы, посвященные решению вышеуказанных проблем, т.е. разработке новых методов оптимизации и модернизации существующих, а так же созданию новых правил оптимизации Интернет-ресурсов, являются весьма актуальными.

При разработке инструкций по оптимизации и взаимодействию следует учесть множество факторов, влияющих на поисковые выдачи, а так же на закрепление полученного результата. Далее с помощью применения данных способов оптимизации можно получить конкурентоспособный и высоко посещаемый портал.

Решение этой задачи, а также задач по повышению рейтинга в поисковых выдачах и является целью данной диссертационной работы.

Цель работы и задачи исследования. Целью настоящей диссертационной работы является разработка методов и способов оптимизации Интернет-ресурсов для поисковых систем. Основными задачами работы являются:

- обзор существующих методов и способов оптимизации Интернет-ресурсов;

- анализ эффективности существующих методов и способов оптимизации Интернет-ресурсов;

- сбор и модернизация существующих, а также разработка новых методов и способов оптимизации Интернет-ресурсов для повышения показателей в поисковых выдачах;

Научная новизна проведенных исследований заключается в том, что:

- в результате исследования разработан новых подход к оптимизации Интернет-ресурсов;

- разработаны новые способы использования и безопасного увеличения количества ключевых слов, подход к эффективному использованию изображений и оптимизированы основные параметры поиска.

Практическая ценность. Разработанный подход к оптимизации Интернет-ресурсов может быть широко использован для продвижения порталов в поисковых системах Google и Yandex. Особенностью подхода является увеличение скорости индексации и повышения рейтинговых показателей.

Объектами исследований являются поисковые системы сети Интернет - Google и Yandex, внутренняя структура Интернет-ресурсов.

Методы исследований.

Для решения сформулированных задач использованы теории оптимизации, теория информации и аналитические методы.

1. Анализ методов поисковой оптимизации

Поисковые системы уже давно стали неотъемлемой частью Интернета. Поисковые системы сейчас - это огромные и сложные механизмы, представляющие собой не только инструмент поиска информации, но и заманчивые сферы для бизнеса.

Большинство пользователей поисковых систем никогда не задумывались (либо задумывались, но не нашли ответа) о принципе работы поисковых систем, о схеме обработки запросов пользователей, о том, из чего эти системы состоят и как функционируют. К сожалению, раскрыть алгоритм работы любой поисковой системы, например поисковой системы Yandex, невозможно, так как данная информация носит засекреченный характер и не подлежит огласке при любых обстоятельствах.

Стандартный план работ по внутренней поисковой оптимизации сайта:

1. Анализ сайта на соответствие техническим требованиям. Большинство веб-мастеров не задумываются над тем, зачем они делают сайты и как созданный сайт будет воспринят поисковыми системами. И основная работа оптимизаторов состоит в исправлении ошибок веб-мастеров. Основные ошибки: использование конструкций <fontsize…> или <fontclass> вместо <H1>, <H2> для заголовков, использование в навигации выпадающих списков, реализованных с помощью скриптов, использование идентификаторов сессий в URL-ах для сайтов, выполненных на PHP и многие др.

2. Написание рекомендаций по исправлению технических ошибок и выполнение этих рекомендаций. Как правило, дальнейшие работы не имеют никакого смысла без выполнения всех рекомендаций, полученных в результате анализа сайта.

3. Подбор ключевых слов для разделов и страниц сайта. Подбор ключевых слов заключается в анализе статистики ключевых слов, которую дают поисковые системы и выборе наиболее запрашиваемых слов по теме сайта, раздела, страницы.

4. Создание семантического ядра сайта. Семантическое ядро - список слов и фраз, которые наиболее точно характеризуют тематику сайта. Семантическое ядро получается в результате анализа подобранных ключевых слов и центров прибыли сайта / компании. Семантическое ядро базируется на основных центрах прибыли сайта / компании и дополняется наиболее близкими по смыслу популярными запросами.

5. Корректировка навигации и URL-ов (адресов страниц). После составления семантического ядра становится ясно, что разделы или страницы должны называться иначе (не так, как называл их разработчик), соответственно нужно скорректировать наименования пунктов в меню и адреса страниц на более популярные или более соответствующие семантическому ядру сайта.

6. Написание МЕТА-тегов. По семантическому ядру пишутся META-теги TITLE, Description, Keywords (Заголовок, Описание, ключевые слова) для главной страницы сайта. Для разделов и внутренних страниц кроме META-тегов TITLE, Description, Keywords, пишутся <H1>, для динамических сайтов пишутся правила заполнения META-тегов TITLE, Description, Keywords и <H1>.

7. Корректировка содержания страниц. Чтобы страницы сайта могли выше подняться в результатах поиска в поисковых системах, необходимо оптимизировать тексты страницы под те запросы, которые соответствуют семантическому ядру. Как правило, добавляются оптимизированные предложения и заменяются словосочетания на более популярные синонимы, также прописываются ALTы для всех изображений, проводится ряд дополнительных мероприятий по оптимизации.

Оптимизация сайта под поисковые системы позволяет увеличить количество посетителей, привлеченных через поисковые системы (т.е. увеличить поисковый трафик сайта) за счет повышения позиций целевых запросов в результатах поиска поисковых систем. Оптимизация сайта увеличивает долю целевого трафика (потенциальных клиентов). В идеале оптимизация поднимает 5-7 самых популярных целевых запроса на первые позиции результатов поиска в нескольких основных поисковых системах. Первые результаты продвижения сайта в поисковых системах проявляются спустя 3-6 недель после завершения работ, а для англоязычных сайтов, ориентированных на международный рынок, - через 2-3 месяца. Но одним из замечательных свойств оптимизации является ее долгосрочное действие, при том, что такие работы проводятся единоразово. Оптимизация сайта под поисковые системы - это первоочередная задача любого сайта.

Оптимизация сайта под поисковые системы гарантирует увеличение поискового трафика и увеличение в нем доли целевого трафика. Одной из целей оптимизации является продвижение нескольких популярных целевых запросов на первую позицию в ряде поисковых систем, но это не может быть гарантировано, т.к. алгоритмы поисковых систем постоянно модернизируются. Кроме того, для удержания достигнутых результатов требуется постоянное проведение соответствующих мероприятий.

Но, в достижении успехакак и любой другой деятельности, в поисковой оптимизации имеется несколько подходов увеличения рейтинга в выдачах поисковых систем и привлечения посетителей на интернет порталы.

Всего существует три основных метода оптимизации: белый, серый и черный.

1.1 Белые методы поисковой оптимизации

Поисковая оптимизация-это подстройка кода, текста и других параметров сайта под алгоритмы поисковых систем с целью поднятия его позиций в выдаче без применения запрещённых и недобросовестных методов. Это комплекс мер по повышению посещаемости веб-сайта, основанный на анализе поведения целевых посетителей. Естественная оптимизация относится к комплексу мероприятий интернет-маркетинга.

Оптимизация соответствующая требованиям поисковых систем позволяет санкционированным путём, анализируя поведение потребителей, добиться максимальной отдачи от сайта, а именно возрастания целевой посещаемости, популярности ресурса среди пользователей Интернета и рейтинга в поисковых системах. Естественная, белая оптимизация, исключает любые «допинговые» методы оптимизации - рассылку спама, «накручивание» баннерных показов и другие методы чёрной оптимизации.

Комплекс мероприятий белой оптимизации

· Постоянное улучшение видимости сайта роботами поисковых систем

· Постоянное совершенствование удобства сайта для посетителей

· Постоянный анализ качества обработки заявок с сайта

· Постоянное совершенствование текстов на сайте - контента для формирования семантического ядра

· Постоянный анализ запросов, связанных с продвигаемым продуктом

· Постоянный поиск сайтов родственной тематики для создания партнёрских программ

Итак, ключевыми моментами являются:

· Контент. Тексты на сайте должны быть качественными - для того, чтобы привлекать пользователей. Кроме того, важным требованием к текстам является их уникальность, поэтому ограничиться простым копированием текстов не получится.

· Ключи - продолжение предыдущего пункта. Каждый текст на сайте должен содержать определенное количество ключевых фраз. Именно по этим фразам пользователи и будут находить сайт.

· Структура сайта должна быть предельно четкой, понятной для пользователя. Также важным моментом является то, что на сайте не должно быть идентичных страниц.

· Внешняя оптимизация: включение оптимизируемого ресурса в базы данных поисковых систем, регистрация в каталогах.

Способы внутренней белой оптимизации

Подбор и размещение в коде сайта META-тегов - краткого описания. Делается это с учётом слов и словосочетаний, по которым сайт должен находиться в поисковых системах. Страницы сайта должны иметьпонятный URL - это более удобно и людям, и поисковым машинам, которые учтут тему страницы. Оптимизацией текстов сайта, является обеспечение соответствия текстов META-тегам. Так, в тексте должны встречаться слова, обозначенные в META-тегах, как ключевые. Возможно также увеличение «веса» слова в тексте за счёт выделения его жирным шрифтом. Однако, переизбыток ключевых слов в тексте может навредить. Во-первых, текст может стать просто плохо читаемым. Во-вторых, поисковые системымогут расценить это как спам.

Немаловажной частью внутренней оптимизации является оптимизация файловrobots.txt. Это позволяет указать поисковым машинам, какие страницы индексировать не нужно, указать правильный адрес (с www или без), а также склеить зеркальные страницы.

Способы внешней белой оптимизации

Внешняя белая оптимизация - это распространение информации о существующем сайте, достигаемое за счёт проведения рекламных кампаний и других технологий маркетинга. Сюда также можно отнести регистрацию ресурсов в таких крупных каталогах, как DMOZ, Yandex. Каталог, или осуществление статейного продвижения.

Последний метод, вопреки распространённому мнению, лишь условно относится к белым. На данный момент поисковые системы не способны распознавать покупные ссылки в текстах, что открывает широкие возможности оптимизаторам проводить самостоятельную раскрутку сайтов без боязни наложения на них штрафных санкций. Но по своей сути данный способ представляет искусственное наращивание показателей, что нарушает правила использования поисковых систем.

Добавление сайта в базы поисковых систем - это своего рода «подсказка» поисковым роботампроверить и добавить соответствующий сайт с последующей выдачей его в результатах поиска. Регистрация сайта в авторитетных каталогах сайтов (DMOZ, Yandex. Каталог). Размещение пресс-релизов в интернете со ссылкой на продвигаемый сайт.

Так как белые методы направлены не на спамирование поисковых систем, а на предоставление интересной информации, повышение функциональности сайтов и уровня удобства работы с ними, это благоприятно сказывается на их популярности среди пользователей и обеспечивает естественный приток посетителей. Но главным достоинством белой оптимизации всё же является достижение стабильных показателей, которые не зависят от поисковых систем и не утрачивают своих значений при изменении их алгоритмов.

1.2 Серые методы поисковой оптимизации

Серые методы поисковой оптимизации - это методы поисковой оптимизации, которые официально не запрещены поисковыми службами, но и не могут быть расценены как неестественные средства продвижения сайта.

Серая оптимизация является основным инструментом продвижения сайтов. В отличие от чёрных методов, серые редко приводят к блокировке сайта или штрафных санкций со стороны поисковых систем, что и позволяет специалистам применять их для выведения ресурсов на первые позиции за сравнительно короткое время.

К серым методам поисковой оптимизации относятся увеличение частоты ключевых слов в текстах страниц, что часто приводит к их нечитабельности, такие как дорвеи без редиректа, а именно в том случае, когда не запускается автоматическое перенаправление на продвигаемый ресурс, а так же покупка ссылок и многое другое.

Увеличение частоты ключевых слов

При определении релевантности поисковые системы в первую очередь обращают внимание на то, сколько раз на странице встречается фраза, тождественная пользовательскому запросу. Этот параметр называется частотой ключевого слова. Чем он выше, тем более релевантным считается сайт. До недавнего времени оптимизаторы специально увеличивали частоту ключевых слов вплоть до полной нечитабельности текстов. На данный момент поисковые системы активно борются с подобными методами и снижают ранжирование при их выявлении.

Для определения частоты ключевых слов используются специальные математические алгоритмы, высчитывающие количество вхождений запросов на объём определяемого текста. При этом оптимальным соотношением считается 3-5%. Так какроботы поисковых систем не способны оценивать тексты с точки зрения читабельности, это обстоятельство и позволяет оптимизаторам увеличивать частоту ключевых слов до определённого предела, что, с одной стороны, нарушает правила использования поисковых систем, а с другой - не выходит за рамки установленных ими критериев.

Дорвеи

К методам серой оптимизации относится создание «серых» и «белых» дорвеев:

- «Серые дорвеи». Их главной целью является передача главному сайту приобретённых показателей, то есть выступание в роли доноров. В отличие от чёрных видов, серые имеют осмысленное текстовое содержание и по своей сути являются полноценными сайтами.

- «Белые дорвеи». Данный вид прежде всего несёт рекламную нагрузку и не нарушает лицензии поисковых систем. При их создании используется оригинальный контент и разрабатывается привлекательное графическое оформление. При попадании на «белый дорвей» посетитель видит рекламный текст со ссылками на продвигаемый сайт и при желании может переходить по ним.

Покупка ссылок

Покупка ссылок является одним из основных способов продвижения сайтов в поисковых системах и по своей сути представляет размещение ссылок на сторонних ресурсах в целях увеличения показателей продвигаемых ресурсов. Как правило, для этого используются специализированные биржи. Поисковые системы стараются бороться с подобным методом, но использование покупки ссылок не может привести к блокировке.

Деятельность по покупке и продаже ссылок, с учетом стремительного развития поисковых систем, становится рискованным делом и может привести к наложению определенных санкций на сайт со стороны поисковых систем. Если продвигаемый сайт использует поисковую оптимизацию (SEO), это значит, что оптимизатор вынужден согласиться со всеми правилами поисковых систем, которых он вынужден придерживаться, со всеми последствиями, в случае, если произойдет отступление от правил. Выбирая определенные методы влияния на результаты поиска, которые нарушают правила поисковых систем, необходимо понимать и учитывать, что это может подвергнуть веб-ресурс большой опасности. Если веб-ресурс, действительно, целиком и полностью зависит от трафика с поисковых систем.

Применение определенных новых методов может временно снизить этот риск опасности, но никогда не сведет риск к нулю, так как поисковые системы прилагают все большие усилия для борьбы с пользователями покупных ссылок. На строгость санкций поисковых систем очень сильно могут повлиять известность и авторитет вашей организации. При использовании каких-либо запрещенных методов крупными компаниями и популярными веб-сайтами существует меньшая вероятность применения к ним жестких санкций по сравнению с ресурсами мелких организаций, которые имеют больше шансов заиметь серьезные проблемы при поисковой выдаче или вовсе могут угодить в черный список.

1.3 Черные методы поисковой оптимизации

К чёрной оптимизации относятся все методы, которые противоречат правилам поисковых систем. Суть черных методов оптимизации заключается в том, что при правильном примени они позволяют получить трафик относительно быстро и бесплатно, но скорее всего подобный эффект будет очень недолговечен. Кроме того, использование черных методов ориентировано не только на обман поисковых роботов, но и на обман целевых посетителей, ради получения которых и делается раскрутка сайта. Сильно возрастающий в данном случае трафик не приведет к высокой конверсии, в связи с чем совершенно логично, что их использование запрещено поисковыми системами, и приводит к санкциям за попытку манипуляции.

Далее рассмотрим основные методы черной поисковой оптимизации:

Дорвеи

Как уже стало понятно, дорвеи могут быть всех трех цветов, все зависит лишь от способа и вида их применения. Дорвей в SEO словаре определен, как генерируемые автоматически страницы, которые создаются под определенный низкочастотный запрос. Далее эти страницы наполняются спамом с форумов, блогов, досок объявлений и других сайтов, которые могут содержать ссылки в системах комментариев или постов. Такие сайты легко выходят на первые позиции за счет высокой плотности ключевых слов в тексте и ссылок. При попадании пользователя на такую страничку с помощью скриптов или замаскированных ссылок происходит переадресация его на продвигаемый ресурс, который, как правило, не имеет ничего общего с тем запросом, что пользователь ввел в поисковике. Этот метод эффективен на очень короткий срок, после которого поисковики определяют искусственность сайта и все найденные черные дорвеибанятся.

Если при использовании скриптов, дорвеи легко обнаруживаются поисковиками, вариант, когда пользователь самостоятельно переходит на сайт, нажимая на кнопку или ссылку, отследить сложнее. Но это не гарантирует возможность не попасть под блокировку. Обманутые пользователи или недовольные конкуренты рано или поздно сообщат о нарушении и наказание обязательно последует.

Клоакинг

Клоакинг (от англ. сloaking - маскировка) заключается в том, что пользователю и роботу поисковой системы сервер выдает разный текст на странице.

Для определения посетителя сайта используется IP-адрес или UserAgent. Затем выдается либо удобная и информативная «человеческая» страница, либо страница для поисковика, обычно написанная с откровенным спамом под необходимые ключевые слова.

Не смотря на то что данный метод может быть относительно дружественным к пользователям Интернета, поисковые системы причисляют его к черным и при обнаружении применяют к сайту санкции, вплоть до исключения сайта из индекса. Кроме того, клоакинг-это достаточно трудоемкий метод и требует сразу ряда различных навыков: поисковой оптимизации, написания необходимого кода, а также знания имен и IP-адресов поисковых роботов.

Метод «переспама» ключами текста

Переспам диагностируется на страницах, на которых содержится слишком большое число вхождения ключей. Такая оптимизация стремительно теряет свою эффективность. Подобный текст вряд ли будет читабельным для пользователя, а поисковые системы при превышении определенного процента вхождений какого-либо ключа, перестают индексировать страницу. Дело в том, что в морфологии любого языка, распределение частоты употребления слов имеет характерную нормальную (распределение Гаусса) зависимость. И поисковики имеют весьма эффективные методы, которые автоматически определяют страницы с распределением слов, сильно выходящих за пределы «естественной зоны».

Использование невидимого текста

На странице помещается невидимый текст, совпадающий по цвету с фоном так, чтобы посетитель, в отличие от поисковой машины, его не видел.

Не смотря на простоту этого метода и возможность «схитрить» и использовать очень маленький шрифт или фон, немного отличающийся от текста и часто пропускаемый поисковиками, этот метод остается рискованным, в то время как белые методы поисковой оптимизации могут быть эффективнее и при этом безопасны.

Автоматически определить такой текст довольно сложно, и обычно сайт попадает под блокировку после соответствующего обращения со стороны конкурентов.

Методика одинакова как для ссылок, так и для текста:

1. Использование текста (ссылок) в цвете, идентичном (или схожем, который сливается) цвету фона сайта (иногда в самой ссылке используют сливающийся текст для дополнительно насыщения страницы ключевыми запросами).

2. Размещение текста позади изображений.

3. Использование для скрытия каскадных таблиц стилей (CSS).

4. Использование для текста и ссылок нулевого значения шрифта.

5. Маскировка ссылок под незаметные символы (например, дефис).

Подобные действия помогают оптимально объединить SEO и юзабилити сайта (получается, что пользователь видит качественный, не переполненный ключевыми запросами текст, уникальные тематические картинки, приятный дизайн, а поисковый робот считывает специально созданный и тщательно замаскированный для него SEO текст), но они, как известно, запрещены поисковыми системами.

Ссылочный спам

Ссылочный спам заключается в размещении огромного количества ссылок исключительно с целью наращивания «веса» в поисковых системах. Поисковые системы весьма не любят SEO ссылки, т.к. такой метод раскрутки напрямую нарушает лицензию Yandex. Таким образов выражается явная попытка манипулировать результатами выдачи. В последние время поисковые системы очень хорошо научились определять естественные ссылки от покупных. По крайней мере, сотрудники Yandex озвучивают вероятность правильности определения в 97%. А далее все просто - Yandex сам решает, какие из них и как именно их учесть. Вполне вероятно, что учет будет не в пользу продвигаемого проекта.

Есть несколько признаков ссылочного спама:

1. Появление ссылок в большом количестве на таких ресурсах, как форумы, гостевые книги, комментарии к личным блогам и т.д. Поисковые системы держат под наблюдением сайты, которые ссылаются на большое количество ресурсов. Если с данного рода порталов ссылки и учитывают, то обязательно с поправкой «кто именно ссылается».

2. Размещение большого количества ссылок в короткий промежуток времени.

3. Анкор-лист выбивается из «зоны естественного распределения» ключевых фраз. Это может быть повышенная плотность какого-либо ключа или неестественное использование одной из словоформ и т.п.

Спамдексинг

Спамдексингом называется метод черной оптимизации, при котором страницы сайта создаются только для индексации поисковыми системами, например, сверх меры насыщаясь поисковыми фразами, которые к тематике сайта не относятся. Нетематические поисковые фразы прячут от посетителей, набирая их очень мелким шрифтом, либо литерами того же цвета, что и фон страницы. В результате поисковую фразу видят только роботы, но не видят посетители, которые попадают по поисковой фразе «окна ПВХ», например, на сайт о продаже карельской берёзы для отделки бани. Прямой обман поисковой системы, осуществлённый только с целью выхода сайта в выдачу поисковик по наиболее популярным поисковым фразам.

Свопинг

Представляет собой замену содержимого страницы после того, как наполнение проиндексировано поисковиком. Сайты, продвинутые свопингом, находятся в верхних строках поисковой выдачи по поисковому запросу до следующей индексации. Получается, что продолжительность существования этих сайтов короткая, насыщенная большим количеством пользователей. Свопинг используют оптимизаторы, не заинтересованные в длительных проектах.

Линкбомбинг

В чистом виде линкбомбинг является, безусловно, методом чёрной оптимизации, хотя в целом ссылочный спам, к которому относится линкбомбинг, относится скорее к серым способам. Ссылочный спам при грамотной организации процесса далеко не всегда наказывается поисковыми системами и эффективен для продвижения. Суть ссылочного спама и в частности линкбомбинга заключается в продвижении сайта по нетематическому поисковому запросу. Например, если интернет-магазин косметики продвигается с помощью поисковой фразы «онлайн-сериалы», то поисковик может занести магазин в бан, но если поисковая фраза встроена в контент органично, то негативных последствий может и не наступить.

2. Разработка методики продвижения Интернет-ресурсов

В любой среде, будь то окружающая или информационная, существуют внешние и внутренние факторы, влияющие на показатели поисковых выдач. Каждый из факторов имеет свое влияние на позиции поисковых выдач. Конечно внутренние факторы являются основой, от которой и необходимо начинать работу над любым Интернет-ресурсом, но и не следует забывать о немалой важности внешнего влияния, так как чем больше сторонних ресурсов знает и говорит о вас, тем выше может подняться рейтинг вашего портала. В связи с этим для более подробного и детального изложения информации, разработку методики продвижения Интернет-ресурсов можно разделить на две основные части: внутреннюю и внешнюю оптимизацию.

2.1 Основные параметры поиска

Для работы поисковые системы используют множество параметров поиска для быстрого и точного нахождения запрашиваемой пользователем информации. Существует огромное количество критериев, по которым поисковые системы определяют идентичность запроса, релевантность сайта относительно него, а в дальнейшем и его позиции в поисковой выдаче. Сучетом постоянного развития поисковых систем, совершенствования технологий сбора, хранения и отображения получаемой информации, а так же смены алгоритмов, лежащих в основе их работы, время от временипроисходит как пропадание из учета существующих параметров, так и появление новых, по которым уточняются результаты поиска.

Чтобы быть уверенным, что основа на которой строится сайт, правильно подобран, необходимо использовать параметры, которые время от времени следует проверять и исправлять.

Вот основные параметры поиска, которые будут оптимизироваться в ходе выполнения диссертационной работы:

- ключевые слова;

- мета-теги;

- ссылки;

- заголовки;

- навигация;

- изображения;

- содержание страницы;

- перелинковка;

- перенаправления (редиректы);

- использование файла «robots.txt»

2.2 Внутренняя оптимизация

Внутренняя оптимизация - обязательный этап продвижения, без которого сайт никогда не попадет впервые строчки по тематическим запросам и следовательно не привлечет внимание потенциальных клиентов. Внутренней оптимизацией является работа над внутренними ресурсами интернет портала, такими как контент, ключевые слова, карты, дизайн, и т.д. Начать оптимизацию сайта стоит с составления списка ключевых слов, по которым в дальнейшем он будет продвигаться. Каждое ключевое слово или группу слов необходимо распределить по целевым страницам. Но прежде, чем это сделать, необходимо проанализировать конкурентов и посмотреть, какие страницы находятся в верхних позициях по высоко конкурентным запросам.

Например, если в первых 20 результатах выдачи по вашему запросу находятся лишь главные страницы сайтов, то вам также стоит выбрать для продвижения главную страницу. Конечно, если запросов много (например, при продвижении портала), то под высокочастотные запросы можно оптимизировать и внутренние страницы.

В целях снижения требуемого времени на продвижение и рационализации труда поисковые запросы стоит сгруппировать и на одну страницу, в последствии чего появится возможность продвигать нескольким ключевым словам. При внутренней оптимизации сайта важно не только то, что показывает поисковая система, но и содержание страниц. Если пользователь, пришедший по запросу, не найдет то, что ищет, то долго он на сайте не задержится. Это может негативно сказаться на поведенческих факторах, которые учитывают поисковые системы в своих алгоритмах ранжирования.

Мета-теги

Мета-теги используются для хранения информации предназначенной для браузеров и поисковых систем. Например, механизмы поисковых систем обращаются к мета-тегам для получения описания сайта, ключевых слов и других данных. Среди разработчиков сайтов существует мнение, что правильно написанные мета-теги позволяют подняться к верхним строчкам поисковых серверов. На самом деле это не так: на одних мета-тегах не строится оптимизация, но и неудачно выполненное содержимое мета-тегов может ухудшить рейтинг сайта.

Два мета-тега предназначены специально для поисковых серверов: description (описание) иkeywords (ключевые слова). Некоторые веб-мастера добавляли в раздел keywords ключевые слова, которые не имеют никакого отношения к теме сайта, но зато пользовались определенным успехом среди посетителей поисковиков. Однако, через некоторое время, поисковые системы научились бороться с таким явлением и проверяют содержимое веб-страницы на соответствие заявленным ключевым словам.

Некоторые принципы, относящиеся к мета-тегам:

· нельзя включать ключевые слова, которые не содержатся на страницах;

· нельзя повторять ключевые слова;

· мета-теги необходимо использовать по их прямому назначению;

· описание и список ключевых слов необходимо делать различными для каждой страницы сайта с учетом содержимого.

Мета-тег description

Большинство поисковых серверов отображают содержимое поля description (рис. 2.1) при выводе результатов поиска. Если этого тега нет на странице, то поисковый движок просто перечислит первые встречающиеся слова на странице, которые, как правило, оказываются неподходящими к теме страницы [17].

<! DOCTYPEHTMLPUBLIC «- //W3C //DTDHTML 4.01 //EN» «http://www.w3.org/TR/html4/strict.dtd»>

<html>

<head>

<title>description</title>

<meta http-equiv= «Content-Type» content= «text/html; charset=utf-8»>

<meta name= «description» content= «Сайтоб HTML исозданиисайтов»>

</head>

<body>

<p>…</p>

</body>

</html>

Рис. 2.1. Пример использования Description

Мета-тег keywords

Этот метатег был предназначен для описания ключевых слов, встречающихся на странице (рис. 2.2.). Но в результате действия людей, желающих попасть в верхние строчки поисковых систем любыми средствами, этот способ теперь дискредитирован. Поэтому некоторые поисковые системы пропускают этот параметр [17].

<! DOCTYPEHTMLPUBLIC «- //W3C //DTDHTML 4.01 //EN» «http://www.w3.org/TR/html4/strict.dtd»>

<html>

<head>

<title>keywords</title>

<meta http-equiv= «Content-Type» content= «text/html; charset=utf-8»>

<meta name= «Keywords» content= «HTML, META, метатег, тег, поисковаясистема»>

</head>

<body>

<p>…</p>

</body>

</html>

Рис. 2.2. Пример использования Keywords

Ключевые слова можно перечислять через пробел или запятую. Поисковые системы сами приведут запись к виду, который они используют.

Слова с ошибками и раскладкой клавиатуры

Ознакомившись с назначением мета-тегов, необходимо найти способ положительного воздействия данной методики на позиции в поисковых выдачах. Говорить о том, что данные теги необходимо использовать строго по назначению и составлять, основываясь на теме новости, нет необходимости. Но это использует любой конкурирующий сайт, следовательно необходимо придумать способ обойти конкурентов. Данным способом будет использование в ключевых словах слов с ошибками или неправильной раскладкой клавиатуры.

Также необходимо отметить, что подбор слов с ошибками требуется производить весьма тщательно, предварительно проанализировав, какие ошибки чаще всего допускают пользователи. Такие как автоматическая смена раскладки на определенных словах, грамматические ошибки или опечатки. (Примерами таких ошибок могут быть слова с нечаянно напечатанной соседней буквой на клавиатуре, такие как: «а, е; ч, с; е, н; ж, д; б, ю; з, х; и т.д.»)

Облако тегов

Рис. 2.3. Пример отображения облака тегов

Облако тегов, облако меток или облако ключевых слов - визуальное представление списка категорий (или тегов, также называемых метками, ярлыками, ключевыми словами ит. п.) применяемой на сайте классификации в виде изображения этих слов (рис. 2.3.) в специальной области в виде гиперссылок разного размера и, иногда, цвета, причём размер тем больше, чем больше объём данной категории (чем чаще используется этот тег).

Облако тегов приобрело популярность на сайтах, использующих фолксономию. В качестве элемента навигации список взвешенных слов даёт посетителю сайта обзор имеющейся информации и позволяет быстрее обнаружить нужное ключевое слово, т.е. чем больше встречается тем с одинаковыми ключевыми словами на сайте, тем больше будет иметь размер слова, в данном облаке. Тем не менее, облако не может быть единственным элементом навигации, а пользоваться текстовым поиском удобнее для поиска при наличии более конкретной информации об искомом.

Но облако тегов весьма хорошо индексируется поисковыми системами, что прибавляет определенные позиции сайту в поисковых выдачах, а также создает эффект перелинковки на сайте, что тоже в итоге сказывается на результатах поиска.

Заголовки в HTML

Язык разметки HTML позволяет задавать необходимые значения заголовков HTTP внутри <HEAD> с помощью тега <META>. При этом название заголовка указывается в атрибуте http-equiv, а значение - в content. Почти всегда выставляется значение заголовка Content-Type с указанием кодировки, чтобы избежать проблем с отображением текста браузером. Также не лишним является указание значения заголовка Content-Language[15]:

<html>

<head>

<metahttp-equiv= «Content-Type» content= «text/html; charset=windows-1251»>

<metahttp-equiv= «Content-Language» content= «ru»>

Рис. 2.4. Исходный код заголовков

Теги <h1>, <h2>, <h3>, <h4>, <h5>, <h6> (англ. header - заглавие) - теги-контейнеры, используются для создания заголовков.

Шесть уровней заголовков отличаются «важностью» и величиной шрифта. <h1> - самый важный и большой, <h6> - самый маленький. По умолчанию <h4> отображается тем же размером, что и стандартный текст.

Обычно заголовок кратко описывает смысл раздела, которому он предшествует.

Спецификации гласят следующее:

Заголовки на странице должны иметь четкую иерархию по уровням, т.е. h2 должен следовать после h1, h3 после h2 и т.д. Пропуск уровней в последовательности заголовков может создать впечатление, что структура документа не была должным образом продумана или что определенные заголовки были выбраны для их визуального исполнения, а не их значения.

Поисковая система Google говорит практически то же самое:

Не советуется:

· использовать теги заголовков там, где больше подошли бы теги <em> или <strong>;

· беспорядочно переключаться от заголовков одного размера к другому

Также не следует чрезмерно использовать заголовки. Необходимо использовать заголовки только там, где они действительно необходимы. Слишком большое количество заголовков на странице дезориентирует пользователя и затрудняет понимание того, где заканчивается одна тема и начинается другая.

Не советуется:

· засорять страницу лишними заголовками;

· использовать заголовки только для стилизации текста, без определения структуры страницы.

Изучив спецификации, рекомендации поисковых систем, к тому жеоснову семантического HTML, можно сказать следующее:

· использовать заголовки только там, где действительно необходимо

· соблюдать четкую иерархию заголовков (h2 следует за h1, h3 после h2 и т.д.). Желательно не нарушать четкую последовательность уровней;

· желательно, чтобы первый заголовок (по коду) на странице был h1;

· не следует неупорядоченно переключаться от заголовков одного размера к другому.

Использование двойных заголовков

Особенностью данного метода является то, что в теле самой страницы, в начале новости, используются два заголовка вместо одного, являющиеся чаще всего синонимами по отношению друг к другу, а именно перефразированный текст.

Рис. 2.5. Исходный код заголовка

Как было сказано ранее, заголовки различаются величиной шрифта. Для более читабельного вида, заголовки представляются замаскированными в обычный текст для пользователя, но видимыми для поисковых систем. Достигается это элементарным уменьшением шрифта в коде самого заголовка.

Рис. 2.6. Отображение заголовков

В итоге на страниценаходится 3 заголовка. Первый заголовок находится в шапке темы (<h1>) освещающий название статьи, второй заголовок находится уже в теле самой новости (<h1>) и далее под вторым заголовком находится третий перефразированный заголовок, но уже на уровень ниже по своей структуре (<h2>).

Важным элементом является то, что оба заголовка первого уровня должны быть обязательно идентичными, иначе произойдет сбой при определении названия темы страницы. Так же использование двойных идентичных заголовков, дает небольшой прирост при определении и взвешивании ключевых слов на странице поисковым роботом.

Перелинковка

Перелинковка - связывание ссылками. Это слово произошло от английского слова link (линк). Оно означает не просто ссылку на страницу, а сочетание ссылок, с помощью которых происходит связывание страниц сайта. Если бы страницы сайта можно было представить в виде бумажных страниц, то ссылки прошивали бы их насквозь, как иголка с ниткой. Для поисковой оптимизации и продвижения сайта перелинковка имеет очень важное значение. Правильная перелинковка - это тот фактор, к которому с большим трепетом относятся и главные поисковые системы Google и Yandex [20].

Известно, что ссылки с анкорами, которые ведут на страницу, увеличивают ее вес, влияют на ранжирование при выдаче. Таким образом, ссылка с одной страницы на другую увеличивает ее уровень значимости.

Рис. 2.7. Стратегия использования перелинковки

Перелинковка страниц позволяет (рис. 2.7.):

1. Поисковым роботам быстрее индексировать сайт;

2. Пользователям свободно перемещаться по релевантным страницам сайта (что косвенно влияет на пользовательские факторы);

3. Правильно перераспределить статический вес сайта и указывать роботу релевантные страницы по приоритетным ключевым словам;

Наряду с этим различают внешнюю и внутреннюю перелинковку.

Внешняя перелинковка

Внешняя перелинковка означает, что сайт или страница сайта ссылается на другой сайт. Если «хороший» продвинутый сайт ссылается на более слабый сайт, то с этой ссылкой он передает ему часть своего веса и поднимает его авторитет. Ссылка с равного сайта придает меньше веса, но в любом случае, считается. Но что случается, если два дружественных сайта взаимно обменялись ссылками? В этом случае польза ссылок обесценивается с точки зрения поисковиков. Поэтому, если организован дружественный обмен ссылками, т.е. перелинковка, то нужно так распределить ссылки, чтобы сайты не ссылались друг на друга. При публикации ссылок нужно учесть, что ссылка с анкором предпочтительнее, в связи с тем что анкор, который является ключевым словомстраницы, на которую он ведет, также прочитывается поисковым роботом. Робот сравнивает анкор-ключевое слово и ключевое слово страницы и сопоставляет их, таким образом повышая или понижая ранжирование.

Внутренняя перелинковка

Внутренняя перелинковка - размещение ссылок с одной страницы сайта на другую или другие. Этот вид размещения ссылок не менее важен. У внутренней перелинковки есть три основных назначения:

1. Повышение юзабилити. Это та сторона сайта, которая обращена к пользователю, то, что делает сайт приятным и удобным для посетителя, заставляет посетителя возвращаться на сайт. Внешняя перелинковка дает возможность легче находить нужные страницы посетителю, отсылает его к схожим темам, помогает ориентироваться.

2. Продвижение страницы. Внутренняя перелинковка продвигает страницы по низкочастотным запросам, то есть по тем запросам, с которым в поисковик обращаются довольно редко.

3. Увеличение веса страницы. Условно говоря, все новые страницы имеют ноль веса. Но как только страница получила на себя ссылку, вес ее увеличился. Если с этой страницы сделать ссылку на другую «нулевую страницу», то вес ее соответственно перенесется. Важно, чтобы страницы не ссылались взаимно, а перелинковка шла по кольцу.

В итоге мы получаем, что грамотная перелинковка имеет большие преимущества по сравнению с перелинковкой, которая сделана дилетантски. Вот основные принципы профессионального распределения внутренних ссылок:

§ использование анкоров, которые являются ключевыми словами продвигаемой страницы;

§ реализация принципа кольцевой перелинковки, когда страницы расположены быд-то по кругу: в этом случае вес ссылок работает лучше, он возвращается на первую страницу;

§ несколько ссылок с разных страниц на продвигаемую страницу;

§ отсутствие внешних ссылок с тех страниц, которые продвигаются.

Карта сайта

На современных сайтах практически всегда используется специальная карта сайта. Следует различать карту сайта для посетителей и карту сайта для поисковых машин - они выполняют совершенно разные задачи.

Карта сайта для посетителей выполняется в HTML. Она служит для облегчения навигации по сайту, имеющему большое количество внутренних разделов. Карта сайта в HTML представляет собой специальную страницу на сайте, на которой собраны все ссылки сайта с учетом их иерархической структуры. Благодаря карте сайта доступ к любой из страниц сайта осуществляется буквально за один клик [16].

Карта сайта в XML-формате необходима для поисковых машин. С помощью такой карты можно управлять индексацией сайта в поисковых системах. Карта сайта в XML облегчает индексацию, поскольку позволяет собрать всю необходимую для поисковых машин информацию о сайте в едином файле.

Карта сайта в HTML может быть выполнена в различных вариантах. Это может быть обычная текстовая карта сайта, где структура сайта представлена в виде текстовых ссылок. Это также может быть графическая карта, в которой используются графические ссылки.

Создавать карты сайта, HTML или XML, можно вручную или с помощью специальных редакторов. Такие редакторы можно найти в виде отдельных приложений или же в виде расширений (плагинов) к существующим системам управления сайтами (CMS).

Удобство использования посетителями обязательно должно учитываться при создании карты сайта. Так, если ссылка на карту сайта расположена где-нибудь в неожиданном месте страницы, то посетители могут ее не найти. Тогда и польза от такой карты сайта будет равна нулю. Желательно сделать ссылку на карту сайта хорошо заметной.

Если карта сайта из-за обилия графики загружается медленно, заставляет посетителя ждать, то, опять же, такая карта более вредна чем полезна для сайта. Лучше не перебарщивать с графикой в карте сайта и отдать предпочтение текстовой карте сайта.

Текстовую карту сайта следует оформить в соответствии со структурой сайта. То есть следует визуально выделить заголовки и подзаголовки, использовать отступы, выделенный текст. Такая карта сайта будет более удобной для посетителей.

По желанию можно добавить к ссылкам в карте сайта краткие описания, поясняющие, куда именно ведут эти ссылки. Можно также добавить краткое описание всего сайта в начале страницы с картой.

Учитывая все вышеперечисленное, при создании карты сайта следует придерживаться следующих рекомендаций:

· карта сайта не должна «выпадать» из общего дизайна сайта;

· карта сайта должна одинаково выглядеть в любом браузере;

· следует воздержаться от графических элементов в карте сайта, чтобы не замедлять загрузку сайта;

· карта сайта должна соответствовать структуре самого сайта;

· ссылка на карту сайта должна располагаться на видном месте.

Карта сайта - это очень полезный документ, как для посетителей (html) так и для поисковых роботов (xml). Если на ресурсе есть карта сайта, то следует поддерживать ее в актуальном состоянии: проверять частоту и правильность обновления карты, следить за добавлением или удалением ссылок при добавлении / удалении категорий, разделов, отдельных материалов.

Псевдокомментарии и боты

В чатах, бот-компьютерная программа, выполняющая различные функции, и использующая для ввода и вывода сообщения, поддерживаемые протоколом данного чата. Бот - сокращение от слова «робот». Боты бывают для протоколов IRC, сервисов мгновенного обмена сообщениями и других чатов. Принцип работы состоит в том, что бот принимает входящие сообщения, анализирует их и отсылает результат выполнения и / или выполняет команду.

Использование бота "псевдо комментатора»

В данном случае бот-комментатор представляет собой компьютерную программу, которая оставляет сообщение на страницах интернет-порталов. Основной идеей применения ботов-комментаторов является оживление новости и придание ей вида живого общения пользователей с использованием ключевых слов комментируемой новости. Второй причиной применения данного комментирования является повышение количества ключевых слов на странице, которые учитываются поисковыми системами при добавлении страницы в индекс.

Использование изображений

Практически ни один современный сайт не обходится в оформлении без графических элементов, которые делают его дизайн более привлекательным. Однако, следует обдуманно и аккуратно подходить к оформлению страниц с их использованием.

Первостепенной задачей необходимо заполнить атрибут ALT тега <IMG>. Все изображения на странице могут иметь «альтернативный текст», который задается в атрибуте ALT тега <IMG>. Этот атрибут полезен по двум причинам:

1. Если по какой-либо причине картинка, вставленная на страницу сайта, недоступна, текст из атрибута ALT будет выведен вместо нее и позволит пользователю судить о ее содержимом.

2. Информация из этого атрибута помогает «картиночному» роботу, который индексирует изображения. Если указан атрибут ALT, поисковой системе проще понять, что представляет собой данное изображение.

Второстепенной задачей является дублирование текста, представленного картинкой. Робот Yandex не умеет (пока) распознавать текст, представленный в виде графического изображения, а текст из атрибута ALT не попадает в основной индекс. Поэтому не следует использовать картинки как замену тексту. Если использование графического элемента с текстом необходимо, следует продублировать то, что написано на картинке, текстом. Тогда никакая нужная для корректного ранжирования информация не будет упущена.

Существуют некоторые особенности.

Графическое меню. Меню сайта, выполненное в виде изображений, а не текстов, хоть и дает возможность перейти по ссылке на внутренние страницы, но не дает Yandex представления о том, какая именно информация на них размещена. По возможности следует предоставить альтернативное текстовое меню со ссылками на основные разделы сайта.

Если дизайн сайта выполнен с применением технологии flash, обязательно надо сделать и текстовую версию сайта. Она будет полезна как пользователям, у которых не установлена совсем или установлена устаревшая программа отображения flash, так и пользователям мобильных устройств, а также роботу Yandex, который сможет полноценно и без ошибок проиндексировать сайт. На индексирование flash применяются некоторые ограничения. Также не следует заменять текст изображениями, для того чтобы вся нужная информация была проиндексирована. Если картинки используются как иллюстрация к тексту, следует размещать их как можно ближе к фрагменту текста, который они иллюстрируют. Если такой возможности нет, необходимо сопроводить их подписями непосредственно рядом с картинкой.