Энциклопедия заработков

Новый увлекательный сайт WIKI

fleger — Mon, 29 Jun 2009 20:45:53 GMT

Открылся новый увлекательный сайт WIKI

Посетите новый портал самых популярных и посещаемых сайтов Интернета WIKI по адрессу http://wikis.pp.ua/.

Только на даном сайте, Вы сможите почитать про свои любимые сайты, узнать про них больше полезной информации.

Заходите на сайт wikis.pp.ua/, читайте, ищите, регестрируйте свои сайты! Ощутите самый сок информации!

WWW.ODNOKLASSNIKI-B.AT.UA - Все про Однокласcники.ru

fleger — Fri, 19 Dec 2008 21:20:45 GMT

WWW.ODNOKLASSNIKI-B.AT.UA - Все про Однокласcники.ru

На сайте WWW.ODNOKLASSNIKI-B.AT.UA Вы узнаете все про сайт Одноклаcсники.ru. Только на WWW.ODNOKLASSNIKI-B.AT.UA последние новости, интриги, анекдоты про сайт Однокласcники.ru.

На сайте полно интересных историй. На WWW.ODNOKLASSNIKI-B.AT.UA существует форум про сайт Одноклассники.ru, на котором учасники делятся cвоими историями, впечатлениями и новими слухами про сайт Одноклаcсники.ru.

Кто создал сайт Одноклассники.ru?

Почему сайт Одноклассники.ru стал таким знаменитым?

Что планируют создатели сайта Одноклассники.ru?

Как отыскать нужные группы на сайте Одноклассники.ru?

Сколько зарабатывают и как администрация сайта Одноклассники.ru?

На все эти и другие вопросы Вы можете найти ответ на сайте WWW.ODNOKLASSNIKI-B.AT.UA.

Заходите на сайт WWW.ODNOKLASSNIKI.UCOZ.UA и Вы узнаете много новой и полезной информации.

Не забудьте рассказать о нем своим близким и друзьям!

Памятка продавца розничного магазина

fleger — Sat, 18 Oct 2008 14:32:46 GMT

Памятка продавца розничного магазина

Этот свод правил для продавцов вобрал в себя опыт скрытого управления покупателям. Итак, вот эти правила:
Подходите к покупателю тогда, когда он нуждается в получении информации. Дайте ему оглядеться и освоиться. Наблюдайте, и вы поймете, когда вы нужны.
Начинайте общение с покупателем с приветливой улыбки.
Вежливо поинтересуйтесь: «Могу ли чем вам помочь?», «Что вас интересует?» и т.п.
Выспросите пожелания клиента, поймите, что для него главное (модность, практичность, цена, качество, оригинальность).
Только после этого рекомендуйте товар, подчеркивая, что он удовлетворяет главным требованиям данного покупателя.
Завяжите беседу, при этом следите за реакцией покупателя, постарайтесь понять его мысли и чувства, а также чтобы в вас он увидел не продавца, а собеседника.
Постарайтесь произвести впечатление полной объективности: если что-то не подходит покупателю, не доказывайте что «подходит». Увидев недовольство, скажите: «Давайте посмотрим другое...»
Если подходит — будьте умеренны в восторгах.
Во время разговора с покупателем:
смотрите попеременно на него и на товар (ни одного взгляда в сторону!);
не вступайте в спор; соглашайтесь, чтобы потом перевести разговор в нужное вам русло;
избегайте в своей речи частиц «нет» и «не»;
держите руки на виду у покупателя;
используйте жесты доброжелательности, не пользуйтесь «нервными жестами» (вертеть что-то в руках, теребить, грызть карандаш и т.п.) и жестами закрытости (скрещенные руки и/или ноги);
излагая аргументы, самый сильный скажите последним.
Во время беседы с покупателем находитесь на расстоянии дружеского общения (50—120 см), причем с женщинами ближе, чем с мужчинами.
Разговаривая, лучше находиться рядом, а не напротив клиента, особенно если клиент — женщина. Если это возможно, предпочтительнее находиться слева от покупателя.
Слушая покупателя, следует слегка кивать ему в такт каждой его новой мысли.
Поддерживайте манеру разговора покупателя (темп, громкость речи). Примите ту же позу, что и покупатель, если эта поза не из числа негативных.
Слегка наклонившийся к собеседнику воспринимается как более внимательный и доброжелательный.
Каждому покупателю постарайтесь сделать комплимент. Мужчины поддаются на комплименты еще лучше, чем женщины, хотя внешне это проявляют меньше.
Разговаривая с клиентом, следует учитывать, что на мужчин больше влияет общее впечатление, а женщинам важны детали, которые мужчинам обычно представляются несущественными.
Имейте под рукой чем занять нетерпеливого клиента во время обслуживания другого покупателя: каталоги, проспекты, книгу (листки) заказов.
По возможности приходите на помощь другому продавцу, который не успевает уделить внимания собравшимся покупателям.

Убеждающие слова (вызывают положительные эмоции):
- Молодой
- Смелый
- Надежный
- Совершенство
- Настоящий
- Современный
- Незаменимы
- Солидный
- Недорогой
- Стильный
- Оригинальный
- Отличный
- Увлечения
- Привлекательный
- Ценность Прекрасный
- Чистый
- Престижный
- Чудесный
- Радость
- Шикарный
- Развлечения
- Рекомендуют
- Эксклюзивный
- Роскошный
- Элегантный
- Самостоятельно
- Эффектный
- Вкус
- Восхитительный
- Выразительный
- Гармоничный
- Дом
- Единственный
- Замечательный
- Здоровье
- Исключительный
- Качество
- Красота
- Любовь
- Личность
- Достойный
- Экономия
- Спортивный

Вот такая она Памятка продавца розничного магазина http://fleger.ucoz.ru/index/0-4

Секреты популярности сайта

fleger — Sat, 18 Oct 2008 14:26:57 GMT

Секреты популярности сайта

Информация
Подумайте, хорошо ли раскрыта тема вашего сайт на его страницах. Что в основном пользователь ищет в интернете? Информацию.От различных товаров до банальных новостей. Предоставляйте информацию на доступном языке, а не ломанном: "Ну чо, тип, короча, здарова...", избегайте грамматических ошибок.

Шаблон сайта
Выбор шаблона очень важен. Сразу отмечу: не советую пользоваться фреймами. Хотя яндекс индексирует фреймовые страницы, некоторые поисковики - нет.
Основное различие используемых шаблонов - это местонахождение меню сайта.: вертикально, слева и т.д.

Навигация по сайту
Если мыслить логически, то удобнее всего - это меню справа, т.к. пользователь, прочитав стороку текста, глазами попадает на навигационную панель(меню). Но приверженность рядовых сайтов к панели слева просто приучила пользователя, дочитав текст до конца, перескочить глазами на панель слева.
Виды панелей:
1. Обычные
2. +DHTML - эффекты (изменение цвета при наведении на ссылку и т.д.)
3. С подсветкой (как на нашем сайте)
4. Скриптовые (выпадающие меню и т.д.)
5. Flash-эвые
Сразу отмечу, что скриптовые и флэшевые ссылки не индексируются, хотя они очень красивы: (Поэтому рекомендую совмещать приятное с полезным, т.е использовать на сайте 2 вида меню. Если удачно оформить даже обычную панель, то может получиться не хуже скриптовой!

Цветовая гамма
Старайтесь не использовать на сайте много цветов. Обычно 2-4 цветов должно быть достаточно. Экспериментируйте с цветами. Тональность должна быть выбрана в зависимости от содержания сайта, т.е если у вас сайт о природе, выбирайте спокойные красивые тона.
Разрешение и поддержка скриптов
Статистика гласит:
63% пользователей - 800х600
31% ползователей - 1024х768
по 3% ползователей разрешения 640х480 и 1152х864.
Возьмите на вооружение эту статистику при создании своего сайта. Отсюда видно, что 31% посетителей, зайдя на сайт под 800х600, будут чувствовать себя дискомфортно. Решений этой проблемы есть 3 штуки:

Несколько версий сайта (под каждое разрешение)
В html- коде указать, чтобы страница растягивалась на весь экран (как у нас на сайте)
Написать довольно сложный скрипт.
Скрипты и "Куки" поддерживаются не всеми версиями браузеров, так что не рекомендую злоупотреблять скриптами.

Реклама на сайте
Посетитель не любит большое количество рекламы на сайте, а ещё больше - выскакивающие окна с рекламой, поэтому не злоупотребляйте рекламой на сайте. На простой странице сайта не должно быть больше 5-7 баннеров 88х31, 120х60 - не больше 2-х, а 468х60 - всего 1. Баннеры не должны резко бросаться в глаза, посетитель вашего сайта должен быть расслаблен, а не постоянно щурить глаза от ярких красок "ненужной" ему рекламы. С другой стороны посетитель всё равно уйдёт с вашего сайта, тогда почему бы не указать ему дорогу, путём предложения пойти на такой-то сайт.

Гостевая книга, форум, чат
Гостевая книга- место, где посетитель должен оставить мнение о вашем сайте и, по идее, должен посоветовать, что нужно улучшиь. Форум - средство общения посетителей: обсуждение, спор и т.д.
Чат - средство общиния на очень популярных сайтах. Но можно на не очень популярном сайте осуществить следующее: вы на главной странице пишите, что тогда-то, в такое-то время в чате будет сидеть профи, который ответит на все ваши вопросы. Можно разослать письма знакомым с призывом пообщаться.

Удачное, запоминающееся доменное имя
Согласитесь: www.anekdot.ru больше раз напишут в адресной строке, чем www.anek99.hosting.ua

Скорость загрузки страниц
Размер 1-й страницы не должен превышать 48 килобайт, для того, чтобы рядовой пользователь со скоростью 14 кbs за 10-20 секунд дождался-таки полной загрузки страницы.

Частота обновления
Вы должны обновлять свой сайт, иначе посетитель, посмотрев все страницы и не найдя ничего нового, больше к вам скорее всего не заглянет. Поэтому обновляйте сайт (добавляйте статьи, новости, фотографии и т.д.) хотя бы раз в неделю.

Число на счётчике
Согласитесь, что 10000 на счётчике внушает доверие. С другой стороны, он мог быть просто накручен. Я не сторонник накрутки и даже в neosape не пользуюсь neoswap`ами, смотрю всё в ручном режиме, поэтому на счётчике стоит гордая цифра, не перевалившая за 1000, но она - честно заработанная. Большое число на счётчике даёт психологический эффект: сайт посещаем, значит здесь есть что-то интересное. Решать вам.

Расстановка ключевых слов внутри сайта: забытые места

fleger — Sat, 18 Oct 2008 14:26:23 GMT

Расстановка ключевых слов внутри сайта: забытые места

Известно, что для высокого позиционирования сайта в поисковых системах необходимо размещать на страницах целевые запросы. Анализируя сайты (по просьбе их владельцев), я замечал ошибки при оптимизации, объединенные по одному признаку: неправильное составление текстов и расстановка ключевых слов. Здесь я хотел бы упомянуть о местах, где чаще всего, можно разместить ключевые слова. Кроме общепринятых title, keywords, description и alt ключевые слова и фразы можно (и нужно) разместить: В адресе сайта: Если вы еще не разместили сайт и не придумали его URL, задумайтесь, какие ключевые слова вы могли бы использовать в URL? Интересным является тот факт, что если вы готовите сайт для русскоязычных пользователей, то имеет значение английский вариант русскоязычных запросов. Часто набирая русский запрос в поисковых системах, в ответ на первом-втором месте выдаются сайты, в адресе которых присутствует английский эквивалент запроса. В имени страниц и подкаталогов сайта: Не помешает назвать подкаталоги сайта и внутренние страницы ключевыми словами (запросами). Если предполагаемые запросы достаточно велики – сократите их в названии до 7-10 символов. Учитывайте значимость английских эквивалентов русскоязычных запросов. Во внутренних навигационных ссылках: Панель навигации – один из самых сильных способов повлиять на высокое положение по ключевым словам. Во внутренние ссылки на разделы и страницы сайта нужно вписать ключевые слова. Хорошо, если панель навигации предусмотрена на каждой странице сайта. Все те же title и description: Не смотря на то, что практически все поисковики отказались от чтения meta keywords, не нужно забывать про title и description. Title особенно влияет на позиционирование по запросам из 2-х и более слов практически во всех ведущих поисковых системах. При всех возможностях начинить сайт ключевыми словами «от» и «до», следует помнить о том, что в среднем процент ключевого слова в тексте не должен превышать 3-5%. На отдельных страницах сайта допустима высокая «концентрация» ключевого слова – до 15-20%. Главное – сохранить смысл текста и не превратить страницу в банальный дорвей. Хочется отметить, что остальные 95-97% текста страницы также имеют значение для позиционирования. Поисковые системы распознают синонимы и общетематический набор слов и фраз. Поэтому фразу «домашние животные» лучше сочетать с «коты и собаки», чем с «дизайн и реклама».

Игорь Бурцев
igor@webmasterpro.com.ua
http://www.webmasterpro.com.ua/

Получить домен бесплатно

fleger — Sat, 18 Oct 2008 14:25:50 GMT

Получить домен бесплатно

На эту тему придумано немало мифов и выдумок, но всё же бесплатные домены - это абсолютно реально и нет ничего сложного в том, что бы получить доменное имя для своего сайта совершенно бесплатно.
Есть два вида доменов, которые чаще всего предлагается получить не заплатив за них ни копейки:
1. Бесплатный домен второго уровня
2. Бесплатный домен третьего уровня

Начнём пожалуй с простого - с доменов второго уровня.
Домен второго уровня, это домен вида domain.ru или domain.com и т.п.

Получение этих доменов бесплатно, ничто иное, как миф.
Т.е. на самом деле, в 99% случаев, платить вам всё равно придётся. Получить "бесплатно" домен второго уровня обычно предлагают хостинговые компании, предоставляющие платные услуги хостинга. При этом, для того, что бы получить домен бесплатно, вам необходимо заказать и оплатить хостинг, причём обычно - сразу на несколько месяцев или даже на год. Таким образом, полная стоимость домена обычно уже включена в стоимость оплачиваемого вами хостинга.
Тем не менее, экономия получается довольно ощутимой, ведь формально вы не платите за домен ничего. Просто бесплатным такой домен назвать сложно. Назовём его условно бесплатным и перейдём к бесплатным доменам третьего уровня.

Под доменами третьего уровня я подразумеваю домены вида domain.net.ru или domain.pp.ru и т.п. Сюда же можно отнести и домены предоставляемые бесплатными хостингами, вида domain.hostingname.ru, например, yourdomain.narod.ru
Бесплатные хостинги с их доменами оставим в покое, так как речь идёт о других доменах и посмотрим, как обстоят дела с доменами вида domain.net.ru

Здесь обстановка в корне отличается от доменов второго уровня. Эти домены действительно регистрируются совершенно бесплатно. Есть и подводные камни, но это уже мелочи...
Итак, для того, что бы зарегистрировать домен третьего уровня, вам необходимо посетить сайт www.ripn.net.

Зарегистрировать домен там, на первый взгляд довольно сложно, но на самом деле это не так.
Первым делом, вам необходимо зарегистрироваться в РосНИИРОС (регистрация физического лица).
Форма регистраци находится здесь.
Ничего сложного - следуйте инструкции системы В определенный момент, в процессе регистрации, вам будет предложено вести nic-handle службы поддержки домена или зарегистрировать свою службу поддержки. В этот момент нажмите зарегистрировать новую службу поддержки, при этом не пугайтесь, результаты уже заполненной вами формы не будут потеряны, после регистрации службы поддержки вы сможете продолжить регистрацию физического лица.

После того, как вы зарегистрируетесь, через некоторое время (день-два), вы получите письмо от RIPN, в котором будет сообщаться, что "Новый объект заведен в базе данных", другими словами, что ваша регистрация прошла успешно.
Вот теперь, начинается самое интересное - можно регистрировать домен.
Для этого, зайдите в свою панель управления (она находится здесь) и перейдите по ссылке "зарегистрировать новый домен" (по умолчанию, при входе в систему вы уже попадаете к форме регистраци новых доменов, так что даже и по ссылке переходить необязательно).
Далее, казалось бы, остаётся заполнить форму и всё, но...
Во первых, помните, наша цель зарегистрировать домен третьего уровня (там ведь можно и домен .ru выбрать в форме)

Помните, я обещал подводные камни?

Подводный камень номер 1:
Для регистраци домена необходимо указать нэйм-серверы. Что это такое и где их взять... Рассказывать что такое нэйм-серверы не входит в тему данной статьи, скажу лишь, что это серверы, которые находятся в сети (в Интернет) и указывают, что ваш домен доступен по такому-то IP-адресу.
А вот где их взять...
Вроде бы, где то существуют бесплатные сервисы, предоставляющие вам эти самые нэйм-серверы совершено бесплатно, что-то такое я встречал в сети, но честно говоря непомню. Найти такой бесплатный сервис - это вариант номер один.
Вариант номер два - это купить самый дешевый хостинг без домена. Только имейте ввиду, что хостинги стоимостью ниже одного доллара в месяц редко бывают качественными.. слишком редко... Я бы рекомендовал хостинг WebXL, там вы сможете получить хостинг, включая нэйм-серверы для поддержки вашего домена, начиная от 45 рублей в месяц - не слишком накладно наверное, пару раз не купить мороженое

Итак, хостинг символически купили, нэйм-серверы получили - именно эти нэйм-серверы необходимо вписать в форму регистрации домена.

Подводный камень номер 2:
А теперь, самая забавная на мой взгляд сложность. Дело в том, что с недавнего времени, по условиям регистраци доменов третьего уровня на RIPN, в час принимается не более четырёх заявок от ВСЕХ пользователей. Это значит, что все-все-все, кто находится в интернет и собирается зарегистрировать домен, ограничены единым лимитом четыре домена в час. Т.е., если в течение часа, раньше вас кто-то зарегистрирует четыре домена, то вам уже ничего не светит, остаётся ждать следующего часа.
Учитывая количество пользователей русскоязычной зоны интернет, несложно догадаться, СКОЛЬКО заявок поступает в течение часа... Какие уж там четыре...
Таким образом, регистрация доменов третьего уровня напоминает лотерею, повезёт-не повезёт.
Тем не менее, можно увеличить вероятность успешной регистраци домена. Для этого, заявку на регистрацию необходимо отправить как можно ближе к началу часа. Например в 03:00:05 (три часа, ноль минут, пять секунд). Таким образом, едва ли не с первой попытки вы получите долгожданный домен.
Причем совершенно бесплатно.
Вы можете несогласиться со мной и сказать, что пришлось платить за хостинг, но:
Во первых, никто вам не мешает попробовать найти сервис, предоставляющий нэйм-серверы бесплатно.
А во вторых, домен без хостинга всё равно не нужен, а бесплатный хостинг, вешающий на ваш сайт свою рекламу всего за 45 рублей в месяц - лучшее ли это решение? Неужели вы так низко цените собственый сайт ?
Почему именно 45 рублей в месяц?
Платный хостинг, о котором я упоминал здесь, обойдётся вам всего в сорок пять рублей в месяц.
Ну да, хостинги, платные и бесплатные - это уже совсем другая тема, а с регистрацией бесплатных доменов мы благопалучно разобрались

Поисковые системы

fleger — Sat, 18 Oct 2008 14:25:09 GMT

Поисковые системы

Базовая информация о работе поисковых машин

Поисковая машина - это специальный веб-сервис, на котором Вы можете по ключевым словам найти сайт с нужной информацией. Ключевые слова - это слова, наиболее емко описывающие тематику информации, которую Вы ищете.

Механизм поисковой машины обычно очень сложен, потому как обработка больших объемов информации занимает много времени и должна быть как можно более эффективна, быстра и емка.

Поисковые машины обычно состоят из нескольких частей:

1. Механизм поиска - то, что видят пользователи данной системы, то есть механизм, который позволяет по введенным ключевым словам найти какой-то список сайтов и определенным образом его отсортировать.

2. Робот-посетитель - программа, которая заходит на сайт, собирает на нем информацию, посещает все ссылки на этом сайте, собирает информацию там. Данный механизм предназначен для того, чтобы собрать информацию с сайта и принести ее поисковой машине. Адреса сайтов робот-посетитель берет либо с самих сайтов, либо из заявки на размещение сайта в поисковой системе.

3. Система индексирования представляет собой большое скопление информации (базу данных), приносимых в нее роботом-посетителем. Эта информация определенным образом структурируется и индексируется, чтобы впоследствии было легче выделить список сайтов по конкретным ключевым словам.

Для того, чтобы добавить свой сайт в поисковую машину, нужно, как правило, заполнить форму, в которой указываются данные о сайте и его адрес. Через некоторое время после этого на Ваш сайт зайдет робот-посетитель данной поисковой машины и соберет всю информацию, которую поместит в систему индексирования, которая, в свою очередь, данную информацию обработает и в определенном виде разместит для использования механизмом поиска.

Поисковые машины - основные источники посетителей

По статистике ведущих международных агентств, во всем мире порядка 95% всех посетителей сайтов приходят по запросам из поисковых машин, при этом около 80% запросов делаются из основных поисковых машин - самых крупных и развитых.

В России та же ситуация - из всех поисковых машин и каталогов львиную долю посетителей дают основные: http://www.yandex.ru/, http://www.rambler.ru/ и международная http://www.google.com/. Эта доля - это примерно 90% всех посетителей.

Именно поэтому поисковые машины - одна из самых важных частей рекламы сайта, его "раскрутки". Что требуется для того, чтобы поисковые системы начали работать на Вас:

1. Продумать ключевые слова, по которым Вас будут искать клиенты

2. Подготовить под каждую ключевую фразу (например, "зонтики из бамбука") несколько страниц со статьями или просто интересной информацией.

3. Следить за тем, чтобы ключевые фразы в статье были выделены - стояли в начале предложения, были подчеркнуты или выделены жирным или курсивом.

4. Следить за тем, чтобы процентное соотношение ключевых слов и фраз к общему тексту страницы было не более 10%.

5. После подготовки информации начать добавление в поисковые машины, для этого нужно:

o Найти список поисковых машин (в любом каталоге сайтов в категории Интернет).

o Зайти на каждую поисковую машину и добавить свой сайт.

o Подождать 1-2 месяца, пока информация будет собрана и проиндексирована.

6. Если Вы правильно выбрали ключевые слова и фразы (не самые популярные, но и не самые непопулярные - нечто среднее), на Ваш сайт придут посетители с поисковых машин.

Чего нужно избегать

1. Страниц, заполненных несвязным текстом, состоящим из одних только ключевых слов.
Это может повлечь исключение Вашего сайта из поисковой машины навсегда.

2. Списков ключевых слов, которые не видны на странице.
Это может повлечь исключение Вашего сайта из поисковой машины навсегда.

3. Большую концентрацию ключевых слов и фраз (более 10% от общего текста).
Такую страницу поисковая система может просто не проиндексировать, посчитав крайним случаем п. 1.

4. Размещение множества ключевых слов и фраз на одной странице.
Это неэффективно, тогда ни одна из ключевых фраз и слов не сработает.

Будьте честны с поисковой машиной, а значит, и с посетителем - тогда Ваш сайт будет посещаемым.

МЕХАНИЗМ ПОИСКОВИКОВ ИЛИ ПОВЫШЕНИЕ РЕЛЕВАНТНОСТИ САЙТА

fleger — Sat, 18 Oct 2008 14:24:04 GMT

Механизм поисковиков или повышение релевантности сайта

Вступление

На сегодняшний день найти нужную информацию в Интернете становится все сложнее и сложнее. Причиной этого является огромный рост количества сайтов и еще более большой рост информационного мусора, различной рекламы. Как часто

тебе приходилось делать запрос в любимом поисковике на поиск последней песни любимого исполнителя или лучшего xxx сайта? И как часто тебе приходилось наблюдать, что результат поиска совсем не связан с запросом? Вместо новой песни тебе предлагают вступить в финансовую пирамиду, а вместо лучшего xxx сайта заказать девушку по крайне низким ценам с доставкой на дом. Все это результат обмана поисковых роботов. О способах обмана и повышении рейтинга сайта в поисковиках рассказано в этой статье.

Принцип работы

Вот типичный пример работы рядового поисковика. Существует программный модуль (паук, spider), который бродит по ссылкам, считывает содержание страниц, и для каждого слова делает запись в индексном файле. Например, для слова «халява» будет создана примерно такая запись в индексном файле: «халява1». Затем в файле, где хранятся ссылки будет сделана запись «1 URL страницы». Пояснение: 1 – это номер, который связывает записи в индексном файле (таблице) и файле ссылок. Потом паук поползёт на другую страницу и наткнётся там опять на слово «халява». Теперь в индексной таблице он создаст запись: «халява12», а в таблице ссылок: «2 URL страницы». Когда пользователь наберет в строке поиска слово «халява», поисковик посмотрит индексный файл, найдет там строчку «халява», прочитает номера 12 и найдет в таблице ссылок адреса, соответствующие номеру 1 и 2, и выдаст их пользователю. Вот основной принцип работы поисковых систем, который носит название индексирование. От чего тогда зависит положение сайтов в результате поиска? Ответ: от релевантности, т.е. от соответствия документа запросу юзера. От чего зависит релевантность? Вообще, алгоритмы оценки релевантности отличаются у разных поисковых системах, и держатся в строжайшем секрете. Вот основные параметры:

Количество повторяющихся слов в документе.
Ключевые слова, заключенные в теги , , , , . Т.е. если страница связана с халявой, то лучше слово «халява» написать между тегами, , и в дальнейшем тексте выделять это слово.
Расстояние между ключевыми словами в документе. Чем меньше расстояние, тем выше релевантность.
Индекс цитирования – величина, обозначающая количество ссылок с других ресурсов на данный сайт. Чем больше сайтов ссылается на данный ресурс, тем больше индекс цитирования. Имеет значение и популярность сайта с которого идет ссылка.
Не менее важный параметр: толщина кошелька владельца ресурса. Поисковые системы делают люди, которым тоже хочется есть, пить пиво, покупать журнал «Хакер». И они показывают рекламу непосредственно в результатах поиска. Оплаченные ссылки, показывающиеся в верхних строчках результата поиска, не очень часто оказываются подходящими к запросу.
Естественно, что чем выше релевантность, тем выше окажется сайт в результате поиска, и тем выше вероятность того, что юзер зайдет именно на этот сайт. Следовательно, у тебя возникает вопрос о том, как повысить релевантность у поисковых систем.

Обман поисковиков

Вообще, обмануть современную поисковую систему довольно сложно, и с каждым днем это сделать становится все сложнее. В начале скажу о том, чего нельзя делать:

Использовать ключевые слова не относящиеся к тематике страницы. Ключевые слова были придуманы для облегчения процесса индексирования. По замыслу, вебмастеры помещали в тег , слова, которые наиболее полно отражали содержание их страниц. Тогда спам в сети еще не был так распространен как сейчас, и первое время ключевые слова действительно помогали найти нужную информацию. Но потом, создатели сайтов стали впихивать в этот тег самые популярные слова, которые набирались при поиске в Интернете, в надежде, что на их сайт зайдут посетители. С таким спамом большинство поисковиков научилось бороться: теперь пауки стали анализировать весь текст на странице и сравнивать его с текстом в ключевых словах, и если соответствия не находилось, то страница не индексировалась. Поэтому нет смысла включать ключевые слова, которых нет на странице;
Употреблять какое-либо ключевое слово много раз. Паук воспримет это как спам и перестанет индексировать страницу;
Размещать на странице популярные ключевые слова, например: Интернет, программы, компьютер, фото. Часто поисковой робот просто игнорирует эти слова, поскольку ими уже загружены десятки миллионов других страниц;
Использовать цвет текста равный цвету фона. Раньше к этим способом часто пользовались спамеры. Таким образом им удавалось скрыть слова от посетителя, но оставить их видимыми для пауков. Большинство поисковых систем умеет с этим бороться. Они сравнивают цвет фона в теге с цветом текста, и если значения оказываются равными, то индексация прекращается. Некоторые спамеры делают так: задают в теге , например синий цвет, цвет текста делают белым, затем указывают следующий тег: , где fon.gif – маленький рисунок белого цвета. Дело в том, что браузер для отображения фона страницы будет использовать файл fon.gif, и сделает фон белый, и слов не будет видно, тогда как пауку цвет фона будет казаться синим. У этого способа есть обратная сторона: многие юзеры в нашей стране не могут похвастаться быстрой связью, и поэтому часто отключают загрузку графики, и у них браузер будет отображать цвет фона таким, каким он указан в теге , т.е. в нашем примере синим, и посетитель будет видеть все слова, которые предназначались для поискового робота.

Помещать ключевые слова в отдельный слой (Layer) и делать его невидимым.
Использовать переадресаторы на странице типа . Этот тег через 5 секунд после загрузки перенаправит посетителя на сайт http://ca1.dax.ru/. Большинство поисковиков воспринимает это как спам. Этим примером часто пользуются xxx-сайты, помещая на страницу много ключевых слов, а посетителя практически сразу посылают на другой ресурс.

Повышение релевантности

Теперь о том, что нужно сделать, чтобы действительно повысить релевантность ресурса:
Самостоятельно прописывать ключевые слова на каждой странице сайта, стараясь, чтобы они максимально соответствовали тематике страницы;
Не ставить запятые после ключевых слов. Во-первых, это увеличивает размер файла, во-вторых, большинство поисковиков читает только первые 200-250 символов;
Составлять очередность слов в соответствии их важности. Самые важные слова должны стоять вначале;
Лучше, если слова, используемые в тегах , , , , а также в атрибуте ALT будут встречаться в ключевых словах;
Не стоит повторять ключевые слова на разных страницах сайта;
Некоторые поисковики отображают описание страницы из тега , а некоторые из первых строчек документа. Описание надо составлять так, чтобы юзеру захотелось зайти на сайт. Если первые строчки текста на странице адаптировать под описание не хочется, то можно пойти на хитрость. Сделать невидимый слой, с помощью каскадных стилей таблиц (CSS), и разместить его после тега . Т.о. поисковик, который отображает первые строчки документа будет отображать текст в невидимом слое. Стоит отметить, что не стоит составлять большое описание страницы, поскольку поисковики выводят обычно только первые 170 символов. Поисковые роботы плохо относятся к таблицам.
На каждой странице используй как можно больше ссылок на другие страницы твоего ресурса и как можно меньше на страницы других сайтов.
Как я уже говорил, оценка релевантности различается у разных поисковых систем. Более 90% всех запросов в мире приходится всего на пару десятков поисковиков, поэтому есть смысл рассмотреть технологию работы самых популярных из них.

Yandex

На сегодняшний день самая популярная в России поисковая система. Количество ответов Yandex’а на поисковые запросы превысило 147 миллионов. По заявлениям компании, yandex готов давать каждому жителю России по одному ответу в месяц. Поисковой паук Яндекса славится быстротой работы. Уже после нескольких часов, индексируемая страница становится доступна в результатах поиска.

Советы по оптимизации страниц для Yandex’а

Страницы должны быть среднего размера, насыщены текстом, ключевых слов не должно быть много. Слова, стоящие в аббревиатуре ALT ценятся на порядок ниже ключевых слов. Хорошо индексируются страницы, созданные скриптами: гостевые книги, доски объявлений, форумы, а также страницы, расположенные на бесплатном хостинге narod.ru.

Rambler

Один из самых молодых поисковиков, при разработке которого был учтен опыт других поисковых систем. Ежедневно робот рамблера скачивает около 2 миллионов страниц. При индексации ключевые слова не обрабатываются, а обработки подвергаются лишь те, которые посетитель может увидеть на экране. В результате поиска предпочтение отдается сайтам, зарегистрированным в каталоге Rambler Top100.

Aport

С момента добавления сайта в Апорт до момента его появления в поисковой базе проходит от двух-трех дней до двух недель. Не индексирует страницы, в адресе которых встречается символ «?». Кроме текста, который видит посетитель, Апорт индексирует еще заголовок документа (TITLE), ключевые слова (META KEYWORDS), описания страниц (META DESCRIPTION) и подписи к картинкам (ALT). Кроме того, Апорт индексирует как принадлежащие документу тексты гиперссылок на этот документ с других страниц, находящихся, как внутри сайта, так и за его пределами, а также составленные (или проверенные) редакторами описания сайтов из каталога.

Google

Релевантность в Google зависит от:

индекса цитирования;
ключевых слов;
ключевых слов в ссылках;
выделенных слов.
Поисковой робот Google отличается своим умением глубоко индексировать сайт, т.е. он старается охватить максимальное количество ссылок с одной страницы.

AltaVista

Особенности поиска на AltaVista: большую роль играет наличие ключевых слов в теге , также подписи к картинкам (ALT). Большую роль играют ключевые слова, в первой 1000 символов.

Заключение

Ну вот и все. Хочу отметить, что оптимизация страниц для поисковиков – это, пожалуй, самый важный этап в раскрутке сайта. Обмануть поисковик можно, но подумай, нужно ли тебе это? Ведь ничего, кроме негативной реакции посетителя ты не добьешься. А правильно оптимизированный сайт будет привлекать куда более активную аудиторию, такой трафик очень качественный и высоко ценится, поскольку пользователь приходит на твой сайт с определенной целью и намерениями.

Поисковые системы в сети Интернет

fleger — Sat, 18 Oct 2008 14:22:43 GMT

Поисковые системы в сети Интернет

1. Введение

Основные протоколы, используемые в Интернет (в дальнейшем также Сеть), не обеспечены достаточными встроенными функциями поиска, не говоря уже о миллионах серверах, находящихся в ней. Протокол HTTP, используемый в Интернет, хорош лишь в отношении навигации, которая рассматривается только как средство просмотра страниц, но не их поиска. То же самое относится и к протоколу FTP, который даже более примитивен, чем HTTP. Из-за быстрого роста информации, доступной в Сети, навигационные методы просмотра быстро достигают предела их функциональных возможностей, не говоря уже о пределе их эффективности. Не указывая конкретных цифр, можно сказать, что нужную информацию уже не представляется возможным получить сразу, так как в Сети сейчас находятся миллиарды документов и все они в распоряжении пользователей Интернет, к тому же сегодня их количество возрастает согласно экспоненциальной зависимости. Количество изменений, которым эта информация подвергнута, огромно и, самое главное, они произошли за очень короткий период времени. Основная проблема заключается в том, что единой полной функциональной системы обновления и занесения подобного объема информации, одновременно доступного всем пользователям Интернет во всем мире, никогда не было. Для того, чтобы структурировать информацию, накопленную в сети Интернет, и обеспечить ее пользователей удобными средствами поиска необходимых им данных, были созданы поисковые системы.

2. Поисковые системы

Поисковые cистемы обычно состоят из трех компонент:

агент (паук или кроулер), который перемещается по Сети и собирает информацию;
база данных, которая содержит всю информацию, собираемую пауками;
поисковый механизм, который люди используют как интерфейс для взаимодействия с базой данных.

2.1 Как работают механизмы поиска

Cредства поиска и структурирования, иногда называемые поисковыми механизмами, используются для того, чтобы помочь людям найти информацию, в которой они нуждаются. Cредства поиска типа агентов, пауков, кроулеров и роботов используются для сбора информации о документах, находящихся в Сети Интернет. Это специальные программы, которые занимаются поиском страниц в Сети, извлекают гипертекстовые ссылки на этих страницах и автоматически индексируют информацию, которую они находят для построения базы данных. Каждый поисковый механизм имеет собственный набор правил, определяющих, как cобирать документы. Некоторые следуют за каждой ссылкой на каждой найденной странице и затем, в свою очередь, исследуют каждую ссылку на каждой из новых страниц, и так далее. Некоторые игнорируют ссылки, которые ведут к графическим и звуковым файлам, файлам мультипликации; другие игнорируют cсылки к ресурсам типа баз данных WAIS; другие проинструктирова-ны, что нужно просматривать прежде всего наиболее популярные страницы.

Агенты - самые "интеллектуальные" из поисковых средств. Они могут делать больше, чем просто искать: они могут выполнять даже транзакции от Вашего имени. Уже сейчас они могут искать cайты специфической тематики и возвращать списки cайтов, отсортированных по их посещаемости. Агенты могут обрабатывать содержание документов, находить и индексировать другие виды ресурсов, не только страницы. Они могут также быть запрограммированы для извлечения информации из уже существующих баз данных. Независимо от информации, которую агенты индексируют, они передают ее обратно базе данных поискового механизма.
Общий поиск информации в Сети осуществляют программы, известные как пауки. Пауки сообщают о содержании найденного документа, индексируют его и извлекают итоговую информацию. Также они просматривают заголовки, некоторые ссылки и посылают проиндексированную информацию базе данных поискового механизма.
Кроулеры просматривают заголовки и возращают только первую ссылку.
Роботы могут быть запрограммированы так, чтобы переходить по различным cсылкам различной глубины вложенности, выполнять индексацию и даже проверять ссылки в документе. Из-за их природы они могут застревать в циклах, поэтому, проходя по ссылкам, им нужны значительные ресурсы Сети. Однако, имеются методы, предназначенные для того, чтобы запретить роботам поиск по сайтам, владельцы которых не желают, чтобы они были проиндексированы.

Агенты извлекают и индексируют различные виды информации. Некоторые, например, индексируют каждое отдельное слово во встречающемся документе, в то время как другие индексируют только наиболее важных 100 слов в каждом, индексируют размер документа и число слов в нем, название, заголовки и подзаголовки и так далее. Вид построенного индекса определяет, какой поиск может быть сделан поисковым механизмом и как полученная информация будет интерпретирована.

Агенты могут также перемещаться по Интернет и находить информацию, после чего помещать ее в базу данных поискового механизма. Администраторы поисковых систем могут определить, какие сайты или типы сайтов агенты должны посетить и проиндексировать. Проиндексированная информация отсылается базе данных поискового механизма так же, как было описано выше.

Люди могут помещать информацию прямо в индекс, заполняя особую форму для того раздела, в который они хотели бы поместить свою информацию. Эти данные передаются базе данных.

Когда кто-либо хочет найти информацию, доступную в Интернет, он посещает страницу поисковой системы и заполняет форму, детализирующую информацию, которая ему необходима. Здесь могут использоваться ключевые слова, даты и другие критерии. Критерии в форме поиска должны соответствовать критериям, используемым агентами при индексации информации, которую они нашли при перемещении по Сети.

База данных отыскивает предмет запроса, основанный на информации, указанной в заполненной форме, и выводит соответствующие документы, подготовленные базой данных. Чтобы определить порядок, в котором список документов будет показан, база данных применяет алгоритм ранжирования. В идеальном случае, документы, наиболее релевантные пользовательскому запросу будут помещены первыми в списке. Различные поисковые системы используют различные алгоритмы ранжирования, однако основные принципы определения релевантности следующие:

Количество слов запроса в текстовом содержимом документа (т.е. в html-коде).
Тэги, в которых эти слова располагаются.
Местоположение искомых слов в документе.
Удельный вес слов, относительно которых определяется релевантность, в общем количестве слов документа.

Эти принципы применяются всеми поисковыми системами. А представленные ниже используются некоторыми, но достаточно известными (вроде AltaVista, HotBot).

Время - как долго страница находится в базе поискового сервера. Поначалу кажется, что это довольно бессмысленный принцип. Но, если задуматься, как много существует в Интернете сайтов, которые живут максимум месяц! Если же сайт существует довольно долго, это означает, что владелец весьма опытен в данной теме и пользователю больше подойдет сайт, который пару лет вещает миру о правилах поведения за столом, чем тот, который появился неделю назад с этой же темой.
Индекс цитируемости - как много ссылок на данную страницу ведет с других страниц, зарегистрированных в базе поисковика.

База данных выводит ранжированный подобным образом список документов с HTML и возвращает его человеку, сделавшему запрос. Различные поисковые механизмы также выбирают различные способы показа полученного списка - некоторые показывают только ссылки; другие выводят cсылки c первыми несколькими предложениями, содержащимися в документе или заголовок документа вместе с ccылкой.

Когда Вы щелкаете на ссылке к одному из документов, который вас интересует, этот документ запрашивается у того сервера, на котором он находится.

2.2 Сравнительный обзор поисковых систем

Lycos. В Lycos используется следующий механизм индексации:

слова в

слова в начале страницы;

слова в ссылках;

если в его базе индекса есть сайты, ссылка с которых указывает на индексируемый документ - релевантность этого документа возрастает.

Как и большинство систем, Lycos дает возможность применять простой запрос и более изощренный метод поиска. В простом запросе в качестве поискового критерия вводится предложение на естественном языке, после чего Lycos производит нормализацию запроса, удаляя из него так называемые stop-слова, и только после этого приступает к его выполнению. Почти сразу выдается информация о количестве документов на каждое слово, а позже и список ссылок на формально релевантные документы. В списке против каждого документа указывается его мера близости запросу, количество слов из запроса, попавших в документ, и оценочная мера близости, которая может быть больше или меньше формально вычисленной. Пока нельзя вводить логические операторы в строке вместе с терминами, но использовать логику через систему меню Lycos позволяет. Такая возможность применяется для построения расширенной формы запроса, предназначенной для искушенных пользователей, уже научившихся работать с этим механизмом. Таким образом, видно, что Lycos относится к системе с языком запросов типа "Like this", но намечается его расширение и на другие способы организации поисковых предписаний.

AltaVista. Индексирование в этой системе осуществляется при помощи робота. При этом робот имеет следующие приоритеты:

слова содержащиеся в теге

ключевые фразы, находящиеся в начале странички;

ключевые фразы в ALT - ссылках

ключевые фразы по количеству вхождений\присутствия слов\фраз;

Если тэгов на странице нет, использует первые 30 слов, которые индексирует и показывает вместо описания (tag description)

Наиболее интересная возможность AltaVista - это расширенный поиск. Здесь стоит сразу оговориться, что, в отличие от многих других систем AltaVista поддерживает одноместный оператор NOT. Кроме этого, имеется еще и оператор NEAR, который реализует возможность контекстного поиска, когда термины должны располагаться рядом в тексте документа. AltaVista разрешает поиск по ключевым фразам, при этом она имеет довольно большой фразеологический словарь. Кроме всего прочего, при поиске в AltaVista можно задать имя поля, где должно встретиться слово: гипертекстовая ссылка, applet, название образа, заголовок и ряд других полей. К сожалению, подробно процедура ранжирования в документации по системе не описана, но видно, что ранжирование применяется как при простом поиске, так и при расширенном запросе. Реально эту систему можно отнести к системе с расширенным булевым поиском.

Yahoo. Данная система появилась в Сети одной из первых, и сегодня Yahoo сотрудничает со многими производителями средств информационного поиска, а на различных ее серверах используется различное программное обеспечение. Язык Yahoo достаточно прост: все слова следует вводить через пробел, они соединяются связкой AND либо OR. При выдаче не указывается степень соответствия документа запросу, а только подчеркиваются слова из запроса, которые встретились в документе. При этом не производится нормализация лексики и не проводится анализ на "общие" слова. Хорошие результаты поиска получаются только тогда, когда пользователь знает, что в базе данных Yahoo информация есть наверняка. Ранжирование производится по числу терминов запроса в документе. Yahoo относится к классу простых традиционных систем с ограниченными возможностями поиска.

OpenText. Информационная система OpenText представляет собой самый коммерциализированный информационный продукт в Сети. Все описания больше похожи на рекламу, чем на информативное руководство по работе. Система позволяет провести поиск с использованием логических коннекторов, однако размер запроса ограничен тремя терминами или фразами. В данном случае речь идет о расширенном поиске. При выдаче результатов сообщается степень соответствия документа запросу и размер документа. Система позволяет также улучшить результаты поиска в стиле традиционного булевого поиска. OpenText можно было бы отнести к разряду традиционных информационно-поисковых систем, если бы не механизм ранжирования.

Infoseek. В этой системе индекс создает робот, но он индексирует не весь сайт, а только указанную страницу. При этом робот имеет такие приоритеты:

слова в заголовке

слова в теге keywords, description и частота вхождений\повторений в самом тексте;

при повторении одинаковых слов рядом выбрасывает из индекса

Допускает до 1024 символов для тега keywords, 200 символов для тэга description;

Если тэги не использовались, индексирует первые 200 слов на странице и использует как описание;

Система Infoseek обладает довольно развитым информационно-поисковым языком, позволяющим не просто указывать, какие термины должны встречаться в документах, но и своеобразно взвешивать их. Достигается это при помощи специальных знаков "+" - термин обязан быть в документе, и "-" - термин должен отсутствовать в документе. Кроме этого, Infoseek позволяет проводить то, что называется контекстным поиском. Это значит, что используя специальную форму запроса, можно потребовать последовательной совместной встречаемости слов. Также можно указать, что некоторые слова должны совместно встречаться не только в одном документе, а даже в отдельном параграфе или заголовке. Имеется возможность указания ключевых фраз, представляющих собой единое целое, вплоть до порядка слов. Ранжирование при выдаче осуществляется по числу терминов запроса в документе, по числу фраз запроса за вычетом общих слов. Все эти факторы используются как вложенные процедуры. Подводя краткое резюме, можно сказать, что Infoseek относится к традиционным системам с элементом взвешивания терминов при поиске.

WAIS. WAIS является одной из наиболее изощренных поисковых систем Internet. В ней не реализованы лишь поиск по нечетким множествам и вероятностный поиск. В отличие от многих поисковых машин, система позволяет строить не только вложенные булевые запросы, считать формальную релевантность по различным мерам близости, взвешивать термины запроса и документа, но и осуществлять коррекцию запроса по релевантности. Система также позволяет использовать усечения терминов, разбиение документов на поля и ведение распределенных индексов. Не случайно именно эта система была выбрана в качестве основной поисковой машины для реализации энциклопедии "Британика" на Internet.

3. Поисковые роботы

За последние годы Всемирная паутина стала настолько популярной, что сейчас Интернет является одним из основных средств публикации информации. Когда размер Сети вырос из нескольких серверов и небольшого числа документов до огромных пределов, стало ясно, что ручная навигация по значительной части структуры гипертекстовых ссылок больше не представляется возможной, не говоря уже об эффективном методе исследования ресурсов.

Эта проблема побудила исследователей Интернет на проведение экспериментов с автоматизированной навигацией по Сети, названной "роботами". Веб-робот - это программа, которая перемещается по гипертекстовой структуре Сети, запрашивает документ и рекурсивно возвращает все документы, на которые данный документ ссылается. Эти программы также иногда называют "пауками", " странниками", или " червями" и эти названия, возможно, более привлекательны, однако, могут ввести в заблуждение, поскольку термин "паук" и "странник" cоздает ложное представление, что робот сам перемещается, а термин "червь" мог бы подразумевать, что робот еще и размножается подобно интернетовскому вирусу-червю. В действительности, роботы реализованы как простая программная система, которая запрашивает информацию из удаленных участков Интернет, используя стандартные cетевые протоколы.

3.1 Использование поисковых роботов

Роботы могут использоваться для выполнения множества полезных задач, таких как статистический анализ, обслуживание гипертекстов, исследования ресурсов или зазеркаливания страниц. Рассмотрим эти задачи подробнее.

3.1.1 Статистический Анализ

Первый робот был создан для того, чтобы обнаружить и посчитать количество веб-серверов в Сети. Другие статистические вычисления могут включать среднее число документов, приходящихся на один сервер в Сети, пропорции определенных типов файлов на сервере, средний размер страницы, степень связанности ссылок и т.д.

3.1.2 Обслуживание гипертекстов

Одной из главных трудностей в поддержании гипертекстовой структуры является то, что ссылки на другие страницы могут становиться " мертвыми ссылками" в случае, когда страница переносится на другой сервер или cовсем удаляется. На сегодняшний день не существует общего механизма, который смог бы уведомить обслуживающий персонал сервера, на котором содержится документ с сылками на подобную страницу, о том, что она изменилась или вобще удалена. Некоторые серверы, например, CERN HTTPD, будут регистрировать неудачные запросы, вызванные мертвыми ссылками наряду с рекомендацией относительно страницы, где обнаружена мертвая cсылка, предусматривая что данная проблема будет решаться вручную. Это не очень практично, и в действительности авторы документов обнаруживают, что их документы содержат мертвые ссылки лишь тогда, когда их извещают непосредственно, или, что бывает очень редко, когда пользователь cам уведомляет их по электронной почте.

Робот типа MOMSPIDER, который проверяет ссылки, может помочь автору документа в обнаружении подобных мертвых ссылок, и также может помогать в обслуживании гипертекстовой структуры. Также роботы могут помочь в поддержании содержания и самой структуры, проверяя соответствующий HTML-документ, его соответствие принятым правилам, регулярные модернизации, и т.д., но это обычно не используется. Возможно, данные функциональные возможности должны были бы быть встроены при написании окружающей среды HTML-документа, поскольку эти проверки могут повторяться в тех случаях, когда документ изменяется, и любые проблемы при этом могут быть решены немедленно.

3.1.3 Зазеркаливание

Зазеркаливание - популярный механизм поддержания FTP архивов. Зеркало рекурсивно копирует полное дерево каталогов по FTP, и затем регулярно перезапрашивает те документы, которые изменились. Это позволяет распределить загрузку между несколькими серверами, успешно справиться с отказами сервера и обеспечить более быстрый и более дешевый локальный доступ, так же как и автономный доступ к архивам. В Сети Интернет зазеркаливание может быть осуществлено с помощью робота, однако на время написания этой статьи никаких сложных средств для этого не существовало. Конечно, существует несколько роботов, которые восстанавливают поддерево страниц и сохраняют его на локальном сервере, но они не имеют средств для обновления именно тех страниц, которые изменились. Вторая проблема - это уникальность страниц, которая состоит в том, что ссылки в скопированных страницах должны быть перезаписаны там, где они ссылаются на страницы, которые также были зазеркалены и могут нуждаться в обновлении. Они должны быть измененены на копии, а там, где относительные ссылки указывают на страницы, которые не были зазеркалены, они должны быть расширены до абсолютных ссылок. Потребность в механизмах зазеркаливания по причинам показателей производительности намного уменьшается применением сложных кэширующих серверов, которые предлагают выборочную модернизацию, что может гарантировать, что кэшированный документ не обновился, и в значительной степени самообслуживается. Однако, ожидается, что cредства зазеркаливания в будущем будут развиваться должным образом.

3.1.4 Исследование ресурсов

Возможно, наиболее захватывающее применение роботов - использование их при исследовании ресурсов. Там, где люди не могут справиться с огромным количеством информации, довольно возможность переложить всю работу на компьютер выглядит довольно привлекательно. Существует несколько роботов, которые собирают информацию в большей части Интернет и передают полученные результаты базе данных. Это означает, что пользователь, который ранее полагался исключительно на ручную навигацию в Сети, теперь может объединить поиск с просмотром страниц для нахождения нужной ему информации. Даже если база данных не содержит именно того, что ему нужно, велика вероятность того, что в результате этого поиска будет найдено немало ссылок на страницы, которые, в свою очередь, могут ссылаться на предмет его поиска.

Второе преимущество состоит в том, что эти базы данных могут автоматически обновляться за определенный период времени так, чтобы мертвые ссылки в базе данных были обнаружены и удалены, в отличие от обслуживания документов вручную, когда проверка часто является спонтанной и не полной. Использование роботов для исследования ресурсов будет обсуждаться ниже.

3.1.5 Комбинированное использование

Простой робот может выполнять более чем одну из вышеупомянутых задач. Например робот RBSE Spider выполняет статистический анализ запрошенных документов и обеспечивает ведение базы данных ресурсов. Однако, подобное комбинированное использование встречается, к сожалению, весьма редко.

3.2 Повышение затрат и потенциальные опасности при использовании поисковых роботов

Использование роботов может дорого обойтись, особенно в случае, когда они используются удаленно в Интернете. В этом разделе мы увидим, что роботы могут быть опасны, так как они предъявляют слишком высокие требования к Сети.

3.2.1 Сетевой ресурс и загрузка сервера

Роботы требуют значительной пропускной способности канала сервера. Во-первых роботы работают непрерывно в течение длительных периодов времени, часто даже в течение месяцев. Чтобы ускорить операции, многие роботы делают параллельные запросы страниц с сервера, ведущие в последствии к повышенному использованию пропускной способности канала сервера. Даже удаленные части Сети могут чувствовать сетевую нагрузку на ресурс, если робот делает большое количество запросов за короткий промежуток времени. Это может привести к временной нехватке пропускной способности сервера для других пользователей, особенно на серверах с низкой пропускной способностью, поскольку Интернет не имеет никаких cредств для балансирования нагрузки в зависимости от используемого протокола.

Традиционно Интернет воспринимался как "свободный", поскольку индивидуальные пользователи не должны были платить за его использование. Однако теперь это поставлено под сомнение, так как особенно корпоративные пользователи платят за издержки, связанные с использованием Сети. Компания может чувствовать, что ее услуги (потенциальным) клиентам стоят оплаченных денег, а страницы, автоматически переданные роботам - нет.

Помимо предъявления требований к Сети, робот также предъявляет дополнительные требования к самому серверу. В зависимости от частоты, с которой он запрашивает документы с сервера, это может привести к значительной загрузке всего сервера и снижению скорости доступа других пользователей, обращающихся к серверу. К тому же, если главный компьютер используется также для других целей, это может быть вообще неприемлемо. В качестве эксперимента автор управлял моделированием 20 параллельных запросов от своего сервера, функционирующего как Plexus сервер на Sun 4/330. Несколько минут машину, замедленную использованием паука, вообще невозможно было использовать. Этот эффект можно почувствовать даже последовательно запрашивая страницы.

Все это показывает, что нужно избегать ситуаций с одновременным запросом страниц. К сожалению, даже современные браузеры (например, Netscape) создают эту проблему, параллельно запрашивая изображения, находящиеся в документе. Сетевой протокол HTTP оказался неэффективным для подобных передач и как средство борьбы с подобными эффектами сейчас разрабатываются новые протоколы.

3.2.2 Обновление документов

Как уже было упомянуто, базы данных, создаваемые роботами, могут автоматически обновляться. К сожалению, до сих пор не имеется никаких эффективных механизмов контроля за изменениями, происходящими в Сети. Более того, нет даже простого запроса, который мог бы определить, которая из cсылок была удалена, перемещена или изменена. Протокол HTTP обеспечивает механизм "If-Modified-Since", посредством которого агент пользователя может определить время модификации кэшированного документа одновременно с запросом самого документа. Если документ был изменен, тогда сервер передаст только его содержимое, так как этот документ уже был прокэширован.

Это средство может использоваться роботом только в том случае, если он сохраняет отношения между итоговыми данными, которые извлекаются из документа: это сама ссылка и отметка о времени, когда документ запрашивался. Это ведет к возникновению дополнительных требований к размеру и сложности базы данных и широко не применяется.

3.3 Роботы / агенты клиента

Загрузка Сети является особой проблемой, связанной с применением категории роботов, которые используются конечными пользователями и реализованы как часть веб-клиента общего назначения (например, Fish Search и tkWWW робот). Одной из особенностей, которая является обычной для этих роботов, является способность передавать обнаруженную информацию поисковым системам при перемещении по Сети. Это преподносится как усовершенствование методов исследования ресурсов, так как запросы к нескольким удаленным базам данных осуществляются автоматически. Однако, по мнению автора, это неприемлемо по двум причинам. Во-первых, операция поиска приводит к большей загрузке сервера, чем даже простой запрос документа, поэтому обычному пользователю могут быть причинены значительные неудобства при работе на нескольких серверах с большими издержками, чем обычно. Во-вторых, ошибочно предполагать, что одни и те же ключевые слова при поиске одинаково релевантны, синтаксически правильны, не говоря уже об оптимальности для различных баз данных, и диапазон баз данных полностью скрыт от пользователя. Например, запрос " Форд и гараж " мог бы быть послан базе данных, хранящей литературу 17-ого столетия, базе данных, которая не поддерживает булевские операторы или базе данных, которая определяет, что запросы относительно автомобилей должны начаться со слова "автомобиль: ". И пользователь даже не знает это.

Другой опасный аспект использования клиентского робота заключается в том, что как только он был распространен по Сети, никакие ошибки уже не могут быть исправлены, не могут быть добавлены никакие знания проблемных областей и никакие новые эффективные свойства не могут его улучшить, как не каждый пользователь впоследствии будет модернизировать этого робота самой последней версией.

Наиболее опасный аспект, однако - большое количество возможных пользователей роботов. Некоторые люди, вероятно, будут использовать такое устройство здраво, то есть ограничиваться некоторым максимумом ссылок в известной области Сети и в течение короткого периода времени, но найдутся и люди, которые злоупотребят им из-за невежества или высокомерия. По мнению автора, удаленные роботы не должны передаваться конечным пользователям, и к счастью, до сих пор удавалось убедить по крайней мере некоторых авторов роботов не распространять их открыто.

Даже не учитывая потенциальную опасность клиентских роботов, возникает этический вопрос: где использование роботов может быть полезно всему Интернет-сообществу для объединения всех доступных данных, а где они не могут быть применены, поскольку принесут пользу только одному пользователю.

"Интеллектуальные агенты" и " цифровые помощники", предназначенные для использования конечным пользователем, который ищет информацию в Интернет, являются в настоящее время популярной темой исследований в компьютерной науке, и часто рассматриваются как будущее Сети. В то же время это действительно может иметь место, и уже очевидно, что автоматизация неоценима для исследований ресурсов, хотя требуется проводить еще больше исследований для того, чтобы их сделать их использование эффективным. Простые управляемые пользователем роботы очень далеки от интеллектуальных сетевых агентов: агент должен иметь некоторое представление о том, где найти определенную информацию (то есть какие услуги использовать) вместо того, чтобы искать ее вслепую. Рассмотрим ситуацию, когда человек ищет книжный магазин; он использует "Желтые страницы" для области, в которой он проживает, находит список магазинов, выбирает из них один или несколько, и посещает их. Клиентский робот шел бы во все магазины в области, спрашивая о книгах. В Сети, как и в реальной жизни, это неэффективно в малом масштабе, и совсем должно быть запрещено в больших масштабах.

3.3.1 Плохие программные реализации роботов

Нагрузка на сеть и серверы иногда увеличивается плохой программной реализацией особенно недавно написанных роботов. Даже если протокол и ссылки, посланные роботом, правильны, и робот правильно обрабатывает возвращенный протокол (включая другие особенности вроде переназначения), имеется несколько менее очевидных проблем.

Автор наблюдал, как несколько похожих роботов управляют вызовом его сервера. В то время, как в некоторых случаях негативные последствия были вызваны людьми, использующими свой сайт для испытаний (вместо локального сервера), в остальных случаях стало очевидно, что они были вызваны плохим написанием самого робота. При этом могут произойти повторные запросы страниц в том случае, если нет никаких записей об уже запрошенных ссылках (что является непростительным), или когда робот не распознает, когда несколько ссылок синтаксически эквивалентны, например, где различаются DNS псевдонимы для одного и того же адреса IP, или где ссылки не могут быть обработаны роботом, например " foo/bar/ ../baz.html " является эквивалентным "foo/baz.html".

Некоторые роботы иногда запрашивают документы типа GIF и PS, которые они не могут обработать и поэтому игнорируют.

Подготовка HTML-документов и их оптимизация для поисковых систем

Каждый, кто хоть раз занимался продвижением ресурса в сети интернет, сталкивался с задачей подготовки HTML-документов и их оптимизацией для поисковых механизмов. Как, вы ещё не столкнулись с подобной задачей и хотите спросить зачем это нужно? Не секрет, что наиболее популярный механизм поиска той или иной информации, который доступен каждому посетителю бескрайней паутины - это поисковая система. И именно она оценивает релевантность (соответствие) вашего ресурса запросу пользователя. Поисковый механизм - это робот, который пробегается по ресурсам и ищет нужные пользователю документы. И чтобы этот механизм, лишенный какой бы то ни было предвзятости, решил, что именно Ваш HTML-документ наиболее подходит пользователю, Вам необходимо оптимизировать его для удобства работы робота. И как это сделать мы хотим рассказать Вам в этой статье.
В своё время мы тоже столкнулись с подобной задачей. Много бессонных ночей было проведено перед монитором в поиске материала на эту тему, и мы с уверенностью можем сказать, что материла на данную тематику Вы сможете найти очень много. Но сможет ли весь этот материал ответить на все ваши вопросы? Скажем с уверенностью - НЕТ! Как и не ответил на наши. Именно поэтому мы решили подготовить для Вас эту статью, которая смогла бы охватить большую часть вопросов, на многие из которых нам пришлось искать ответы самим. Вернее, это даже не статья, а FAQ или руководство. Итак, начнем.
На сегодняшний день самыми популярными поисковыми системами в РуНете являются Yandex.ru, Rambler.ru, Aport.ru, Google.com.ru и Altavista.ru. И каждая из этих систем использует свои собственные механизмы поиска. Соответственно, нам необходимо сформировать некий стандарт документа, который бы в полной мере гарантировал высокую оценку релевантности каждой из них.

Оценка релевантности документа поисковым механизмом

Множество экспертов берутся описывать факторы, влияющие на оценку релевантности HTML-документов поисковыми машинами. Но верны ли их домыслы? Именно домыслы, а не утверждения, ибо чтобы ответить на все эти вопросы нужно иметь прямое отношение к разработке данных механизмов. Ну а сами разработчики никогда не станут описывать алгоритм работы своего детища. Так как, кто в точности знает принцип работы поискового робота, тот сможет его и обмануть, а разработчики вынуждены будут корпеть над созданием более совершенной системы.
Поэтому скажем откровенно, все знания, которые накопились у нас, да и у всех других экспертов по оценке работы поисковых машин и их анализу HTML-документов имеют исключительно гипотетический характер. Но есть факторы, влияние которых на оценку релевантности страницы бесспорны. С них мы и начнем наш обзор!

Тег - название (заголовок) HTML-документа. Оно должно быть ёмким, лаконичным и давать общее представление о содержании данного документа. Рекомендуемый объем 60-80 символов.

МЕТА тег - ключевые слова. Сейчас очень часто говорят о снижении влияния данного мета-тега, но так или иначе, он влияет на оценку релевантности документа поисковым механизмом. И робот оценивает соответствие содержания документа и прописанных в нём ключевых слов. Рекомендуемый объем 800-1000 символов. Необходимо отметить, что больший приоритет робот отдает первым 50 словам.

META тег - описание документа. Этот мета-тег можно назвать самым важным. На него всегда обращает своё внимание поисковик. Описание документа должно быть емким и кратким, так как его объем очень ограничен и не должен превышать 200 символов.

Количество ключевых слов в HTML-документе тоже является немаловажным фактором. Но, как правило, оно должно составлять 5% от всего объема документа. Робот также оценивает удаленность ключевых слов от начала документа и их кучность.

Теги выделения текста - придают большую значимость заключенным в них словам. Нередко их используют для выделения ключевых слов в основном тексте документа, что тоже сказывается на релевантности документа.

Теги заголовков - имеют схожий характер с предыдущими тегами выделения текста, и учитываются поисковым роботом. Здесь необходимо заметить, что некоторые, особенно начинающие, web-мастера нередко злоупотребляют этими тегами и заключают в них весь текст страницы. Предварительно прописав в библиотеку стилей изменение их стандартных параметров. Но не следует забывать о том, что некоторые web-серферы просматривают HTML-документы не только с отключенными картинками, но и с отключенной библиотекой стилей. И в этом случае ваша страница будет смотреться просто чудовищно.

Тег всегда должен содержать описание в атрибуте ALT и всплывающую подсказку (это скорее касается организации мэппинга на одной картинке). Они тоже могут содержать ключевые слова, но нельзя забывать о том, чтобы они были читабельны и вписывались в общую концепцию данного изображения или привязанной к ним ссылке. Рекомендуемый объем составляет 40 символов.

Тег служит для создания гипертекста (ссылок) и его атрибут TITLE может содержать описание данной ссылки и создает всплывающую подсказку. Он также может быть снабжен ключевыми словами.

Немаловажную роль для поисковых механизмов играет также организация ссылок на вашем сервере и количество HTML-документов, то есть объем предоставляемого вами материала. Некоторые поисковые роботы отслеживают только ограниченное количество переходов, поэтому, занимаясь разработкой структуры сервера, необходимо учитывать так называемый "принцип четырех кликов".

Поисковые машины также оценивают и внешние ссылки, ведущие на Ваш сервер, их количество и качество. А также рейтинг и соответствие тематике этих ресурсов. На этих данных и базируется подсчет взвешенного индекса цитирования Вашего сайта.

Не стоит также засорять свой сервер всевозможнейшим "мусором". А если Ваш документ содержит блоки с текстовыми ссылками, не имеющими отношения к Вашему ресурсу (рекламные блоки), то необходимо помещать их в тег . И тогда робот их проигнорирует. Это играет достаточно важную роль, особенно если эти блоки находятся в верхней части документа.

Ну и конечно же популярность Вашего сервера имеет далеко не последнее значение, и здесь вся ситуация находится в Ваших руках. Не забывайте, что самое важное - это содержание, а интернет-страницы создаются в первую очередь для посетителей, а не для поисковых роботов.: -)

Алгоритм подготовки и оптимизации документа

В этом разделе мы хотим познакомить Вас со своим алгоритмом подготовки и оптимизации HTML-документов, который мы разработали для внутреннего пользования наших специалистов. Возможно, он поможет Вам повысить эффективность работы и сократит время на её выполнение. Он предельно прост и представляет собой поэтапное выполнение следующих мероприятий:

Подготовка основного текста страницы.

Подбор ключевых слов для данного документа (тег

Составление заголовка страницы (Тег

Подготовка описания документа (тег

Подготовка текстовых блоков для подписей и всплывающих подсказок картинок и ссылок.

Некоторая информация о запрещённых методах повышения релевантности

Очень часто web-мастера идут на всевозможные уловки, чтобы обмануть поисковый механизм и получить более высокую оценку HTML-документов. И в этом разделе мы затронем как раз эту тему.

Уловка №1
Однажды, это было года два-три назад, я наткнулся на сайт одного рекламного агентства (не буду уточнять какого, дабы не прогневать Небеса). Тег которого содержал более 10 тысяч символов, состоящих из повторяющихся ключевых слов. Трудно сказать прочитал ли их поисковый робот, но рейтинг это сайта был внушителен. За несколько месяцев перед написанием данного материала я снова заглянул на этот ресурс и снова оценил его популярность. "Мусор" из заголовка был вычищен, счетчик посещений этого ресурса был обнулен и в рейтингах он волочился где-то в хвосте. По-видимому, специалистами из поисковых систем были приняты суровые меры. История сайта ещё не окончена, и сейчас он сменил адрес и раскручивается по старой, налаженной схеме.

Уловка №2
Не секрет, что с помощью библиотеки стилей можно задать такие параметры текста, которые позволят ему стать микроскопическим и совершенно незаметным для глаза пользователя, но читаемым для робота. Так Вы сможете уместить где-нибудь на своей странице небольшой блок, содержащий огромное количество ключевых слов и выражений. Наверное, это самая популярная методика, но у неё тоже есть свои недостатки. Такой способ повышения релевантности также не приветствуется поисковиками, и робот уже научился воспринимать как мусор текст, цвет которого совпадает с основным цветом страницы или заливкой блока, в котором находиться "мусор". Это, конечно, тоже можно обойти, если залить блок или страницу однотонной картиной соответствующей цвету "мусора", а основной фон страницы задать другим. Можно даже вписать в дизайн эти маленькие точечки и подготовить не банальное перечисление ключевых слов, а немного корявый, но литературный текст, содержащий максимальное их количество. И тогда поисковый робот не сможет заподозрить в нем "мусор". Но пользователь с отключенными в браузере настройками библиотеки стилей всё равно увидит этот текст.

Уловка №3
Не меньшую популярность имеет создание дорвеев. Дорвей (doorway) - это HTML-документ, составленный из ключевых слов. Как правило, на главной странице сайта прописывается скрытая от глаз пользователя ссылка на этот документ. А если посетитель по какой-то случайности активирует эту ссылку или попадет на неё через запрос в поисковой машине, то программный скрипт тут же пересылает его на основную страницу ресурса. Зато поисковый робот воспринимает дорвей как одну из страниц ресурса, что также увеличивает его релевантность.

В заключение, могу только сказать, что эти три вышеуказанных способа являются обманом поисковых роботов и их использование влечет за собой штрафные санкции в виде обнуления счетчика посещаемости, исключения из рейтинга или даже удаление из поисковых баз с невозможностью восстановления. Хотите ли вы попасть в черный список поисковиков и постоянно скакать с одного доменного имени на другое? Хорошенько подумайте над этим перед использованием этих приемов.
И знайте, что если Ваш ресурс интересен, оригинален и не лишен вкуса, всегда можно достигнуть успеха, если уделять работе над ним должное внимание!

Желаю Вам творческих успехов!

Соколов Дмитрий Валерьевич
Art2k Creative Group

Соколов Дмитрий Валерьевич
viewstuff@pochtamt.ru
http://www.art2k.narod.ru