SEO блог

В этой статье Дэнни Салливан предлагает обзор и собственный рейтинг основных поисковых систем Сети. Почему они считаются «основными»? Потому, что они широко известны и к ним чаще всего обращаются.

Для веб-мастеров основные поисковые системы ценны тем, что могут заметно повысить посещаемость их сайтов.

Для Интернет-пользователей известная поисковая система, построенная по законам коммерции, гарантирует качественность получаемой с ее помощью информации. Такие системы легче поддерживать и при необходимости обновлять, чтобы идти в ногу с современными Интернет-технологиями.

В статье рассматриваются различия между автоматическими индексаторами сайтов для поисковых систем (то же, что crawler, краулер, робот) и результатами поиска, получаемые с их помощью; и каталогами сайтов, составленными вручную, и результатами поиска по ним. Это два основных пути, по которым поисковые машины получают списки сайтов.

Лучшие системы сети

Перечисленные здесь поисковые системы будут лучшим выбором при поиске информации.

Google

Служба основана на работе crawler’ов, охватывающей всю Сеть, и отличается высокой релевантностью информации.

Google позволяет искать не только веб-сайты. Используя меню, находящееся над поисковой строкой на главной странице Google, вы с легкостью сможете находить в Сети изображения, обсуждения, проходящие в группах новостей, читать новости или проводить поиск товаров. Пройдя по ссылке «Дополнительно», вы получите доступ к информации из Open Directory (Открытого Каталога, DMOZ) к поиску по категориям и другим материалам, которые были отобраны вручную.

Google предлагает множество опций для своих пользователей. Например, он долго хранит проиндексированные роботами страницы в своем кэше, что позволяет «оживлять» мертвые, удаленные с серверов страницы, или видеть старые версии только что обновленных страниц. Система предоставляет отличную проверку правописания, легкий доступ к словарным определениям, просмотр биржевых ставок, дорожные атласы, базы номеров телефонов и многое другое. Об этих и других деталях можно прочитать на странице поддержки Google. Панель инструментов Google также завоевала популярность легкостью доступа к услугам Google из любого веб-браузера.

В дополнение к бесплатному поиску в Интернете, компания также занимается разработкой и внедрением рекламных программ. Программа AdWords размещает рекламные объявления на сайтах Google и его партнеров. Также Google является бесплатным поставщиком результатов поисковых запросов некоторых других поисковых систем. Список основных партнеров приведен в «Рейтинге поставщиков поисковых результатов».

Изначально Google был проектом студентов Стэнфордского Университета Лари Пейджа и Сергея Брина и назывался BackRub. В 1998 он был переименован в Google, вышел из-под покровительства Университета и стал частной компанией Google, и таковой остается по сей день.

Yahoo

Проект начал работать в 1994 году и является старейшим каталогом сетевых ресурсов, который составляется и подразделяется на категории человеком, а не сетевым роботом. В то же время, в октябре 2002 года Yahoo сделал заметный шаг к автоматизированному составлению списков сайтов. Оно производилось на основе базы Google вплоть до февраля 2004 года. в настоящее время Yahoo использует собственные технологии поиска. Вы можете узнать об этом из недавнего обзора, опубликованного в информационном бюллетене SearchDay.

Вдобавок к релевантной выдаче результатов поисковых запросов Yahoo предлагает возможность использовать ярлыки над поисковой формой на своей главной странице для поиска изображений, товаров или перехода на Желтые Страницы Yahoo. На главной странице Yahoo вашему вниманию будут предложены еще более узко специализированные возможности.

Каталоги Yahoo действуют и сегодня. Вы можете заметить ссылки на тематические категории, которые система выдает в результате поискового запроса по ключевым словам. Эти ссылки приведут вас к списку веб-сайтов, которые были просмотрены и отобраны составителем каталога.

Можно производить поиск по каталогу Yahoo, составленному редакторами. Именно так изначально и работал поиск в «классическом» Yahoo. Чтобы вести такой поиск, начните с главной страницы каталога Yahoo, а не с поисковика Yahoo.com. В этом случае вы получите и ссылки на тематические категории каталога Yahoo, и на результаты поиска по каталогу, которыми являются сайты, занимающие верхние строки в результатах поисковых запросов по каталогу Yahoo.

Коммерческие сайты вносят регулярную плату за то, чтобы постоянно присутствовать в каталоге Yahoo, хотя иногда они должны быть одобрены редактором перед занесением в перечень. Сайты, созданные не для получения прибыли, добавляются в каталог бесплатно. Программа Yahoo по созданию смыслового наполнения сайтов также предлагает платное включение и в каталог, и в базы crawler’ов. Но это еще не гарантия высокой посещаемости. Программа CAP также вносит в каталог сайты с некоммерческим содержанием.

Как и Google, Yahoo продает место на сайте для рекламных ссылок; продажа ведется через программу Overture. Yahoo приобрел компанию Overture в октябре 2003 года.

До конца 2001 года эта программа называлась GoTo. Overture купил компании AllTheWeb и AltaVista в марте и апреле 2003 года. Yahoo унаследовал эти компании после покупки Overture.

Технологии поиска AllTheWeb и AltaVista были совмещены с наработками Inktomy, поисковой машины, работающей с помощью crawler’ов, которая была создана в Беркли и запущена в 1996 году. Inktomy было куплено компанией Yahoo в 2003 году.

Ask Jeeves

Впервые о программе услышали в 1998 и в 1999 годах; она прославилась как поисковая машина, понимающая «естественную речь» – в поисковую строку вводится предложение в вопросительной форме, и система адекватно отвечает на него.

На самом же деле задаваемые вопросы обрабатывала вовсе не новая технология. За занавесом скрывались сотни редакторов, отслеживавших любые запросы, и находившие затем ответ на них в Итернете.

В настоящее время Ask Jeeves работает на основе технологии crawlerов, обрабатывая запросы, поступающие в поисковую систему Teoma.

Ask Jeeves внедряет инновационные технологии невидимых тэгов и Smart Search. Мы полагаем, что будущее поисковых систем за этим остроумным подходом к предоставлению информации не только в виде веб-страниц. Вот что делает Ask Jeeves достойным внимания любого, кто ищет ответы на свои вопросы.

Ask Jeeves’у принадлежит также ныне приостановленная служба Direct Hit.

Хорошие ресурсы

Приведенные ниже поисковые системы также заслуживают внимания при поиске информации в Паутине.

AllTheWeb.com

Система пользуется ресурсами Yahoo и является приятной, «облегченной» и легко настраиваемой версией этого поисковика. Возможен поиск новостей, картинок, видео, MP3 и файлов на FTP, хотя основной акцент стоит на веб-поиске.

В прошлом система была лицом компании FAST. Можно и сейчас услышать, что AllTheWeb называют FAST Search. Тем не менее, поисковую машину перекупила компания Overture, которая в свою очередь позже перешла во владение Yahoo. Сейчас система не имеет ничего общего с фирмой FAST.

AOL Search

AOL Search предоставляет пользователям страницы с результатами поиска на основании индекса Google, составленного crawler’ами. На одинаковые запросы Google и AOL Search выдадут одинаковые ссылки. Тогда зачем использовать AOL Search? Главным образом это приходится делать пользователям AOL. «Встроенная» версия AOL Search в результате поисковых запросов дает ссылки только на содержимое, доступное внутри онлайн системы AOL. А пользуясь AOL Search, вы можете одновременно проводить поиск и по Интернет, и по Сети AOL. Во «внешней» поисковой системе AOL Search такой опции нет. Если вам по душе Google, вам будет не хватать некоторых его особенностей в AOL Search, например, кэширования страниц.

HotBot

HotBot предоставляет простой доступ к трем основным поисковым системам, в основе которых лежит работа crawler’ов: Google, MSN и ASK. В отличие от мета-поисковых машин, он не смешивает результаты, полученные из трех этих источников. Тем не менее, это быстрый и простой путь к тому, чтобы получить несколько независимых «мнений» по интересующей вас теме.

Интерфейс HotBot, предлагающий воспользоваться одной из трех поисковых систем на выбор, был впервые представлен в декабре 2002. Тем не менее, этому событию предшествовала довольно долгая история HotBot`а как поискового бренда.

HotBot начал работать в мае 1996 года и получил признание среди тех, кто в результатах поисковых запросов хотел видеть качество и полноту информации, получаемой при помощи роботов-crawler’ов, предоставляемых Inktomy. Проект привлек внимание опытных пользователей Интернета в основном необычными цветами и интерфейсом, которые он сохраняет и по сей день.

HotBot заслужил дурную славу, когда начал использовать результаты подсчета активности баннеров Direct Hit для своих каталогов в 1999 году.

В те времена Direct Hit был интересной новинкой, но, к сожалению, точность предоставляемой информации была далека от результатов, которые показывал Google. В результате популярность HotBot начала резко падать.

Хуже того, в 1998 году HotBot перешел во владение Lycos (ныне Terra Lycos). Компания вместо того, чтобы сосредоточиться на поисковых возможностях, выбрала другие приоритеты и вернулась к поисковому профилю только в конце 2001 года, обновив сайт Lycos и переработав страницу HotBot в конце 2002 года.

Teoma

Teoma – это поисковая система, основанная на работе crawlerов, принадлежащих Ask Jeeves. Список индексируемых Teoma страниц меньше, чем у ее соперников Yahoo и Google. Однако, когда речь заходит о частотных запросах, величина индекса не имеет такого значения, как релевантность данных. Некоторые ценят возможность уточнения запроса в тематических топиках, ссылки на которые выдаются на странице с результатами поиска. Раздел «Ресурсы», также находящийся на странице результатов, в свою очередь уникален тем, что перенаправляет пользователя на сайты, которые послужили исходным материалом для приведенных в качестве результатов статей. Teoma куплена компанией Ask Jeeves в сентябре 2001 года и поставляет информацию для ее сайта.

Другие системы

Системы, описанные ниже, рассматриваются в контексте «основных» поисковиков потому, что они либо до сих пор имеют большое число обращений, либо в прошлом заслужили такую репутацию, что до сих пор многие пользователи считают их полезными. По той или иной причине они не входят в число топовых поисковых систем, но кому-то могут показаться самыми лучшими.

AltaVista открылась в декабре 1995 года и в свое время была так же популярна и надежна, как сейчас Google.

К сожалению, в попытке сделать из AltaVista портал компания-владелец забыла о первоначальном предназначении системы как поисковика. Спустя какое-то время устарели и каталоги сайтов AltaVista, и релевантность информации.

В настоящее время AltaVista вновь обратилась к системам поиска. Она пользуется каталогами Yahoo, и ярлыки над поисковой строкой позволяют находить в сети изображения, музыку, видео, а также тематические разделы, наполненные вручную. Если вы хотите получать информацию не менее надежную чем от Yahoo, но поставляемую через более простой интерфейс – AltaVista ваш выбор.

Вначале AltaVista принадлежала компании Digital, затем вместе с владельцем досталась Compaq. Позже AltaVista перешла в частные руки, затем стала собственностью Overture и вошла в состав Yahoo.

Gigablast

По сравнению с Google, Yahoo и даже Teoma, в распоряжении поисковой системы Gigablast совсем небольшой перечень сайтов. Однако система постоянно пополняется новыми и интересными особенностями. Обратитесь к ней, если хотите чего-то экспериментального, но не полностью независимого. Почитайте о Gigablast в недавнем выпуске нашего информационного бюллетеня.

LookSmart

LookSmart – это, в первую очередь, вручную пополняемый перечень сайтов. Он получает списки двумя путями. Во-первых, коммерческие сайты платят за место в торговых топах, уподобляя LookSmart электронным Желтым Страницам. Во-вторых, существуют добровольцы, которые заносят сайты с некоммерческим содержанием в каталог www.zeal.com, принадлежащий LookSmart. Хотя это и отдельный сайт, списки, находящиеся на нем, используются при обработке поисковых запросов LookSmart.

LookSmart был запущен в октябре 1996 года как самостоятельный проект, финансировался изданием Reader’s Digest около года и затем был выкуплен своим правлением.

В апреле 2002 LookSmart приобрел поисковую систему WiseNut, работающую при помощи crawler’ов. Попасть на страницу поиска этой системы можно по ссылке с сайта LookSmart. В отличие от конкурирующих с ним сайтов, WiseNut часто предлагает сильно устаревшую информацию.

Изюминка LookSmart – это возможность доступа к сотням периодических изданий через один из ярлыков над строкой поиска.

Lycos

Lycos – одна из старейших поисковых машин сети, запущенная еще в 1994 году. Она прекратила запуск ботов-индексаторов в апреле 1999 года. Вместо этого система предоставляет доступ к результатам, собранным вручную из LookSmart по результатам наиболее частых запросов, а также из Yahoo на основе индексов сайтов, составленных роботами.

Fast Forward позволяет видеть на одной стороне экрана результаты поиска, а на другой – первые страницы найденных сайтов. Релевантные запросу категории из каталога, собранного вручную, показываются вверху страницы с результатами поиска.

Lycos принадлежит компании Terra Lycos, объединившей в себе фирмы Lycos и Terra Networks в октябре 2000. Этой же фирме принадлежит система HotBot, о которой говорилось выше.

MSN Search

Когда-то MSN Search был одним из лучших поисковиков, но и сегодня он по-прежнему стоит внимания. MSN Search пользовался каталогами сайтов LookSmart и получал лучшие отзывы пользователей, поскольку за проектом стояла команда редакторов, которая отслеживала наиболее частые запросы, вводимые в поисковую форму, и подбирала сайты, наиболее релевантные тематике запроса. Такая методика давала хорошие результаты.

Сегодня MSN Search ищет новые пути развития. Система производит поиск по материалам Yahoo, но не отличается той функциональностью и многообразием параметров, которые предлагает сам Yahoo. В то же время, MSN Search разрабатывает собственные роботы и планирует другие перемены, которые должны полностью обновить систему.

Netscape Search

Поисковик принадлежит компании AOL Time Warner и пользуется индексной базой Google, как и основной поисковый сайт AOL – AOL Search. Почему иногда Netscape Search использовать предпочтительнее, чем Google? Здесь нет однозначного ответа. Основное отличие Netscape Search от Google в том, что Netscape Search в первую очередь будет производить поиск по собственной базе и выводить эти результаты первыми. Есть разница и в дизайне. Если вы находите эти доводы убедительными, попробуйте воспользоваться Netscape Search для поиска, а если нет, то лучше используйте Google.

Open Directory

Open Directory пользуется результатами работы волонтеров, которые составляют каталоги сайтов Сети.

Система была запущена в июне 1998 годуи сначала называлась NewHoo. В ноябре компанию купил AOL и заявил, что информация из Open Directory будет доступна любому по открытому лицензионному соглашению.

Не рекомендуется использовать для поиска сайт Open Directory, так как это не совсем удобно. На сайте не сохраняются результаты прошлых запросов, которые могли бы облегчить и ускорить поиск по каталогу, составленному вручную. Хромает и релевантность ссылок, выдаваемых в ответ на запрос по ключевым словам, да и при просмотре тематических категорий результаты выдаются в алфавитном порядке, а не по результатам посещаемости.

Гораздо удобнее искать нужную информацию из Open Directory, пользуясь интерфейсом Google, или Google Directory. Здесь поиск по ключевым словам осуществляется по проверенным алгоритмам Google. Список тематических категорий составляется в зависимости от роста популярности сайтов – самые посещаемые находятся вверху списка.

По материалам сайта www.searchenginewatch.com