ALEXA RANK:
ИСТОРИЯ ПОЯВЛЕНИЯ И РАЗВИТИЯ

история Alexa RankК середине 90-х годов прошлого века количество ресурсов Всемирной сети (World Wide Web или Интернет) достигло такого значительного уровня, что возникла настоятельная потребность кроме их тематической классификации и систематизации проводить поиск нужной информации, размещаемой на страницах web-сайтов, и ее ранжирования.

До этого времени информация о наличии и тематическом содержании того или иного web-ресурса хранилась и распространялась в виде списков ссылок, в лучшем случае — с их кратким описанием.

Но время одних лишь каталогов любимых сайтов, индивидуально составляемых пользователями Интернета вручную (кстати, с одного из таких каталогов, в котором кроме самих web-ссылок присутствовали комментарии к этим ссылкам, и который вели Джерри Янг и Дэвид Фило, начался Yahoo!), прошло.

С одной стороны к этому времени появились предприниматели, осознавшие, что с каждым днем у Интернета становится все больше коммерческих возможностей. И потому готовые вкладывать серьезные финансовые средства в создаваемые интернет-проекты. А с другой стороны появились web-разработчики, готовые к созданию мощных программных разработок для осуществления поиска информации в Сети.

К тому же не стоял на месте рост мощностей и возможностей компьютерного железа, по мере своего развития позволявший решать растущие количественно и усложняющиеся качественно задачи интернет-поиска.

Для лучшего представления о том, что такое Alexa Rank и чем он является сегодня обязательно нужно учитывать его географическую и историческую составляющие, а также то, как и в результате чего он вообще появился.

Поскольку Alexa Rank — «ребенок» американских родителей и «гражданин» Соединенных Штатов Америки, то рассмотрим американские поисковые системы в хронологическом порядке их появления.

С ЧЕГО НАЧИНАЛСЯ WEB-ПОИСК

Справедливости ради нужно сказать, что поисковики США не владеют пальмой первенства в своей области, потому что первая программа-поисковик появилась в Канаде еще в 1989 году. Называлась она Archie. Имя ее происходило от немного переделанного английского слова archive («архив»). Разработал ее Алан Эмтадж — студент, обучающийся информатике в монреальском университете МакГилла. Archie просто собирала в свою базу данных ftp-адреса, без какой-либо индексации. И тем не менее она была первой.

А вот дальнейшей разработкой систем поиска информации в Интернете занимались преобладающе в США.

В 1991 Марк МакКахилл из университета Миннесоты разработал сетевой протокол Gopher — «улучшенный ftp», который позволял проводить индексацию текста web-страниц и предоставление к ним доступа в Интернете. А немного позже Стивен Фостер и Фред Барри из университета Невады разработали программу Veronica, в которой уже можно было осуществлять поиск web-страниц по ключевому слову среди информации, хранящейся на серверах, поддерживающих протокол Gopher.

Широкое распространение этой системы продолжалось до 1993 года. Пока Мэтью Грей — студент Массачусетского технологического института не создал первую программу-робота, которая подсчитывала количество активных серверов Интернета. Программа носила гордое имя World Wide Web Wanderer, означающее в переводе — «странник по Всемирной паутине». Программа в автоматическом режиме раз в месяц с 1993 по 1995 годы собирала свою базу данных по имени Wandex о сайтах всемирной паутины. Но ее работа была крайне медленной, она не успевала отслеживать изменения и рост постоянно увеличивающейся Сети, из-за чего информация о сайтах, хранящаяся в ее базе, с течением времени все более становилась неактуальной.

Эти проблемы с автоматическим поиском и классифицированием информации привели к тому, что возникла принципиально иная концепция поисковой системы: не программно-автоматическое, а ручное наполнение базы данных о сайтах Сети.

И в результате разработок Мартина Костера возникла система ALIWEB – первый глобальный каталог ресурсов Всемирной паутины. Базу данных о сайтах которой наполнял сам владелец web-ресурса.

В 1993 году шестеро студентов из Стэнфорда представили свою программную разработку Excite, которая используя статистический анализ слов в тексте электронного документа, размещенного в Сети, значительно облегчала и ускоряла процесс поиска информации в Интернете.

В 1994 году возникает сеть Galaxy, которая представляла из себя первый интернет-справочник с возможностью поиска информации.

В этом же году была представлена первая поисковая машина под названием WebCrawler, которая проводя индексацию всего текста сайта, позволяла проводить поиск по любым ключевым словам на любой web-странице. Этот основополагающий принцип поиска информации в Интернете стал стандартом и лег в основу работы всех ведущих поисковых систем. К тому же, WebCrawler стал первым поисковиком, который был известен широкому кругу пользователей Интернета.

Также в этом году изобретатель оптической мыши Стив Кирш основал Infoseek — коммерческий проект поисковика, привнесший в Интернет такие понятия и функции поиска как специализированные алгоритмы для улучшения поиска картинок, продажа рекламы на основе CPM (цена за тысячу показов) и поведенческий таргетинг, то есть сбор информации о предпочтениях пользователя на основе вводимых им поисковых запросов, времени проведения на той или иной web-странице, переходу по той или иной ссылке, с целью последующего показа рекламы по идентичной предпочтениям тематике.

В это же время доктор Майкл Молдин из университета Карнеги Меллона разрабатывает поисковую машину Lycos. Отличительной особенностью этой разработки было то, что кроме результатов поиска пользователю предлагались ссылки на тему, связанную с поисковым запросом.

С 1995 года начинает отсчет своей поисковой интернет-деятельности корпорация Yahoo!

В 1995 году исследовательская лаборатория Digital Equipment Corporation (DEC) представляет интернет-общественности поисковую систему AltaVista с расширенной системой поиска. Система поддерживала множество языков. Принимала поисковые запросы на «естественном языке», то есть производила поиск по целой ключевой фразе, а не только по одному слову. Кроме того, AltaVista могла производить поиск видеофайлов, музыки и изображений.

В 1996 году вышел в свет проект Эрика Брюера и Пола Готье под названием Inktomi. Система могла осуществлять региональный поиск, проводила анализ ссылок, учитывала частоту посещений и ряд других параметров web-ресурса. Кроме того, предоставляла результаты своего поиска другим поисковым системам.

В том же 1996 году Гарри Груне и Дэвид Уэвен из университета в Беркли организовали вопросно-ответную систему поиска на основе «естественного языка» Ask Jeeves («спросить Дживса»). Однако это была не программная разработка, а ручной труд. 100 редакторов просматривали поисковые запросы, затем находили в Сети сайты с наилучшими на их взгляд ответами и выставляли их в результатах поиска.

В 1997 году официально выходит на просторы Интернета Google — детище двух выпускников Стэнфордского университета Ларри Пэйджа и Сергея Брина.

1998 год является годом основания Open Directory, он же DMOZ — открытый каталог лучших web-ресурсов мира, все ссылки на сайты которого проходят ручную модерацию по настоящее время.

РОЖДЕНИЕ ALEXA

Сегодня уже трудно представить то количественное и качественное разнообразие сетевых протоколов и форматов электронных документов, плохо совместимых между собой и оборудованием различных производителей, присутствовавших в киберпространстве всего-то порядка 20-ти лет назад.

Наряду с программно-автоматизированным поиском информации на тогдашних просторах Интернета вполне нормально чувствовал себя и ручной поиск.

Постоянно возникало что-то новое, принципиально отличное от других. Что-то модифицировалось. Что-то устаревало, просуществовав всего несколько лет.

И все это многообразие нужно было объединить в единое информационное пространство, классифицировать, ранжировать по степени информационной полезности, регулярно отслеживать изменения старой и появление новой информации в Сети, чтобы в результате предоставлять услугу качественного поиска и выдачи адекватной информации по запросу пользователя. Таков был примерный комплекс задач, стоящих перед разработчиками поисковых систем того времени.

И вот примерно в такой киберобстановке более полутора десятков лет тому назад, а именно в 1996 году, известный в последствии американский архиватор Брюстер Кале совместно с Брюсом Гиллиатом при содействии Jacqui Safra Investments Etoile основали компанию Alexa.

На своем сайте (http://www.alexa.com) компания размещала ссылки на web-ресурсы по различным темам, исходя из потребностей пользователей. В то же время занимаясь разработкой и продвижением достаточно простой поисковой системы, представлявшей собой ToolBar (панель инструментов), которую пользователь Интернета должен был установить в свой браузер. Поначалу панель работала только с операционной системой Windows и ее браузером Internet Explorer.

Панель предоставляла поиск информации и давала пользователю советы о том, куда ему пойти дальше, учитывая его предпочтения. Помимо этих опций для каждого посещенного web-ресурса предоставлялась информация о его параметрах: владелец сайта, количество страниц, количество ссылок на другие сайты и частота обновления.

Разработка стала довольно популярной как в США, так и за ее пределами. И в Alexa решили использовать панель еще и для сбора статистики и анализа web-ресурсов. В результате чего и появился рейтинг сайтов — Alexa Rank (AR).

Дела пошли так хорошо, что всего лишь через три года после своего основания (в 1999 году) Alexa была продана аж за 250 миллионов долларов.

За такую сумму, правда в своих акциях, ее приобрел один из крупнейших Интернет-магазинов современности Amazon (http://www.amazon.com) и она получила статус его дочерней компании Alexa Internet.Inc

А web-монстр Amazon в свою очередь — информацию о сайтах и, соответственно, предпочтениях пользователей для своего интернет-поиска, размещенного на http://a9.com

Весной 2002 года началось сотрудничество Alexa и Google, а в январе 2003 — и с каталогом DMOZ.

В декабре 2005 года алексовские поисковые роботы и ее огромный поисковый индекс стали доступны сторонним разработчикам через ее открытые web-сервисы и API.

2006 год стал весьма переломным для Alexa. В мае сервис Windows Live Search от Microsoft заменил использовавшиеся до этого времени поисковые результаты от Google. А в сентябре началось использование собственной поисковой платформы, разработанной в Alexa. В декабре выходит первое крупное приложение для этой платформы под названием Alexa Image Search.

Нельзя обойти стороной еще одно сотрудничество Alexa. А именно — с Internet Archive.

Да-да, тем самым, знаменитым Архивом Интернета, который собирает и сохраняет культурно-исторические ценности нашей цивилизации в эпоху развитых интернет-технологий. Одним из его основных ресурсов является WebArch, находящийся по адресу http://wayback.archive.org

И не только потому, что Alexa предоставляет Internet Archive информацию, собираемую своей поисковой системой, и не потому, что алексовские инженеры принимали участие в совместном с Internet Archive проекте под названием The Wayback Machine, позволяющему сохранять для истории и при необходимости просматривать сохраненные версии сайтов.

А из-за того, что Alexa и Internet Archive связывает одно имя — Брюстер Кале (Brewster Kahle).

В том же самом 1996 году, одновременно с сооснованием Alexa этот выдающийся человек основал и Internet Archive, которым руководит до сих пор.

ALEXA RANK СЕГОДНЯ

Что такое Alexa Rank сегодня? И что же за более чем 15-летнюю историю развития представляет из себя компания Alexa Internet.Inc?

По-прежнему предоставляются услуги поиска информации в Интернете, ведется сбор статистики и ее анализ. Конечно, уже при помощи современных алгоритмов.

Компания распространяет свою панель и виджеты, а также программные продукты для аналитики и аудита сайтов, их конкурентного и сравнительного анализов, исследования рынка и развития бизнеса.

Официальный сайт компании — http://www.alexa.com имеет следующие показатели: PR 8, ТИЦ 1400, свой алексовский рейтинг 1153, 366645 обратных ссылок, порядка 300 000 ежедневных посетителей и более 1 000 000 ежедневных просмотров страниц.

В рейтинге Alexa Rank участвуют более 30 000 000 сайтов из более чем 125 стран мира.

Резюмировать эти цифры, пожалуй, можно так: американские поисковые системы занимали и продолжают занимать лидирующее положение в области поиска информации в Интернете. А Alexa Internet.Inc и сегодня продолжает прекрасно чувствовать себя одним из фаворитов в обществе из более чем трех десятков разнообразных поисковых сервисов, которое представляют из себя поисковики США.

Вот, пожалуй, таково основное историческое содержание компании Alexa и ее рейтинга Alexa Rank.

Ваше мнение очень важно для меня!
Пожалуйста, оставьте комментарий!