Платный сервис DeepDyve, который дает возможность искать необходимую информацию в так называемом "глубоком Вебе" стал доступен бесплатно. Но придется закрывать глаза на огромное количество рекламы.

Само понятие "глубокий Веб " хорошо раскрыто в книге "Invisible Web" Криса Шермана (Chris Sherman) и Гэри Прайса (Gary Price), изданной в 2001 году. К сожалению простой поиск не всегда помогает, ведь поисковики индексируют не все доступные в Интернете данные. До некоторых возможно добраться только при помощи прямых ссылок.

По информации сайта WebPlanet.Ru на долю  "невидимого Интернета" приходится не менее половины сайтов Сети. Согласно результатам проведенного в Университете Беркли в 2003 году исследования, поисковые сайты не видят более 90 000 терабайт информации, им доступны только 167 терабайт.

DeepDyve позволяет искать именно в этих скрытых терабайтах. Для этого сервис оснащен технологиями, которые используются в науке геномике для определения цепочек ДНК. Специальный алгоритм индексирует целые выражения длиной до 20 слов без применения семантического анализа . Он абсолютно  независим от языка, просто ищет символы по заданному образцу.

В Google можно задать поисковую строку не более чем из 32 слов.  DeepDyve же позволяет вводить  большие куски текста до 25 тысяч символов. Строка запроса исследуется на наличие известных сегментов текста, после чего пользователю выдаётся самая релевантная страница.

Но на самом деле все не так идеально. На сегодняшний день в DeepDyve проиндексировано только полмиллиарда страниц, что намного меньше, чем в том же Google. Для  увеличения своих баз  компания налаживает  связь с издателями различных научных статей.

С другой стороны, сервис еще только набирает обороты и ситуация со временем должна измениться в положительную сторону. На данный момент DeepDyve еще не готов к обработке большого количества запросов: при попытке зарегистрироваться на этом сервисе пользователь получает сообщение о том, что "в связи с нереальным интересом", проявленным к DeepDyve со стороны интернет-пользователей, логин и пароль будут высланы ему "на следующей неделе".

http://itua.info/news/internet/17784.html