Если у вас возникли сложности с курсовой, контрольной, дипломной, рефератом, отчетом по практике, научно-исследовательской и любой другой работой - мы готовы помочь.
Предоплата всего
Подписываем
КУРСКИЙ ГОСУДАРСТВЕННЫЙ ПЕДАГОГИЧЕСКИЙ УНИВЕРСИТЕТ
КАФЕДРА ИНФОРМАТИКИ И ТСО
“ ПОИСК ИНФОРМАЦИИ В WWW ”
выполнил: ст-нт ФМФ-56
Разиньков А.Н.
Руководитель: Ежова Т.В.
КУРСК-2002
Содержание:
1. Поиск информации в www…………………………………………………………1
1.1.Основы поисковых служб…………………………………………………………………1
Поисковые каталоги. Поисковые указатели (индексы). Сбор информации поисковыми роботами. Индексация ресурсов. Исполнение запроса клиента. Сравнение поисковых каталогов и указателей. От чего зависит качество поиска. Гибридные системы. Метапоисковые системы. Порталы. Рейтинговые службы.
1.2.Основные поисковые системы…………………………………………………8
AltaVista. Ask Jeeves. Direct Hit. Excite. FAST Search. GO/Infoseek. GoTo.
Google. HotBot. Inktomi. LookSmart. Lycos. MSN Search. Netscape Search.
Northern Light. Open Directory. RealNames. WebCrawler. Yahoo.
1.3. Отечественные поисковые системы……………………………………………11
Aport. Атрус(@Rus). Rambler. Яndex.
Ловушка для начинающих. Сложение наоборот. Арифметика вычитания.
Применим джокера. Контекстный поиск. Роль прописных букв. Поиск по
заголовкам. Поиск Web-узлов. Поиск URL-адресов. Поиск ссылок
Команда OR. Команда AND. Команда NEAR. Вложение команд.
Как проверить незнакомую поисковую службу. Реферативный поиск.
Углубленный поиск. Специальный поиск. Выводы и рекомендации.
Цели поиска: модель обучаемого. модель обучения. нейромодель обучаемого.
нейромодель обучения. нейросетевая модель обучаемого.
нейросетевая модель обучения.
Поиск информации в WWW
формацию или услугу в WWW, их надо, прежде всего, разыскать, а поиск информации — непростая задача. По состоянию на начало 2000 г. ресурсы Web оцениваются более чем в 850 миллионов Web-страниц.
Разумеется, рост Web-пространства в геометрической прогрессии не будет продолжаться вечно. Когда-то наступит момент насыщения. Можно пред положить, что темпы развития WWW замедлятся на рубеже 3-4 млрд. Web-страниц. Одной из причин замедления, в частности, станет ограниченность поля IP адресов. Впрочем, к тому времени, наверное, уже заработает Интер-нет-2, и все будет по-другому.
Для поиска информации в Сети используются специальные поисковые службы. Обычно поисковая служба — это компания, имеющая свой сер вер, на котором работает некая поисковая система. Услуги абсолютного большинства поисковых служб бесплатны, но, тем не менее, по темпам роста сегодня это самый эффективный бизнес в мире. Всего за несколько лет такие службы как Yahoo!, Alta Vista, Inktomi и некоторые другие разви лись от лабораторных проектов с бюджетом в десяток-другой тысяч дол ларов до компаний, стоимость которых составляет 10-15 миллиардов долларов. Такого темпа приращения капитала мир еще не знал, особенно для бесплатных (для конечного пользователя) услуг.
При этом интересно отметить, что ниша бизнеса далеко не освоена, и ниже мы увидим, как буквально в считанные месяцы из хорошей идеи «с нуля» рождаются новые гиганты.
Основы поисковых служб
Сегодня пользователь World Wide Web оказывается в той же ситуации, что ii читатель крупной библиотеки. Чем больше фонды библиотеки, тем труднее найти именно ту книгу, которая сейчас нужна. Для упрощения поиска в библиотеке существуют каталоги: систематический, алфавитный, предметный и другие. Существуют и специализированные каталоги, напри мер каталоги новых поступлений.
В Сети поиск обеспечивают специальные поисковые службы. Умение пользоваться ими, собственно говоря, и составляет умение пользоваться Интернетом. Все поисковые системы WWW основаны на гиперссылках. Обращаясь к поисковой службе, мы формулируем запрос, в котором фор мально описываем то, что хотим найти. Проведя нужные операции, служба формирует Web-документ, состоящий из гиперссылок, ведущих к ресур сам WWW, соответствующим нашему запросу. Какой из этих гиперссылок м ы воспользуемся — дело наше.
Несмотря на то, что результат всегда един (клиент получает список реко мендованных гиперссылок), принцип действия у разных поисковых служб может быть различным. Ниже мы рассмотрим, как классифицируются поисковые службы по типам предоставляемых услуг, а также по способам формирования своих ресурсов. Последнее очень важно для эффективной работы не только пользователей, но и Web-мастеров. Пользователи должны учитывать способ формирования баз данных, чтобы знать, на что они могут рассчитывать при поиске информации, а Web-мастера должны это знать, чтобы добиться наилучшего представления своих ресурсов в основных поис ковых службах мира.
Поисковые каталоги
Поисковые каталоги похожи на предметные каталоги общественных биб лиотек. На начальной странице поискового каталога мы выбираем тему, которая нас интересует, затем в рамках темы выбираем категорию, потом подкатегорию, и так далее, пока не получим конкретный список Web-ресур сов, рекомендованных для просмотра. Крупнейшим поисковым каталогом мира сегодня считается поисковая система Yahoo! (www.yahoo.com) Она предоставляет примерно 1 млн. ссылок к ресурсам WWW, то есть охва тывает чуть более тысячной доли всего Web-пространства.
Основным недостатком и, в то же время, достоинством поисковых катало гов является «человеческий фактор». Данные, которые заносятся в ката лог, проходят «ручную обработку». Сегодня на Yahoo! работают до 150 редакторов, ежедневно просматривающих Web-пространство в поисках наиболее ценных ресурсов по темам, вызывающим общественный инте рес. Кроме собственных редакторов служба использует и информацию, по ставляемую Web-мастерами. Так, например, теоретически любой владелец Web-страницы может самостоятельно заполнить положенную анкету и направить ее в адрес службы. Правда, гарантии, что страница будет вклю чена в каталог Yahoo!, это не дает, поскольку служба не замусоривает свои каталоги ссылками на страницы-однодневки. Клиентов службы всегда раздражают ссылки, указывающие на давно несуществующие ресурсы. Чтобы не иметь особой головной боли по проверке актуальности храня щихся ссылок, служба Yahoo! предпочитает скрупулезно подходить к фор мированию своих каталогов. Тщательность в подборе информации обеспечивает высокую репутацию Yahoo!, несмотря на то, что совокупный объем ее ресурсов крайне мал.
Другой подход к формированию каталога демонстрирует поисковая служба Open Directory (dmoz.org). В качестве источника для своих ресурсов она при влекает пользователей WWW, которые на добровольной основе могут обо зревать понравившиеся им Web-страницы, каталогизировать их и размещать ссылки на них на центральном сервере службы. Поскольку число добро вольных помощников может быть очень большим, у этой службы есть все шансы перекрыть успех Yahoo!. Но принцип добровольности не гарантирует качественности работы, поэтому каталоги, равные Yahoo по качеству, по-видимому, появятся еще не скоро. Однако есть и другие подходы, основанные, например, на 5МАНГ-технологии, и мы их тоже рассмотрим.
Поисковые указатели (индексы)
11ринцип действия поискового указателя похож на принцип действия пред метного каталога библиотеки. Пользователь формирует запрос с помощью ключевых слов, выражающих объект его поиска, а поисковая система выдает ему список ссылок на Web-страницы, содержащие данные ключевые слова. Ксли мы хотим найти информацию, посвященную взаимоотношениям А. Вольта с Н. Бонапартом, можно задать поиск документов, в которых одновременно встречаются слова Вольта и Бонапарт, например так:
+Вольта +Бонапарт или так:
Вольта AND Бонапарт
Основное отличие поисковых указателей от поисковых каталогов состоит is полной автоматизации всех этапов работы. Здесь отсутствует «челове ческий фактор», и потому количество Web-страниц, к которым ведет поис ковый указатель, намного больше. Летом 1999 г. крупнейшие поисковые указатели преодолели 200-миллионный рубеж и, как сообщают, следую щий рубеж (300-миллионный) будет взят в 2000 г.
Сбор информации поисковыми роботами
Поисковые указатели работают в три этапа. Создание поисковой системы начинается с разработки специальной агентской программы, которая спо собна путешествовать по Web-узлам Интернета, просматривать Web-стра ницы и копировать их содержание на центральный сервер поисковой системы. Такие агентские программы называют «червяками», «пауками», «поис ковыми роботами» (сокращенно «ботами»), «поисковыми машинами», «краулерами» и т. п. Многообразие названий связано с тем, что каждая поисковая система создает свою собственную, неповторимую программу и дает ей свое имя, которое впоследствии становится нарицательным. Большинство современных поисковых систем начинались с того, что в 1993-94 годах в университетских лабораториях были разработаны экспе риментальные программы для мониторинга Сети.
Если при чтении Web-страницы поисковый робот находит на ней ссылки на другие страницы того же Web-узла, он переходит по этим ссылкам, читает их содержание и так далее. Как червяк, он проникает в самые отда ленные закоулки WWW.
Индексация ресурсов
Второй этап работы поисковой системы — индексация. Собрать на цен тральном сервере образы сотен миллионов Web-страниц — это одно дело, а суметь выбрать те из них, которые нужны клиенту, сформировавшему запрос, — совсем другое. Отвечать надо очень быстро, а для этого данные надо хранить не как попало, а в виде специальных структур. Процесс пре образования данных из той формы, в которой они хранятся на Web-стра ницах, в другие формы, удобные для быстрого просмотра, называется индексацией. В результате индексации и образуется база данных, кото рую называют поисковым указателем (индексом).
У каждой поисковой системы свои приемы и методы индексации. В част ности, перед индексацией большинство систем очищают документ от заре зервированных слов (stop-words), к которым относятся артикли, предлоги, союзы, местоимения и другие слова, имеющие менее 4 символов. Однако не только короткие слова могут быть зарезервированными. Очень распрос траненные слова, такие как Computer и Internet тоже резервируются. Искать что-то по ним бесполезно, так как они встречаются повсеместно.
Специализированные поисковые службы могут использовать и другие слова в качестве зарезервированных. Например, если служба занимается поиском книг (books), то слово book для нее может считаться зарезервиро ванным.
На этапе подготовки к индексации может происходить нормализация слов (stemming) за счет отбрасывания суффиксов и окончаний. После такой «зачистки» фраза типа «Мы с братом любим ловить рыбу» превращается в ' нечто похожее на «брат люб лов рыб». Исходный документ может быть най ден при поиске по ключевым словам «брат», «любовь», «ловить», «рыба», но никогда по словам «мы» или «с».
Некоторые системы производят нормализацию всегда. Ряд систем, бази рующихся на службе Inktomi (см. ниже) могут действовать как тем образом, так и другим. Служба Alta Vista не производит нормализацию никогда, и это ее уникальная особенность, которая, как будет показано ниже, активно используется для контекстного поиска.
На основе «зачищенного» документа готовится индекс. Индекс — это осо бая база данных, созданная специальным образом, чтобы ускорить поиск. Существует множество методов индексации. Разумеется, они не разглаша ются. Как и поисковый робот, алгоритм индексации составляет коммер ческую тайну поисковой службы, поэтому в качестве примера мы приведем лишь простейший тип индекса — так называемый обратный файл.
Суть обратного файла состоит в том, что составляется словарь из всех слов, встреченных во всех документах, собранных поисковым роботом, а затем для каждого слова записывается группа чисел, указывающих на то, в каких документах оно встречается, насколько часто, а также кое-какая служебная информация.
Исполнение запроса клиента
Третий этап — ответ на запрос клиента. Лучшие поисковые системы в ответ на запрос просматривают свои индексы за десятые доли секунды и немед ленно возвращают списки ссылок, ведущих к затребованным ресурсам. Работа происходит следующим образом.
Система анализирует ключевые слова, которые клиент использовал в зап росе. С ними производятся те же операции освобождения от зарезервиро ванных слов и нормализации, после чего выполняется поиск совпадений с содержимым поисковых индексов. Эти операции в большинстве поис ковых систем происходят примерно одинаково, но самая последняя опе рация, когда по найденным совпадениям формируется итоговый список ссылок, всегда различается. У каждой поисковой системы своя политика формирования результирующего списка.
Если найдено очень много ссылок на ресурсы, удовлетворяющие запросу, то встает проблема их упорядочения. Здесь важно, какие ссылки дать в начале списка, а какие — в конце, то есть, надо вводить какой-то рейтинг. Разные поисковые системы имеют разные рейтинговые системы. При исчис лении рейтинга учитывается множество параметров. За некоторые начис ляются положительные баллы, а за некоторые — наоборот штрафные. Положительный рейтинг начисляется, в частности, при следующих обсто ятельствах:
• если разыскиваемые слова встречаются на Web-странице неоднократно (но не слишком часто, и не подряд);
• если они расположены близко к началу страницы;
• если эти слова присутствуют в заголовке страницы;
• если Web-страница имеет иллюстрацию, альтернативный текст кото рой тоже содержит слова, введенные пользователем.
Лучшие поисковые системы недавно ввели новый подход к рейтингованию. Они учитывают количество ссылок в проиндексированном простран стве Web, ведущих к данному ресурсу. Это естественно, ведь чем больше публикаций ссылаются на данную страницу, тем она популярнее и тем выше вероятность того, что она будет полезной автору запроса. В традици онном библиотечном деле такой подход известен. Например, в США давно издается многотомный ежегодный «Индекс цитирования» (Citational Index), в котором каталогизируются ссылки разных авторов на первоис точники. Это непростой технически, но очень полезный для клиентов метод индексации ресурсов.
К современным относятся и коммерческие хитрости. Относительно недавно некоторые поисковые системы (в том числе и такая известная, как Alta Vista) начали повышать рейтинг тем, кто готов за это платить. Такой под ход выглядит не очень красиво, но с точки зрения владельцев поисковых систем оправдан извечным тезисом «заботы о потребителе». Они заявляют, что для потребителя ценность информации на странице солидной фирмы, готовой нести расход на свою рекламу в Сети, все-таки выше, чем ценность доморощенной страницы никому не известного студента. Возможно, что они и правы. Во всяком случае тот, кто заплатил деньги за рейтингование своей страницы, наверное будет больше уделять внимания ее качеству, чем тот, кто сделал ее впопыхах и пристроил на первом попавшемся бес платном сервере.
Сравнение поисковых каталогов и указателей
У каждого из двух основных типов поисковых служб есть достоинства и недостатки. Поисковые каталоги формируются вручную с помощью живых людей. Поэтому, как правило, если мы находим в них нужный нам ресурс, то этот ресурс — один из лучших в Сети. Он не обязательно самый луч ший и, может быть, лишь входит в первую двадцатку, но он явно не слу чаен и может рассматриваться как рекомендованный. Ответственные редакторы поискового каталога, имеющие солидное образование в боль шинстве областей науки, техники и культуры, не будут включать в свой каталог очевидную ерунду. Поисковые каталоги удобнее и тем, что там не бывает десятков ссылок на один и тот же ресурс, размещенный в разных местах или проиндексированный в разное время. В общем, если надо быс тро найти лучший источник по какой-то теме, надо начинать поиск с поис кового каталога.
Недостатком поисковых каталогов является их слабое знание о подлин ных ресурсах WWW, которое с каждым днем падает в относительном изме рении. Как мы уже говорили, крупнейший поисковый каталог Yahoo! за шесть лет своей работы довел количество обработанных ресурсов до мил лиона, в то время как каждый год появляются сотни миллионов новых Web-страниц.
Поисковые указатели черпают свою исходную информацию от поисковых роботов, день и ночь ползающих по просторам WWW. Процесс сбора инфор мации полностью автоматизирован, поэтому объем проиндексированного пространства намного больше, чем у поисковых каталогов. Сегодня этот показатель превышает 25% общего пространства Сети. С другой стороны, отсутствие человеческого фактора сказывается на качестве того, что можно найти через поисковые указатели. Для робота совершенно все равно, напи сана ли статья по физике академиком или школьником. При рейтингова-пии робот может даже поставить страницу школьника выше.
Поэтому поисковые каталоги лучше использовать для ознакомительного поиска, когда тема известна, а предпочтений нет, например при подго товке школьного реферата на тему «Теория относительности». Каталог быстро выведет вас на Web-узел, на котором вы либо найдете то, что хотели, либо получите ссылки на другие полезные ресурсы. А поисковые указатели стоит использовать для более глубоких или экзотических розысков. Напри мер, человеку, которому о теории относительности и так уже все известно, вряд ли поможет поисковый каталог, имеющий ссылки на общеизвестные Web-ресурсы. А поисковый указатель, проиндексировавший 300 милли онов Web-страниц, может ему предложить какой-то уникальный отчет о семинаре, проведенном в университете штата Айдахо или в Новосибирске.
От чего зависит качество поиска
Как нетрудно догадаться, достоинства поисковых каталогов являются недостатками поисковых указателей и наоборот. Основных параметров, с помощью которых оценивают качество поисковых систем, всего два: коэф фициент попадания и коэффициент охвати.
Коэффициент попадания показывает, какой процент ссылок, выданных поисковой системой, действительно относится к той теме, которая интере сует клиента. Для поисковых каталогов этот коэффициент очень высок. Поскольку их составляют люди, появление «мусорной» ссылки — редкость. Обычно она возникает только когда за время, прошедшее после регистра ции, Web-страница перестает существовать. Для каталогов этот коэффи циент составляет порядка 70-80%, и уж во всяком случае не должен быть менее 50 %.
Для поисковых указателей этот коэффициент печально низок. Если не предпринимать специальных мер, он составляет единицы процентов. При чина лежит, во-первых, в том, что автоматические средства не могут точно выявлять тематическую принадлежность Web-страниц на основе формаль ных признаков, а во-вторых, в том, что большинство клиентов не умеют пользоваться всеми возможностями поисковых систем и формируют зада ние на поиск далеко не оптимально.
Коэффициент охвата показывает, насколько база данных поисковой сис темы отражает истинное количество информации, имеющейся по данной теме в мире. Здесь впереди поисковые указатели. Самые совершенные из hiix имеют коэффициент охвата порядка 25%. Поисковые каталоги, наобо рот, не охватывают и одного процента всех наличных ресурсов.
С точки зрения пользователя качество поиска означает стремление полу чить как можно больше ссылок по интересующей его теме, но так, чтобы в результирующем списке было как можно меньше ссылок, не имеющих прямого отношения к объекту поиска. Пользователь желает, чтобы каждый из коэффициентов был близок к 100%. Его субъективная оценка качества поисковой системы напоминает произведение коэффициента попадания на коэффициент охвата. Сегодня же и для поисковых каталогов, и для поиско вых указателей это произведение составляет десятые доли процента.
В стремлении повысить качество работы поисковых служб есть попытки совместить оба подхода. При этом возможны два варианта: поисковые каталоги привлекают возможности поисковых указателей, переадресуя им запрос. Например, до последнего времени поисковый каталог Yahoo переадресовывал особо сложные запросы поисковому указателю Alta Vista.:
Сегодня Yahoo! привлекает средства другого партнера — Inktomi. '
С другой стороны, поисковые указатели научились выполнять автоматическую каталогизацию своих ресурсов и предоставлять к ним доступ так как это принято в поисковых каталогах. Пример такого подхода являет самый мощный сегодня поисковый указатель Fast Search
Метапоисковые системы
К метапиисковым системам относится множество поисковых служб вто рого эшелона. Они принимают от пользователя запрос и размещают его сразу на нескольких поисковых серверах. Потом они собирают поступив шую от них информацию, обобщают ее, структурируют, рафинируют (очи щают) и передают клиенту. Увеличенное время исполнения запроса компенсируется улучшенным качеством результатов поиска.
Первое время крупные поисковые системы спокойно смотрели на суще- , ствование «под собой» метапоисковых систем. Однако в последнее время в связи с бурным развитием идеи порталов все чаще и чаще встречаются запреть! на метапоиск. А если говорить точнее, крупные поисковые сис темы начали заниматься им сами, привлекая ресурсы коллег на взаимо выгодной основе.
Входя в World Wide Web с помощью броузера, мы попадаем на какую-то страницу, которая задана в настройках броузера в качестве начальной. Пользователь может легко перенастроить свой броузер на работу с другой начальной страницы. Какую именно страницу он будет использовать — его личное дело. Опыт показывает, что очень удобно иметь в качестве началь ной страницы такую, на которой уже представлено несколько ссылок на основные поисковые системы. Удобно здесь же иметь доступ к электрон ной почте. Неплохо, если на этой странице всегда отображаются послед ние новости из мира политики, искусства, спорта, бизнеса и т. п. Такие « готовые» начальные страницы называются порталами. В мире существу ет множество порталов — настройте свой броузер на тот, который наилуч шим образом соответствует вашим личным интересам. Хорошие порталы предоставляют пользователю возможность персональной настройки «под себя». Надо только включить флажки против тех поставщиков информа ции, которые вам интересны, и выключить у тех, которые для вас неакту альны.
Борясь за клиентов, многие поисковые системы превращаются в порталы. Это означает, что они не только готовы поставлять результаты поиска, но II способны выполнять другие услуги. Часто название порталов начинается со слова My (Мой/Моя/Мое). Например, если на поисковых системах Yahoo!, Alta Vista или DejaNews вам предлагают подписаться на службу MyYahoo, MyAltaVista или MyDejaNews, то, значит, речь идет о том, чтобы стать посто янным клиентом удобного портала.
Другой причиной того, что поисковые системы постепенно превращаются в порталы, стал тот факт, что им стало трудно одновременно и «копиро вать» пространство WWW, и индексировать гигантские базы данных, и "Услуживать запросы клиентов. Поисковые системы начинают распреде лять обязанности. Задачи по контролю за Web-пространством постепенно передаются на партнерских основаниях «третьим» фирмам, а сами поис ковые системы сосредоточиваются на обслуживании клиентов и привле чении рекламодателей, то есть превращаются в порталы.
Рейтинговые службы
В последние три года появился новый тип служб, позволяющих быстро разыскивать информацию в Сети, — это так называемые реитинговые службы. Они занимают промежуточное положение между поисковыми службами и порталами и могут использоваться как в том, так и в другом качестве.
Суть рейтинговой службы состоит в том, что на ее сервере создаются тема тические СП1-1СКИ ссылок на наиболее популярные Web-ресурсы. Хоть эти списки и небольшие, представительность их велика, поскольку именно эти ссылки предпочитают большинство клиентов Сети.
Когда мы выбираем одну из ссылок, представленных на сервере службы, срабатывает счетчик, и рейтинг этого ресурса увеличивается. Каждый следующий посетитель видит, сколько «нащелкали» его предшественники, и понимает, какой ресурс ему стоит посмотреть. Поиск с помощью рейтинговых служб можно рассматривать как поиск «по рекомендациям». Разумеется, он не может претендовать на объективность, но когда речь идет о темах, имеющих общественный интерес, таких как новости, поли тика, спорт, кино, музыка, компьютерные игры и т. п., этим «рекоменда циям» можно доверять. Самая популярная отечественная рейтинговая служба — Rambler (www.rambler.ru). Наиболее популярная зарубежная рей тинговая служба — Webside Story (www.hitbox.com)
Основные поисковые системы
AltaVista (http://www.altavista.com/)
По количеству индексированных Web-страниц Alta-Vista — одна из крупнейших (но не самая крупная, как это иногда считается) поисковых систем мира. Огромный объем охвата Web-пространства и мощ ный набор поисковых команд делают эту систему излюбленным средством поиска для большинства пользователей. Система была запущена в эксплуа тацию в декабре 1995 г. и долгое время считалась молодой, но бурно развива ющейся. Для начинающих система имеет упрощенную службу, которая называется Ask Alta Vista. В своей работе эта служба привлекает другую поис ковую службу — Ask Jeeves (см. ниже). Несмотря на то, что сегодня Alta Vista уже не является самым удобным средством поиска и владеет не самым большим индексом, ее популярность по-прежнему выше, чем у служб, кото рые превзошли ее по многим показателям, что связано с устоявшимися привычками миллионов пользователей.
Ask Jeeves (http://www.askjeeves.com/)
Эта система представляет образец человеческого (неавтоматизированного) подхода к индексации и хранению информации о Web-документах. Ее цель не в том, чтобы выдать в ответ на запрос как можно больше возможных ссылок, в том, чтобы они были наиболее точны. В идеале система должна вас направить именно к той Web-странице, которая вам как раз и нужна. Сис тема была введена в эксплуатацию в июне 1997 г. Результаты поиска в этой системе используются и при размещении запроса в Alta Vista.
Direct Hit (http://www.directhit.com/)
Систему Direct Hit можно назвать системой «рафинирования» результатов поиска, выдаваемых другими поисковыми системами. Она контролирует, какими результатами поисков клиенты пользуются наиболее часто и, тем самым, создает некий рейтинг популярности Web-стра ниц. Этот рейтинг она предоставляет другим поисковым системам, и они учитывают его при выдаче результатов. Технология Direct Hit напрямую используется поисковой системой HotBot. Она также учитывается систе мами Lycos, LookSmart и MSN Search.
Excite (http://www.exc1te.com/)
Excite — одна из самых популярных поисковых систем World Wide Web. Она имеет указатель среднего размера и кроме поиска Web-страниц предоставляет услуги по поиску других материалов, например сведений о компаниях или результатов спортивных соревнований. Система была создана в конце 1995 г., прошла этап бурного развития и в 1996 г. погло тила двух ближайших конкурентов: систему Magellan и WebCrawler, хотя те по-прежнему сохраняют свои торговые марки и предоставляют поис ковые услуги как самостоятельные службы.
FAST Search (http://www.alltheweb.com/)
Эта система, принадлежащая норвежской компании, ранее называлась All TheWeb. Несмотря на то, что она была запущена совсем недавно (в мае 1999 г.), перед ней ставится задача обогнать конкурентов в полноте коллекций ссылой;
на Web-страницы. Кажется, ей это удается. Летом 1999 г. FAST Search первое перешагнула 200-миллионный рубеж проиндексированных Web-докумеатов. Кроме системы FAST Search та же компания контролирует подразделение системы Lycos, занимающееся поиском музыкальных файлов в формате МРЗ. л!
Go/Infoseek (http://www.go.com/)
Go/lhfoseek — это сочетание известной в прошлом поисковой системы Infoseek (была основана в 1995 г.) и современного портала Go (создан в 1999 г. и принадлежит небезызвестной Walt Disney Co). Кроме поисковых возможностей Infoseek портал пре-| доставляет зарегистрированным пользователям возможность персональной настройки среды, бесплатную электронную почту и другие полезные cepвисы. Пользователи этой системы отмечают высокое качество ссылок, возвращаемых системой, что объясняется специальным «фирменным» алгоритмом! поиска. Кроме автоматизированного указателя система имеет также обширный каталог Web-узлов, составляемый вручную.
GoTo (http://www.goto.com/)
Поисковая служба GoTo не имеет отношения к порталу Go , и известна тем, что формирует результаты поиска на коммерческой основе. Компании, владеющие Web-узлами, за определенную плату могут договориться, чтобы ссылки на них появлялись на более высоких местах в списках итоговых результатов. Насколько известно, более никто, кроме Alta Vista, не занимается такими махинациями. Впрочем, служба GoTo не считает это махинацией, а полагает, что платежеспособность Web-издателя напрямую связана с качеством поставляемой им информации, и потому для пользователя такой подход полезен. При формировании списка служба берет оплаченные ссылки из собственной базы данных, а неоплаченные черпает от поисковой системы Inktomi (см. ниже).
Служба была запущена в 1997 г. В ее основу был положен Web-краулер World Wide Web Worm, приобретенный у разработчика — университета штата Колорадо. С его помощью собиралась первичная база указателя. В 1998 г. служба перешла на нынешнюю «коммерческую» модель обслуживания и начала использовать систему Inktomi в качестве генератора «некоммерчес ких» ссылок.
Google (http://www.google.com/)
Служба Google известна тем, что при генерации списка ссылок в первую очередь выдает ссылки на те Web-страницы, к которым из других документов ведет наибольшее количество ссылок. Это дает очень интересный эффект. На большинстве поисковых систем совершенно бесполез но искать информацию по таким тривиальным словам как Cars (Автомобили), Internet, WWW, Games (Игры). Поиск по этим словам вернет столько ссылок, что среди них невозможно найти самые полезные. Служба Google при про ведении поиска по тривиальным словам дает отличные результаты, посколь ку руководствуется мнением других пользователей, ранее осуществлявших подобный поиск.
HotBot (http://hotbot.lycos.com/)
По популярности среди сетевой общественности HotBot приближается к Alta Vista. Как и Alta Vista, эта служба имеет огромный поисковый указатель и много полезных функций. При генерации первой "^^S^^^^^ страницы ссылок HotBot использует результаты, поступающие от системы Direct Hit (см. выше). При генерации последующих страниц используется система Inktomi (см. ниже), услугами которой пользуются и другие поис ковые службы. Кроме поиска по ключевым словам служба предоставляет также возможность поиска по тематическому каталогу. Данные для ката лога черпаются из проекта Open Directory (см. ниже).
Служба HotBot была создана в мае 1996 г. компанией Wired Digitals, кото рую в 1998 г. перекупила поисковая служба Lycos. Несмотря на это, HotBot продолжает функционировать как самостоятельная поисковая служба, парал лельно с Lycos.
Inktomi (http://www.inktorm.com/)
Ядро поисковой системы Inktomi было разработано вуниверситете Калифорнии в Беркли. Несколько позже создатели системы учредили одноименную компанию и сформировали указатель ссылок Inktomi, который был использован в качестве основы службой HotBot. Сегодня этот указатель используют и некоторые другие поисковые службы. Несмотря на то, что при ответе на запрос пользователя все подключенные службы обращаются к одной и той же базе данных, результаты выдаются разные. Это связано с тем, что хотя Inktomi и обеспечивает партнерам доступ к общей базе указателей, система всетаки различает партнеров и приме няет системы рейтингования и фильтрации результатов в соответствии с их идеологией.
LookSmart (http://www.looksmart.com/)
Служба LookSmart — ближайший последователь концепции Yahoo! в том, что касается «человеческого фактора» при составлении каталогов Web-ресурсов. Она предоставляет доступ к своему каталогу службе Alta Vista и другим партнерам. В тех случаях, когда поиск по архивам LookSmart не дает результата, ей помогает своими указателями Alta Vista.
Служба LookSmart была создана в 1996 г. при финансовой поддержке концерна Reader's Digest, но примерно через год ее учредители откупили ' службу, и сегодня она независима.
Lycos (http://www.lycos.com/)
Первоначально служба Lycos была запущена как поисковая система, основанная на программе-роботе, собирающей информацию из WWW. Запущенная в эксплуатацию еще в мае 1994 г., сегодня она счита ется одной из старейших поисковых служб. Однако совсем недавно, в 1999 г. служба перешла на другую модель, похожую на Yahoo! и основанную на каталогизации Web-узлов. Свои основные каталоги служба получает от проекта Open Directory, а дополнительные возможности поиска опираются на мониторинг WWW с помощью программ-роботов. В качестве альтер нативной услуги Lycos ведет еще один каталог — каталог Web-узлов Lycos Community Guides.
Название компании образовано из латинского словосочетания, которое можно перевести примерно как волкопаук. В 1998 г. служба Lycos выку пила акции своего ближайшего конкурента HotBot, который продолжает автономную работу под общим управлением Lycos.
MSN Search (http://search.msn.com/)
Служба MSN Search, принадлежащая компании Microsoft была создана в 1998 г. и является порталом, на котором представлены и другие поисковые службы. В основу результатов поиска, выдаваемых службой, положен указатель, поставляемый системой Inktomi.
Netscape Search (http://search.netscape.com/)
Поисковая служба Netscape Search получает первичные результаты поиска от проекта Open Directory и собственной базы Smart Browsing. Вторичные результаты Search поставляются службой Google. На портале Netscape NetCenter кроме этой соб ственной службы присутствуют ссылки и на другие поисковые службы.
Yahoo! (http://www.yahoo.com/)
Yahoo'—одна из старейших и наиболее популярных поисковых служб. Ее каталог был запущен в эксплуатацию еще в 1994 г. Секрет успеха Yahoo' в < чело веческом факкоре». На службу работают около 150 редакторов, неустанно улучшающих и пополняющих множество тематических разделов огром ною каталога. В каталоге содержатся данные по одному миллиону Web-узлов. Если поиск по собственному каталогу не дает результата, привле каются ресурсы поискового указателя Inktomi.
Отечественные поисковые службы
С большим удовлетворением мы должны отметить, что российский сектор Интернета развивается очень бурно. Сегодня ситуация такова, что даже если западный сектор по каким-либо причинам «прикажет долго жить», российский сектор достаточно автономен, чтобы развиваться самостоя тельно и достойно обслуживать отечественных клиентов.
Важную роль в становлении и развитии отечественного сектора Интернета сыграли отечественные поисковые службы (за что им огромное спасибо). Не знаем, смогли ли они к сегодняшнему дню подойти к самоокупаемости, но в первые годы без сомнения работали на энтузиазме, доброй воле своих сотрудников и вере в будущее. В России есть как универсальные, так и специализированные поисковые службы. Как и везде в мире, в первую оче редь развиваются поисковые указатели и рейтинговые системы, но имеется и полноценный каталог — @Rus, в прошлом «Ау'».
Aport (http://www.aport.ru/)
«Апорт» — один из первых поисковых указателей российского Интернета — детище компании « Агама » (http://www.agama.ru/). В прошлом служба предоставляла традиционные общепринятые средства поиска, но в конце 1999 года внедрила новую систему («Апорт 2000») и сделала большой шаг вперед, особенно в том, что касается представления результатов поиска. Выше мы уже отмечали, что сегодня владение самым большим проиндексированным пространством Web уже не является самоцелью. Главное — наилучшим образом обеспечить потребности пользователя, afl простейший путь к этому лежит не в безмерном увеличении индекса, а вs применении новых технологий при обработке результатов. Прежде всего следует отметить, что системе «Апорт 2000» удается мастерски сочетать «машинный» и «человеческий» факторы. Это достигнуто за счет тесной интеграции с партнерским каталогом @Rus. Так, например, когда по результатам поиска выводится адрес Web-страницы, он может сопровождаться кратким описанием Web-узла, взятым из каталога @Rus. Хотя пользователь и не видит глубинных процессов, но система «Апорт 2000» уделяет особое внимание рейтингованию результатов поиска. В частности, она использует наиболее эффективную сегодня систему рейтингования по количеству ссылок, ведущих к данному ресурсу (по индексу цитирования). По способу представления результатов поиска служба «Апорт 2000" в настоящее время является одной из самых передовых не только в России, но и в мире. Страница результатов поиска доставляет настоящее эстетическое удовольствие, хотя и требует разрешения экрана не менее, чем 600х800 точек
Атрус (@Rus) (http://www.atms.ru/)
@Rus —популярнейший отечественный поисковый каталог, известный в прошлом под именем «Ау!» (http://www.au.ru/). Каталог разработан компанией « Web Tech» в сотрудничестве с компанией «Агама». При его наполнении активно используются средства поисковой системы «Апорт 2000», а результаты поиска могут предоставляться как самостоятельно через службу @Rus, так и в составе результатов поиска, проведенного службой «Апорт 2000». |
Кроме средств поиска служба @Rus предоставляет удобный каталог-портал Мой @Rus. Пользователь может настроить его на быстрое получение наиболее нужной ему информации. Средства настройки каталога позволяют также отключить все лишнее на основной странице поисковой сиетемы, что делает работу с ней особенно быстрой и удобной.
Rambler (http://www.rambler.ru/) \
Rambler — это рейтинговая система, обладающая всеми основными функциями поисковых указателей. Как поисковый указатель, служба обладает одним из крупнейших индексов в России, но ей явно недостает быстро действия и современных алгоритмов рейтингования результатов поиска. Впрочем, это не очень существенно, ведь основную популярность служба приобрела в первую очередь как рейтинговая система. Она позволяет быстро выявить круг Web-узлов, поставляющих информацию на заданную тему и оценить их популярность по количеству посещений за последние сутки. Мы уже говорили о том, что эта характеристика качественности Web-ресурса является относительной, но в тех случаях, когда речь идет о теме, имеющей общественный интерес, ей можно доверять.
Япс1ех (http://www.yandex.ru/)
яndex — мощная поисковая служба, основанная на указателе, обладающая как большой и представительной базой данных по отечественным Web-ресурсам, так и изощренной системой индексации. Функционирование службы обеспечивает компания CompTek (http://www.comptek.ru/).
На основной странице службы сказано, что «поиск — это искусство». Одна ко это не означает, что для работы с ней надо быть особо искусным. Про сто для тех, кто предпочитает подходить к поиску творчески и стремится развивать свое мастерство, Яndех предоставляет уникальные в своем роде инструменты, сосредоточенные в разделе расширенного поиска. Возможно, он даже несколько опережают свое время и украсили бы западную поис ковую службу, имеющую дело с сотнями миллионов проиндексированных документов. А в российском секторе, где пока проиндексировано лишь 10-20 млн документов, мы нередко обходимся средствами простого поиска.
Но и в области простого поиска служба Яndех имеет ряд технологических достижений, прежде всего интеллектуальный механизм морфологичес кого разбора слов, что особенно важно для русского языка.
Интересна новая услуга, предоставляемая службой. Для корпоративных клиентов она бесплатно предоставляет «облегченную» версию программы Яndeх.site, выполняющей индексацию содержимого Web-узла. Это удобно тем владельцам Web-узлов, которые хотели бы организовать локальную систему для поиска информации в пределах собственного узла. В то время как большинство поисковых служб хранят свои средства индексации как < зеницу ока>, этот шаг компании CompTek выглядит удачным маркетин говым ходом, способствующим росту популярности службы.
Приемы простого поиска информации в WWW
Каждая поисковая система предоставляет свои методы поиска и имеет свои особенности в правилах записи комбинации ключевых слов. Однако есть общие элементы, одинаково справедливые для большинства поисковых систем.
Прежде всего, надо заметить, что чем точнее сформулировано задание на поиск, тем точнее будут и результаты. Например, если вы хотите найти документы с описанием замеченных ошибок Windows 98, то так и надо формулировать запрос: ошибки Windows 98, а не просто Windows. На англо язычных серверах очень часто срабатывает простое человеческое описа ние проблемы: printer works incorrectly (принтер работает неправильно).
Ловушка для начинающих
Обычно наша задача состоит в том, чтобы выделить в пространстве Web самые нужные документы, однако многие начинающие ловятся на один и тот же крючок. Например, если вы хотите найти информацию о компьютерных играх (computer games), то кажется, что так и надо оформить запрос:
computer games
Увы, для большинства поисковых систем этот запрос будет ошибочным. При таком запросе система будет искать все Web-страницы, в которых встречается либо слово computer, либо слово games, либо оба вместе. В WWW полно страниц, на которых упоминаются компьютеры и нет ни слова про игры. Точно так же там полно страниц со спортивными, настольными и другими играми, которые нам не интересны. Вот всю эту массу и надо как-то отсеять, а мы наоборот ее запрашиваем.
Вот список поисковых систем, которые рассматривают группу слов, вве денных через пробел, как задание на поиск любого из этих слов:
AltaVista Excite GoTo
Infoseek LookSmart Netscape Search
Snap WebCrawler Yahoo!
Следующие системы тоже способны выполнять поиск по любому из слов группы, но для этого надо либо установить соответствующий флажок, либо выбрать соответствующий пункт в меню:
HotBot (через меню);
Lycos (в режиме расширенного поиска);
MSN Search (через меню);
Rambler (после установки флажка Все словоформы).
Система Northern Light позволяет производить поиск по любому из ключе вых слов только путем использования логической команды OR (см. ниже). Система Google вообще не имеет средств для такого поиска («ловушка для начинающих» в ней принудительно закрыта).
Если нам надо, чтобы поисковая система нашла страницы, на которых одно временно присутствуют все использованные ключевые слова, то перед каж дым из них надо поставить знак «+». Предположим, вы хотите узнать, не 'было ли в жизни известного лица каких-нибудь щекотливых ситуаций. В этом случае в условии поиска надо указать:
+Клинтон +скандал
'Поисковая система выдаст список страниц, на которых встречаются оба слова, хотя, конечно, не исключено, что между ними нет прямой связи. Список слов может быть больше — тогда результаты поиска будут точнее, например:
+свет +оптика +линза
Использование знака «+» особенно полезно, если вы провели поиск по рас пространенному слову, но в ответ получили так много ссылок, что не знаeтe, как с ними поступить. Используя знак «+», мы сужаем круг поиска и уменьшаем количество возможных ссылок.
Знак «+» понимают все основные поисковые системы, за исключением LookSmart. А следующие системы выполняют такой поиск по умолчанию, рдаже если знак «+» не указан:
Google HotBot
Lycos MSN Search
Northern Light Aport 2000
Rambler (в режиме простого поиска при сброшенном флажке Все словоформы).
Имеет отличия и российская система Яndex. Если слова разделены пробелами, то система ищет одновременное появление этих слов, но только в пределах одного предложения. Если же требуется одновременность в пределах всего документа, надо использовать знак «+».Интересную особенность имеет и российская система Rambler. В ней знак«+» можно использовать для управления весовым коэффициентом при рейтинговании результатов. Так, например, поставив несколько знаков «+» перед каким-либо словом, можно форсировать отображение страниц, содер жащих его, в вершине результирующего списка.
Арифметика вычитания
Интересно, что сужать круг поиска можно не только знаком «+», но и знаком «-».Допустим, вам надо написать для детского сада реферат о деятельности президента Клинтона, но при этом не хочется вникать в его исто рию с Моникой Ленински. Исключить Ленински из рассмотрения можно знаком «минус», например так.
Клинтон -Левински
Если, к примеру, нам надо написать реферат по оптике, но только по гео метрической, а не по волновой, то поиск может быть таким:
+свет -оптика -волна
Последняя команда разыщет все страницы, где присутствуют слова свет и оптика, но покажет только ссылки на страницы, не содержащие слова волна.
Знак «-» понимают практически все основные поисковые системы.
Применим джокера
Возьмем следующее предложение:
В геометрической оптике световой луч рассматривается как прямая линия.
Интересно отметить, что поиск по команде +свет +оптика может его и но найти, хотя это самая настоящая геометрическая оптика. Мы дали команду искать слово свет, а в документе написано: световой. Мы дали команду искать слово оптика, а в документе написано: оптике. Разумеется, многие поисковые системы производят нормализацию слов, но не все и не всегда, так что не стоит на это полагаться, а следует использовать подстановочный символ «*». Как джокер в карточной колоде может заменить любую карту, так этот символ может заменить любой другой символ или набор любых символов до конца слова. Если бы мы сформировали свой запрос так:
+свет* +оптик* -волн* то наверное его результаты были бы шире без особой потери точности. Подстановочный символ «*» можно использовать в следующих поиско вых системах:
AltaVista HotBot
MSN Search Northern Light
Snap Yahoo!
Некоторые из крупнейших поисковых служб поддерживают нормализа цию слов по умолчанию, то есть, они уже учитывают сокращение слов до основы, и потому в них не надо использовать подстановочный символ. В частности, к таким службам относится Infoseek.
Контекстный поиск
А почему бы нам сразу не искать то, что надо?
+геометрическая +оптика
Может быть, это и было бы хорошим решением, но такой поиск выдаст ссылки на страницы, где упоминаются оба эти слова, причем совсем не Необязательно, что вместе. То есть, слово геометрическая может быть в одном конце текста, а слово оптика — совсем в другом. Если же мы хотим объедить оба эти слова в одно сочетание, то надо применить кавычки:
"Геометрическая оптика" "геометрическая оптика"
случае использования кавычек поисковая система разыскивает документы, в которых абсолютно точно есть тот текст, который в них заключен. Поиск с помощью кавычек называется контекстным поиском.
Роль прописных букв
Прописные буквы при проведении поиска имеют особый статус. Вам ведь понятна разница между сочетаниями красная шапочка и Красная Шапочка? прописными буквами поисковые системы обращаются буквально, то есть разыскивают тексты, в которых слова записаны точно такими же буквами. Со строчными буквами все происходит демократичнее. Совпадения засчитываются и в том случае, когда в тексте стоит прописная буква, и в том случае, когда буква строчная.
поиск по словам:
+красная +шапочка
вернет результаты, в которых будут и красная шапочка, и Красная шапочка, ДЦ красная Шапочка, и Красная Шапочка.
Ир Другой стороны, поиск по словам:
И| +красная +шапочка Издаст гораздо более узкий результат: Красная Шапочка, — и все.
Поиск по заголовкам
Каждая Web-страница может иметь заголовок, если Web-мастер не поленился его создать. Когда мы разыскиваем Web-страницы с помощью поисковых систем, то по результатам поиска нам обычно выдается ссылка, в которой присутствует заголовок Web-страницы, если он есть. Если его нет, то обычно выдается одно-два предложения первого абзаца.
Многие поисковые системы позволяют разыскивать Web-документы по тексту, содержащемуся в заголовках. Такой поиск существенно уменьшает количество возвращаемых ссылок, но очень точно выводит на нужные мате риалы. Например, если вам нужны данные для доклада о Солнечной сис теме, имеет смысл искать не просто словосочетание Solar System (Солнечная система), а страницы, в которых это сочетание присутствует в заголовке. Командой такого поиска является title:, например:
title: Solar System или (лучше)
title: solar system
Поиск заголовков Web-страниц по команде title: поддерживают следующие поисковые системы:
AltaVista GoTo HotBot Infoseek MSN Search Northern Light
Snap
Поисковый каталог Yahoo! тоже имеет команду для поиска заголовков. Она записывается так:
t: solar system
Система Lycos разыскивает заголовки только в режиме расширенного поиска.
Поисковая система Aport 2000 имеет несколько альтернативных команд для поиска заголовков. Основная команда — title = . Примеры:
title = Солнечная система
t = Солнечная система
заг = Солнечная система
з = Солнечная система В поисковой системе Япс1ех команда поиска в заголовке записывается так:
$title (Солнечная система) а в поисковой системе Rambler — похоже, но без скобок, через двоеточие:
$title:Солнечная система
Поиск Web-узлов
Сам по себе поиск Web-узлов используется достаточно редко, но команды этого поиска часто применяют для сокращения числа ссылок, возвращен ных другими методами и ограничения их одним Web-узлом или, наобо рот, исключения некоего Web-узла из результатов поиска.
Одной из команд такого поиска является команда host:.Например, на поисковой системе Alta Vista команда host: microsoft.ru разыщет все Web-страницы, принадлежащие доменному имени mycrosoft.ru.
Эту команду обычно комбинируют с другими. Если, например, нас интересуют планеты солнечной системы, но мы уже сыты по горло трудами Национального управления по исследованию космического пространства
США (NASA), то сервер NASA можно исключить из поиска командой:
+solar + system -host: nasa .:
В команду можно включать не полное доменное имя сервера, а только его часть, например только имя домена. Так, если мы хотим обыскать только российские серверы, то можно использовать имя домена ru, например:
+cookies +host: ru
По этой команде мы узнаем, что пишут о маркерах cookies на российских Web-узлах.
Не все поисковые системы позволяют проводить поиск по Web-узлам, да
и команда поиска у них может быть различной. Вот список систем, кото рые такой поиск выполняют:
Alta Vista host:
Hot Bot domain:
& f InfoSeek site:
MSN Search domain:
GoTo domain:
Snap domain:
Поисковая система Lycos выполняет поиск Web-узлов только в режиме расширенного поиска.
Поиск URL-адресов
Этот поиск очень похож на поиск Web-узлов. Суть и смысл его те же, только Команда другая — uri:. Эту команду поддерживают следующие поисковые службы:
AltaVista Infoseek
Northern Light
Поисковый каталог Yahoo! использует команду u:, а система Lycos реализует поиск URL-адресов с помощью команд расширенного режима. В России поисковая система Яndex использует команду #url=, после которой следует записать URL-адрес в кавычках. Поисковая система Апорт 2000 , обходится более простым синтаксисом, например url=www.intel.ru, а в поисковой системе Rambler команда должна начинаться с символа <$>, например так:
$uri: www.intel.ru
Поиск ссылок
Поиск ссылок бывает полезен владельцам Web-страниц и Web-мастерам. Он позволяет, к примеру, количественно оценить динамику популярности своей страницы регулярным контролем числа ссылок, которые к ней ведут. Типовая команда для такого поиска — link:.
Например, команда link: http://www.mywebsite.com/mypage/index.htm позволит выявить ссылки, которые ведут к титульной странице index, htm на Web-узле mypage, размещенном на Web-сервере www.mywebsite.com.
Команду link: поддерживают следующие поисковые службы:
AltaVista Infoseek Google
Некоторые поисковые службы поддерживают команду linkpage:
GoTo HotBot S MSN Search Snap
Как обычно, российские поисковые системы имеют свои особенности. Например. Апорт 2000 поддерживает четыре разных представления команды:
Link=
L=
Ссылка=
Сс=
Система Яndex поддерживает команду #link:, после которой адрес ссылки должен записываться в кавычках.
Средства расширенного поиска
Выше мы рассмотрели лишь десять методов формулирования задания на поиск, однако их достаточно для проведения 90% поисковых работ в 90% поисковых служб. Все рассмотренные выше методы являются методами простого поиска. Кроме средства простого поиска обычно поисковые службы предоставляют средства расширенного поиска. Эти средства позволяют более точно формулировать поисковое задание, но требуют определенного опыта и работают заметно медленнее. В большинстве поисковых систем команды расширенного поиска формируются с помощью логических команд и рассчитаны на профессионалов. Удобство использования логических команд в частности связано с тем, что команды простого поиска у многих поисковых систем реализованы по-разному. Каждая система стремится сделать средства простого поиска наиболее удобными, а средства расширенного поиска — наиболее стандартными.
Команда OR
Логическая команда OR (ИЛИ) служит для формирования поискового зада ния, состоящего из нескольких ключевых слов, если надо, чтобы разыс киваемый документ содержал любые из этих слов в любой комбинации. Например, по команде solutions OR hints будут разысканы Web-страницы, содержащие решения к компьютерным играм (solutions) или подсказки к ним (hints).
Команду OR поддерживают абсолютное большинство основных поисковых служб, за исключением следующих:
Google Infoseek LookSmart Yahoo!
Службы Infoseek, LookSmart и Yahoo! по умолчанию выполняют поиск по принципу ИЛИ, если через пробел задано несколько ключевых слов, и поэтому нс нуждаются в этой команде. Лишь поисковая система Google вообще не имеет таких средств.
«Апорт 2000» позволяет использовать как английское ключевое слово OR, так н русское ИЛИ. Можно также использовать знак « | ». Система Rambler использует или слово OR, или знак « | », а система Яndeх — только знак « | ».
Команда AND
Логическая команда AND (И) служит для формирования поискового зада ния, когда надо, чтобы разыскиваемый документ содержал одновременно все слова, введенные пользователем. Это аналог команды «+» простого поиска. Например, по команде свет AND луч будут разысканы все Web-стра ницы, содержащие оба эти слова.
Команду AND поддерживают абсолютное большинство основных поиско вых служб, за исключением следующих, которые используют знак «+»:
Google Infoseek LookSmart Yahoo!
Апорт 2000 позволяет использовать как английское ключевое слово AND, так и русское И, а также знаки «&» и «+». Система Rambler использует ключевое слово AND или знак «&», а система Япс1ех — знак «&» или пробел, если требу ется одновременное присутствие слов в одном предложении, или пару знаков «&&», если требуется одновременное присутствие слов во всем документе.
Команда NOT
Логической командой NOT (HE) устанавливают исключения из результатов поиска, то есть это аналог рассмотренной выше команды простого поиска <• - ». Эту команду поддерживает большинство служб, за исключением:
Google Infoseek LookSmart Yahoo!
Системы AltaVista, Excite, Snap требуют специальной формы записи этой команды: вместо NOT в них следует давать команду AND NOT.
Наряду с командой NOT в системе Апорт 2000 разрешается использовать команду «НЕ», а в системе Rambler — команду «!». Интересна особенность системы Яndех. Она реализует логическую команду И НЕ, которая записывается значком «~», если относится к одному предложению и парой значков «~~», если относится ко всему документу.
Команда NEAR
Это одна из самых удобных команд расширенного поиска. Она позволяет совместить достоинства поиска по ключевым словам и контекстного поиска при глубоком поиске самые лучшие результаты возвращаются с помощью этой команды. Пример: поисковая команда Quake NEAR hints позволит разыскать документы, в которых присутствуют слова Quake и hints одновременна причем находятся поблизости друг от друга.
К сожалению, редкие поисковые службы поддерживают поиск с помощью команды NEAR. При этом у разных служб разное представление о том, что значит «близкое» размещение слов друг к другу:
AltaVista (в пределах 10 слов, жестко); Lycos (в пределах 25 слов, гибко); WebCrawler (в пределах 2 слов, гибко);
И Lycos, и WebCrawler позволяют управлять размером интервала, в котором разыскиваются ключевые слова. Для этого команду NEAR задают(параметром /#. Например, команда ночь NEAR/10 река позволит разыскат произведения, в которых есть описание реки ночью, если слова ночь и река отстоят друг от друга не более, чем на десять слов.
В российской поисковой системе Rambler аналогичная команда начинается со знака «$» и заканчивается двоеточием ($NEAR:). В поисковой системе Апорт 2000 расстояние между словами задается командой СЛ# (..., ..., ...), где вместо знака « # » следует подставить цифру или число, обозначающее предельное расстояние, а вместо многоточий — список ключевых слов. В поис ковой системе Яndех расстояние задается в круглых скобках после дробной черты. При этом указать расстояния можно как «вперед», так и «назад» :
средство поиск/ (-2 4)
Такая команда позволит разыскать на только средства расширенного поиска, но и поисковые средства.
Вложение команд
Вложение команд позволяет создавать весьма сложные запросы. Оно выпол няется с помощью круглых скобок ( ). Команда, стоящая в скобках, выпол няется в первую очередь. Рассмотрим пример поиска решений или подсказок к компьютерной игре Diablo:
diablo AND (solution OR hint)
В этом случае сначала будут отобраны документы, в которых приводятся подсказки или решения для компьютерных игр, а потом из них будут выбра ны те, в которых упоминается игра Diablo.
Использование круглых скобок для управления порядком исполнения зада ния на поиск разрешается большинством крупнейших поисковых систем, за редким исключением:
Google Infoseek LookSmart Yahoo!
Выбор поисковой службы
Выбор средства поиска зависит от задачи. Есть задачи, для которых подхо дят крупнейшие поисковые системы, но есть задачи, для которых неболь шой список на пару сотен ссылок будет гораздо полезнее. Правда, его тоже надо еще разыскать, но это уже проще, поскольку если он существует не один год, то наверное хорошо известен поисковым системам.
Как проверить незнакомую поисковую службу
Лет пять назад лучшей считалась та служба, которая владела наибольшим индексом. Пока Web-страниц было немного, в результатах поиска можно было ориентироваться относительно легко. Тогда проверить незнакомую службу было очень просто — надо было набрать достаточно распростра ненное слово, например Pentium, и сравнить, сколько ссылок на него дают разные поисковые системы.
Сегодня величина индекса уже не имеет того значения, как его качество, хотя принцип проверки остается тем же самым. Введите простое и понятное слово и посмотрите, насколько найденные Web-страницы соответствуют вашим ожиданиям. Если, например, при поиске по слову Шахматы поис ковая система в качестве первой (самой важной!) ссылки выдает Web-стра-ннцу, посвященную скульптуре, то этой системе нужно еще какое-то время на адаптацию, прежде чем ею можно будет пользоваться
Реферативный поиск
Предполагается, что вам задана тема, которую надо осветить, но по ней нет никакой информации. Так обычно бывает, когда надо написать реферат, подготовить выступление, статью, отчет, справку и т. п. Часто реферат делают не по заданию, а «для себя», в порядке подготовки к другой, более крупной работе, например к написанию диссертации или книги.
В этом случае начинать исследование темы надо с поискового каталога. Это ничего, что в нем отражен только один миллион страниц — нам и этого много. Двух-трех страниц с содержательной информацией обычно бывает доста точно, чтобы сделать свое дело. К тому же эти страницы тоже имеют полез ные ссылки. Вы можете быть уверены в том, что лучшая часть сетевой информации в таких каталогах, как Yahoo! обязательно присутствует.
Например, ваша собака заболела демодекозом. Вы слышали, что болезнь эта неизлечимая, но интересно проверить, что по этому поводу говорят мировые светила. Вы можете получить сотни ссылок с помощью поискового указателя типа Alta Vista. Среди них, конечно же, будут ссылки на самого лучшего специалиста в мире по данному вопросу, но как их угадать? С помошью Yahoo! вы гораздо быстрее найдете его Web-узел.
Углубленный поиск
Углубленный поиск предполагает, что общее знакомство с вопросом уже ость, но нужны какие-то мелкие детали и тонкие нюансы. Поисковый ката лог здесь может не помочь — слишком поверхностно его знание о ресурсах WWW. В этом случае надо использовать поисковый указатель, а лучше — не один. Однако для того чтобы отфильтровать информацию и сузить результаты поиска, надо применять специальные средства, в частности средства расширенного поиска (см. выше). Методы простого поиска могут дать слишком много побочной информации.
Каждый, кто является специалистом в какой-то области, знает ключевые слова, характерные для нее, а умение грамотно сформулировать задание на поиск достигается методом проб и ошибок. Допустим, вы считаете себя специалистом в области стратегических игр реального времени и с основ ными достижениями в этой области уже знакомы. Допустим, вы хотите найти новую для себя информацию. Вряд ли Yahoo! даст то, чего вы не зна ете — все это вы уже читали. Попробуйте с помощью системы Alta Vista сде лать поиск по ключевым словам:
( realtime NEAR strategy) AND computer AND game
Это пример расширенного поиска. Он вернет ссылки на документы, в кото рых присутствуют все эти слова и, более того, слово realtime находится рядом (NEAR) со словом strategy. В ответ на такой запрос вы получите немало ссы лок. Но вы же специалист! Вы уже знаете основные ресурсы и сумеете в этом длинном списке выделить те ссылки, которые ведут к ранее неизвест ным ресурсам.
Специальный поиск
Специальный поиск труден и в поисковых каталогах, и в поисковых ука зателях. Если, например, вы занимаетесь физикой лазеров, то утонете в ссылках, ведущих к научно-фантастическим романам, в которых упомина ются лазеры. Как специалисту, вам лучше всего пользоваться списками ссылок, составленными другими специалистами или небольшими поис ковыми системами научных учреждений. А чтобы выйти на них, следует начинать с поискового каталога.
Выводы и рекомендации
Обобщая все сказанное выше, можно дать следующие рекомендации:
• для реферативного поиска пользуйтесь поисковыми каталогами;
• для углубленного поиска пользуйтесь поисковыми указателями;
• для специального поиска предварительно разыщите персональные списки ссылок, составленные коллегами;
• для поиска «скомпрометированной информации», например хаккерской, пользуйтесь рейтинговыми системами;
• при выборе службы для контекстного поиска в России лучше остано виться на «Апорт 200» или «Яndех», а за рубежом альтернатив мало — лучше всего использовать поисковую службу Alta Vista.
МАТЕМАТИЧЕСКАЯ МОДЕЛЬ СИНТЕЗА ПРОЕКТНЫХ РЕШЕНИЙ ДЛЯ АВТОМАТИЗИРОВАННОЙ ОБУЧАЮЩЕЙ СИСТЕМЫ В САПР/САИТ ЭВА
...Таким образом, обобщенная многоуровневая сетевая математическая модель синтеза проектных решений для автоматизированной обучающей системы в САПР/САИТ ЭВА, включающая сетевую математическую модель объектов проектирования, позволяет производить комплексную оценку параметров модуля ЭВА,...
10.09.2001 | 8 Kb | koi8-r | http://bytic.ttk.ru/cue99M/bevk049ud.html
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 12):
ИСПОЛЬЗОВАНИЕ КОМПЬЮТЕРНЫХ ТЕХНОЛОГИЙ ПРИ ИЗУЧЕНИИ ФИЗИКИ (РАЗДЕЛ "ЭЛЕКТРОДИНАМИКА")
"ЭЛЕКТРОННЫЙ УЧЕБНИК" - ИНТЕЛЛЕКТУАЛЬНЫЙ САМОУЧИТЕЛЬ, ИСПОЛЬЗУЮЩИЙ ВОЗМОЖНОСТИ СОВРЕМЕННОГО КОМПЬЮТЕРА
МЕТОДИКА ОРГАНИЗАЦИИ И ПРОВЕДЕНИЯ УЧЕБНОЙ ТЕЛЕКОНФЕРЕНЦИИ
Все документы с сайта
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ...
...работы и юридическое оформление этого согласия Ментальная модель инструктируемого 2 Достижение соглашений о словаре Обучение исполнению функций «хозяина» процесса Тестовые результаты исполнения процесса обучаемым. Результаты тестирования обучаемого Ментальная модель обучаемого Модель навыков и умений обучаемого 3 Транспортация смысла сообщения Обучение исполнению функций «хозяина» смежных процессов Обучение на курсах повышения квалификации Тестовые результаты исполнения процесса обучаемым...
14.10.2001 | 49 Kb | koi8-r | http://www.cfin.ru/rubtsov/book/2-5.shtml
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 16):
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ... (1)
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ... (2)
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ... (3)
Все документы с сайта
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ...
...работы и юридическое оформление этого согласия Ментальная модель инструктируемого 2 Достижение соглашений о словаре Обучение исполнению функций «хозяина» процесса Тестовые результаты исполнения процесса обучаемым. Результаты тестирования обучаемого Ментальная модель обучаемого Модель навыков и умений обучаемого 3 Транспортация смысла сообщения Обучение исполнению функций «хозяина» смежных процессов Обучение на курсах повышения квалификации Тестовые результаты исполнения процесса обучаемым...
14.10.2001 | 49 Kb | koi8-r | http://manage.ru/rubtsov/book/2-5.shtml
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 9):
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ...
Основные противоречия современных взглядов на управление бизнесом - Теория и практика финансового анализа, инвестиции, м...
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ...
Все документы с сайта
Коммуникации
...работы и юридическое оформление этого согласия Ментальная модель инструктируемого 2 Достижение соглашений о словаре Обучение исполнению функций «хозяина» процесса Тестовые результаты исполнения процесса обучаемым. Результаты тестирования обучаемого Ментальная модель обучаемого Модель навыков и умений обучаемого 3 Транспортация смысла сообщения Обучение исполнению функций «хозяина» смежных процессов Обучение на курсах повышения квалификации Тестовые результаты исполнения процесса обучаемым...
10.09.2001 | 70 Kb | koi8-r | http://or-rsv.narod.ru/Book/Book_2_5.htm
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 6):
Целевое управление корпорациями - Теория и практика финансового анализа, инвестиции, менеджмент, финансы. Антикризисное ...
РАЗДЕЛ 1
РАЗДЕЛ 3
Все документы с сайта Сайт www.csa.ru
3
Проект ориентирован на разработку методологии и технологии построения многоагентных интеллектуальных адаптивных обучающих систем на основе модели обучаемого. Проект ориентирован на использование технологии гипермедиа в рамках возможностей глобальной сети INTERNET и WWW....
...Входными данными для этих правил - продукций являются модель обучаемого и модель процесса обучения. Модель обучаемого реализована в виде структуры реляционного типа и не зависит от архитектуры системы....
19.01.1999 | 3 Kb | koi8-r | http://www.csa.ru/Inst/gorb_dep/artific/grants/magis.htm
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 8):
ОТДЕЛ № 3
1
1 Все документы с сайта
ОБ ОДНОМ ПОДХОДЕ ПОСТРОЕНИЯ АВТОМАТИЗИРОВАННЫХ
...Модель управления познавательной деятельностью в качестве составных частей содержит модель изучаемого предмета, модель знаний специалиста. Модель обучаемого (она используется для организации адаптивного диалога). Разработав данные модели, мы конкретизировали основные вопросы дидактики....
...Терминальные вершины графа задают знание, умение и навыки.
Модель обучаемого содержит информацию, необходимую для адаптации как к группе пользователей,...
27.03.1997 | 8 Kb | koi8-r | http://src.nsu.ru/conf/nit/97/c7/node12.html
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 67):
http://src.nsu.ru/conf/nit/95/sect1/e01_5.html
"НОВЫЕ ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ В УНИВЕРСИТЕТСКОМ ОБРАЗОВАНИИ"
В.В.Семенов, М.П.Демин, Т.А.Летова, С.Ю.Лунева. ТЕХНОЛОГИЯ И ОБЕСПЕЧЕНИЕ ДИСТАНЦИОННОГО ОБУЧЕНИЯ МАТЕМАТИЧЕСКИМ И ТЕХНИЧ...
Все документы с сайта
Конференция "Телематика'98". Доклад О.В.Савцова, Н.А.Борисова
...подготовленная при помощи рассматриваемого средства визуального проектирования и оформленная как CGI - сценарий. "Модуль обучения" обладает вышеуказанной функцией определения категории пользователя на основе создания модели обучаемого.
Модель обучаемого представляет собой объединение психофизиологических характеристик обучаемого, таких как скорость восприятия информации, предпочтительная форма ее подачи, оценки объема памяти обучаемого и т. п. (для получения этих ...
21.08.1998 | 5 Kb | koi8-r | http://risbank.spb.ru/risbank2/tm98/164.HTM
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 10):
Конференция "Телематика'98". Доклад Г.H.Бояpкина, В.И.Лузянина, С.П.Шамец
Конференция "Телематика'98". Доклад И.А.Лещевой
Конференция "Телематика'98". Доклад Е.А.Олкконен
Все документы с сайта
Обучающая деятельность как решение дидактических задач
...Множество задач, которые приходится решать педагогу в процессе обучения, можно разбить на следующие разделы: 1) Построение модели обучающегося. Исходными для этой задачи являются учебные цели и последовательность основных обучающих воздействий, а также уровень обученности учащегося....
...Исходными условиями для этой задачи являются модель обучаемого и модель учебной деятельности, на основе которых строятся план обучения обучения и соответствующий эталон. При компьютерном обучении решающее зна...
01.04.2001 | 10 Kb | koi8-r | http://ito.bitpro.ru/2000/II/3/374.html
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 59):
Корректное и качественное планирование и управление сложными процессами обмена знаниями между обучаемыми и обучающими во...
Интегративные основы формирования экономической культуры у учителей экономики средствами информационных технологий
Организационному-комитету выставки-конференции "ИТО-95"
Все документы с сайта
Страницы: 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | далее>>
Модельное агентство - студия "Модель - ШОУ" (Москва)
Студия "Модель - ШОУ" уже более 8 лет занимается профессиональным обучением детей, подростков, юношей и девушек по направлениям: хореография, дефиле, мастерство актёра, видео - и фототренинг, эстрадный вокал и др. На сайте огромное количество фотографии моделей - девушек и юношей (портфолио), система поиска моделей по заданным параметрам (рост, вес, объемы и др.), рейтинги моделей.
04.01.2002 | 698 Bytes | koi8-r | http://modelshow.chat.ru/
Найти похожие
На том же сайте (всего найдено документов: 3):
Студия МОДЕЛЬ-ШОУ (приглашаем)
Студия МОДЕЛЬ-ШОУ (FAQ)
Все документы с сайта
Методы быстрого обучения. Моделирование обучения. Модель.
Моделирование успешного обучения Для начала, это пока не конкретные методы и стратегии, а только начавшие оформляться размышления на эту тему. Так что не пинайте больно. Есть иллюстрация действия стратегии, но сама стратегия лишь обрисована в общих чертах. NLPstudent 15.06.2000 Все, что мы делаем, мы делаем уже устоявшимися способами - стратегиями. При необходимости выдумываются новые. Всего различных стратегий не так много, но мы можем работать с объектами, используя комбинации не просто известных страт...
04.07.2001 | 6 Kb | koi8-r | http://nlpstudent.narod.ru/model/modob.html
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 6):
Методы быстрого обучения. Калибровка. Модель BAGEL.
Методы быстрого обучения. Моделирование обучения. Показ стратегии.
Методы быстрого обучения.
Все документы с сайта
"Погружение" как модель обучения
...1.2.1. LПогружение¦ как модель интенсивного обучения с применением суггестивного воздействия Подробное описание Lпогружения¦ мы находим у Р....
17.09.1998 | 17 Kb | koi8-r | http://eidos.techno.ru/books/ostapenko/1-2.htm
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 48):
Модели обучения
ОГЛАВЛЕНИЕ
Дистанционная августовская конференция 2000
Все документы с сайта | Зеркала сайта (всего зеркал: 1)
Линн Андреа Стайн считает: пора менять модель обучения программированию
...по e - mail Новости IT Свежий номер Полная настройка подписки» ПОДПИСКА Year Подписка на все издания Banners System Banners System Линн Андреа Стайн считает: пора менять модель обучения программированию 19.01.1998 Компьютер в школе,...
28.10.2001 | 20 Kb | koi8-r | http://javaworld.osp.ru/school/1998/1/03.htm
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 147):
Компьютер в школе
Java - учитель
"Здорово - это трудно - это называется Лого!"
Все документы с сайта
Концептуальная модель обучения профессиональному английскому языку
...Применение системы "Multi - Media" дает возможность индивидуализировать процесс обучения и, в итоге, улучшить знания. Таким образом, концептуальная модель построения процесса обучения профессиональному английскому языку, проходящая апробацию в СЗФМУ,...
23.08.2000 | 5 Kb | koi8-r | http://www.interun.spb.ru/conf/06.htm
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 5):
http://www.interun.spb.ru/conf/00.htm
http://www.interun.spb.ru/conf/right.htm
Управление адаптационными возможностями университетских образовательных программ
Все документы с сайта
МОДЕЛЬ ДИСТАНЦИОННОГО ОБУЧЕНИЯ, ВСТРОЕННОГО В ТЕКУЩИЙ УЧЕБНЫЙ ПРОЦЕСС
МОДЕЛЬ ДИСТАНЦИОННОГО ОБУЧЕНИЯ, ВСТРОЕННОГО В ТЕКУЩИЙ УЧЕБНЫЙ ПРОЦЕСС
Первин Юрий Абрамович
Негосударственное учебное учреждение дополнительного образования
"Роботландия +", Переславль - Залесский Дистанционное обучение (ДО) ныне не только становится в один ряд с традиционными формами образования, но и вытесняет такие технологически устаревающие формы образования, как заочное и вечернее обучение, вливает новую струю в экстернат как форму самостоятельного образования, кардинально дополняет основну...
01.04.2001 | 7 Kb | koi8-r | http://ito.bitpro.ru/1999/III/2/258.html
Восстановить текст | Найти похожие
На том же сайте (всего найдено документов: 143):
Опыт применения тренинговой модели обучения при подготовке банковских служащих
МОДЕЛИ ПРОЦЕССА ОБУЧЕНИЯ И РАЗРАБОТКА ПРОГРАММНЫХ ПЕДАГОГИЧЕСКИХ СРЕДСТВ
?
Все документы с сайта
Страницы: 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | далее>>
Цель поиска: нейромодель обучаемого По данному запросу ничего не найдено.
Цель поиска: нейромодель обучения
Результаты поиска на Яndex:
29