Новые поисковые системы: Все поисковые системы интернета в одном списке – Yahoo ist jetzt Teil von Verizon Media

Поисковая система — Википедия

Поиск информации во Всемирной паутине был трудной и не самой приятной задачей, но с прорывом в технологии поисковых систем в конце 1990-х годов осуществлять поиск стало намного удобней

Поиско́вая систе́ма (англ. search engine) — это компьютерная система, предназначенная для поиска информации^{[источник не указан 429 дней]}. Одно из наиболее известных применений поисковых систем — веб-сервисы для поиска текстовой или графической информации во Всемирной паутине. Существуют также системы, способные искать файлы на FTP-серверах, товары в интернет-магазинах, информацию в группах новостей Usenet.

Для поиска информации с помощью поисковой системы пользователь формулирует поисковый запрос^[1]. Работа поисковой системы заключается в том, чтобы по запросу пользователя найти документы, содержащие либо указанные ключевые слова, либо слова, как-либо связанные с ключевыми словами^[2]. При этом поисковая система генерирует страницу результатов поиска. Такая поисковая выдача может содержать различные типы результатов, например: веб-страницы, изображения, аудиофайлы. Некоторые поисковые системы также извлекают информацию из подходящих баз данных и каталогов ресурсов в Интернете.

Поисковая система тем лучше, чем больше документов, релевантных запросу пользователя, она будет возвращать. Результаты поиска могут становиться менее релевантными из-за особенностей алгоритмов (см. «Пузырь фильтров»^[⇨]) или вследствие человеческого фактора^[⇨]. По состоянию на 2015 год самой популярной поисковой системой в мире является Google, однако есть страны, где пользователи отдали предпочтение другим поисковикам. Так, например, в России «Яндекс» обгоняет Google больше, чем на 10 %

[⇨].

По методам поиска и обслуживания разделяют четыре типа поисковых систем: системы, использующие поисковых роботов, системы, управляемые человеком, гибридные системы и мета-системы^[⇨]. В архитектуру поисковой системы обычно входят:

• поисковый робот, собирающий информацию с сайтов сети Интернет или из других документов,
• индексатор, обеспечивающий быстрый поиск по накопленной информации, и
• поисковик — графический интерфейс для работы пользователя^[⇨].

На раннем этапе развития сети Интернет Тим Бернерс-Ли поддерживал список веб-серверов, размещённый на сайте ЦЕРН^[3]. Сайтов становилось всё больше, и поддерживать вручную такой список становилось всё сложнее. На сайте NCSA был специальный раздел «Что нового!» (англ. What’s New!)

[4], где публиковали ссылки на новые сайты.

Первой компьютерной программой для поиска в Интернете была программа Арчи^[en] (англ. archie — архив без буквы «в»). Она была создана в 1990 году Аланом Эмтэджем (Alan Emtage), Биллом Хиланом (Bill Heelan) и Дж. Питером Дойчем (J. Peter Deutsch), студентами, изучающими информатику в университете Макгилла в Монреале. Программа скачивала списки всех файлов со всех доступных анонимных FTP-серверов и строила базу данных, в которой можно было выполнять поиск по именам файлов. Однако, программа Арчи не индексировала содержимое этих файлов, так как объём данных был настолько мал, что всё можно было легко найти вручную.

Развитие и распространение сетевого протокола Gopher, придуманного в 1991 году Марком Маккэхилом (Mark McCahill) в университете Миннесоты, привело к созданию двух новых поисковых программ, Veronica^[en] и Jughead^[en]. Как и Арчи, они искали имена файлов и заголовки, сохранённые в индексных системах Gopher. Veronica (англ. Very Easy Rodent-Oriented Net-wide Index to Computerized Archives) позволяла выполнять поиск по ключевым словам большинства заголовков меню Gopher во всех списках Gopher. Программа Jughead (англ. Jonzy’s Universal Gopher Hierarchy Excavation And Display) извлекала информацию о меню от определённых Gopher-серверов. Хотя название поисковика Арчи не имело отношения к циклу комиксов «Арчи»

[en], тем не менее Veronica и Jughead — персонажи этих комиксов.

К лету 1993 года ещё не было ни одной системы для поиска в вебе, хотя вручную поддерживались многочисленные специализированные каталоги. Оскар Нирштрасс (Oscar Nierstrasz) в Женевском университете написал ряд сценариев на Perl, которые периодически копировали эти страницы и переписывали их в стандартный формат. Это стало основой для W3Catalog, первой примитивной поисковой системы сети, запущенной 2 сентября 1993 года^[5].

Вероятно, первым поисковым роботом, написанным на языке Perl, был «World Wide Web Wanderer» — бот Мэтью Грэя (Matthew Gray) из Массачусетского технологического института в июне 1993 года. Этот робот создавал поисковый индекс «Wandex». Цель робота Wanderer состояла в том, чтобы измерить размер всемирной паутины и найти все веб-страницы, содержащие слова из запроса. В 1993 году появилась и вторая поисковая система «Aliweb». Aliweb не использовала поискового робота, но вместо этого ожидала уведомлений от администраторов веб-сайтов о наличии на их сайтах индексного файла в определённом формате.

JumpStation^[en], ^[6] созданный в декабре 1993 года Джонатаном Флетчером, искал веб-страницы и строил их индексы с помощью поискового робота, и использовал веб-форму в качестве интерфейса для формулирования поисковых запросов. Это был первый инструмент поиска в Интернете, который сочетал три важнейших функции поисковой системы (проверка, индексация и собственно поиск). Из-за ограниченности ресурсов компьютеров того времени индексация и, следовательно, поиск были ограничены только названиями и заголовками веб-страниц, найденных поисковым роботом.

Первой полнотекстовой индексирующей ресурсы при помощи робота («craweler-based») поисковой системой, стала система «WebCrawler»^[en], запущенная в 1994 году. В отличие от своих предшественниц, она позволяла пользователям искать по любым словам, расположенным на любой веб-странице — с тех пор это стало стандартом для большинства поисковых систем. Кроме того, это был первый поисковик, получивший широкое распространение. В 1994 году была запущена система «Lycos», разработанная в Университете Карнеги-Меллон и ставшая серьёзным коммерческим предприятием.

Вскоре появилось множество других конкурирующих поисковых машин, таких как: «Magellan»^[en], «Excite», «Infoseek»^[en], «Inktomi»^[en], «Northern Light»^[en] и «AltaVista». В некотором смысле они конкурировали с популярными интернет-каталогами, такими как «Yahoo!». Но поисковые возможности каталогов ограничивались поиском по самим каталогам, а не по текстам веб-страниц. Позже каталоги объединялись или снабжались поисковыми роботами с целью улучшения поиска.

В 1996 году компания Netscape хотела заключить эксклюзивную сделку с одной из поисковых систем, сделав её поисковой системой по умолчанию на веб-браузере Netscape. Это вызвало настолько большой интерес, что Netscape заключила контракт сразу с пятью крупнейшими поисковыми системами (Yahoo!, Magellan, Lycos, Infoseek и Excite). За 5 млн долларов США в год они предлагались по очереди на поисковой странице Netscape^[7][8].

Поисковые системы участвовали в «Пузыре доткомов» конца 1990-х^[9]. Несколько компаний эффектно вышли на рынок, получив рекордную прибыль во время их первичного публичного предложения. Некоторые отказались от рынка общедоступных поисковых движков и стали работать только с корпоративным сектором, например, Northern Light

[en].

Google взял на вооружение идею продажи ключевых слов в 1998 году, тогда это была маленькая компания, обеспечивавшая работу поисковой системы по адресу goto.com^[en]. Этот шаг ознаменовал для поисковых систем переход от соревнований друг с другом к одному из самых выгодных коммерческих предприятий в Интернете^[10]. Поисковые системы стали продавать первые места в результатах поиска отдельным компаниям.

Поисковая система Google занимает видное положение с начала 2000-х^[11]. Компания добилась высокого положения благодаря хорошим результатам поиска с помощью алгоритма PageRank. Алгоритм был представлен общественности в статье «The Anatomy of Search Engine», написанной Сергеем Брином и Ларри Пейджем, основателями Google

[12]. Этот итеративный алгоритм ранжирует веб-страницы, основываясь на оценке количества гиперссылок на веб-страницу в предположении, что на «хорошие» и «важные» страницы ссылаются больше, чем на другие. Интерфейс Google выдержан в спартанском стиле, где нет ничего лишнего, в отличие от многих своих конкурентов, которые встраивали поисковую систему в веб-портал. Поисковая система Google стала настолько популярной, что появились подражающие ей системы, например, Mystery Seeker^[en](тайный поисковик).

К 2000 году Yahoo! осуществлял поиск на основе системы Inktomi. Yahoo! в 2002 году купил Inktomi, а в 2003 году купил Overture, которому принадлежали AlltheWeb

[en] и AltaVista. Затем Yahoo! работал на основе поисковой системы Google вплоть до 2004 года, пока не запустил, наконец, свой собственный поисковик на основе всех купленных ранее технологий.

Фирма Microsoft впервые запустила поисковую систему Microsoft Network Search (MSN Search) осенью 1998 года, используя результаты поиска от Inktomi. Совсем скоро в начале 1999 года сайт начал отображать выдачу Looksmart^[en], смешанную с результатами Inktomi. Недолго (в 1999 году) MSN search использовал результаты поиска от AltaVista. В 2004 году фирма Microsoft начала переход к собственной поисковой технологии с использованием собственного поискового робота — msnbot

[en]. После проведения ребрендинга компанией Microsoft 1 июня 2009 года была запущена поисковая система Bing. 29 июля 2009 Yahoo! и Microsoft подписали соглашение, согласно которому Yahoo! Search^[en] работал на основе технологии Microsoft Bing. На момент 2015 года союз Bing и Yahoo! дал первые настоящие плоды. Теперь Bing занимает 20,1 % рынка, а Yahoo! 12,7 %, что в общем занимает 32,60 % от общего рынка поисковых систем в США по данным из разных источников.

Поиск информации на русском языке[править | править код]

В 1996 году был реализован поиск с учётом русской морфологии на поисковой машине Altavista и запущены оригинальные российские поисковые машины Рамблер и Апорт. 23 сентября 1997 года была открыта поисковая машина Яндекс. 22 мая 2014 года компанией Ростелеком была открыта национальная поисковая машина Спутник, которая на момент 2015 года находится в стадии бета-тестировании. 22 апреля 2015 года был открыт новый сервис Спутник. Дети специально для детей с повышенной безопасностью.

Большую популярность получили методы кластерного анализа и поиска по метаданным. Из международных машин такого плана наибольшую известность получила «Clusty»^[en] компании Vivisimo^[en]. В 2005 году в России при поддержке МГУ запущен поисковик «Нигма», поддерживающий автоматическую кластеризацию. В 2006 году открылась российская метамашина Quintura, предлагающая визуальную кластеризацию в виде облака тегов. «Нигма» тоже экспериментировала^[13] с визуальной кластеризацией.

Высокоуровневая архитектура стандартного краулера

Основные составляющие поисковой системы: поисковый робот, индексатор, поисковик^[14].

Как правило, системы работают поэтапно. Сначала поисковый робот получает контент, затем индексатор генерирует доступный для поиска индекс, и наконец, поисковик обеспечивает функциональность для поиска индексируемых данных. Чтобы обновить поисковую систему, этот цикл индексации выполняется повторно^[14].

Поисковые системы работают, храня информацию о многих веб-страницах, которые они получают из HTML-страниц. Поисковый робот или «краулер» (англ. Crawler) — программа, которая автоматически проходит по всем ссылкам, найденным на странице, и выделяет их. Краулер, основываясь на ссылках или исходя из заранее заданного списка адресов, осуществляет поиск новых документов, ещё не известных поисковой системе. Владелец сайта может исключить определённые страницы при помощи robots.txt, используя который можно запретить индексацию файлов, страниц или каталогов сайта.

Поисковая система анализирует содержание каждой страницы для дальнейшего индексирования. Слова могут быть извлечены из заголовков, текста страницы или специальных полей — метатегов. Индексатор — это модуль, который анализирует страницу, предварительно разбив её на части, применяя собственные лексические и морфологические алгоритмы. Все элементы веб-страницы вычленяются и анализируются отдельно. Данные о веб-страницах хранятся в индексной базе данных для использования в последующих запросах. Индекс позволяет быстро находить информацию по запросу пользователя^[15].

Ряд поисковых систем, подобных Google, хранят исходную страницу целиком или её часть, так называемый кэш, а также различную информацию о веб-странице. Другие системы, подобные системе AltaVista, хранят каждое слово каждой найденной страницы. Использование кэша помогает ускорить извлечение информации с уже посещённых страниц^[15]. Кэшированные страницы всегда содержат тот текст, который пользователь задал в поисковом запросе. Это может быть полезно в том случае, когда веб-страница обновилась, то есть уже не содержит текст запроса пользователя, а страница в кэше ещё старая^[15]. Эта ситуация связана с потерей ссылок (англ. linkrot^[en]) и дружественным по отношению к пользователю (юзабилити) подходом Google. Это предполагает выдачу из кэша коротких фрагментов текста, содержащих текст запроса. Действует принцип наименьшего удивления, пользователь обычно ожидает увидеть искомые слова в текстах полученных страниц (User expectations^[en]). Кроме того, что использование кэшированных страниц ускоряет поиск, страницы в кэше могут содержать такую информацию, которая уже нигде более не доступна.

Поисковик работает с выходными файлами, полученными от индексатора. Поисковик принимает пользовательские запросы, обрабатывает их при помощи индекса и возвращает результаты поиска^[14].

Когда пользователь вводит запрос в поисковую систему (обычно при помощи ключевых слов), система проверяет свой индекс и выдаёт список наиболее подходящих веб-страниц (отсортированный по какому-либо критерию), обычно с краткой аннотацией, содержащей заголовок документа и иногда части текста^[15]. Поисковый индекс строится по специальной методике на основе информации, извлечённой из веб-страниц^[11]. С 2007 года поисковик Google позволяет искать с учётом времени создания искомых документов (вызов меню «Инструменты поиска» и указание временного диапазона).

Большинство поисковых систем поддерживает использование в запросах булевых операторов И, ИЛИ, НЕ, что позволяет уточнить или расширить список искомых ключевых слов. При этом система будет искать слова или фразы точно так, как было введено. В некоторых поисковых системах есть возможность приближённого поиска^[en], в этом случае пользователи расширяют область поиска, указывая расстояние до ключевых слов^[15]. Есть также концептуальный поиск^[en], при котором используется статистический анализ употребления искомых слов и фраз в текстах веб-страниц. Эти системы позволяют составлять запросы на естественном языке. Примером такой поисковой системы является сайт ask com.

Полезность поисковой системы зависит от релевантности найденных ею страниц. Хоть миллионы веб-страниц и могут включать некое слово или фразу, но одни из них могут быть более релевантны, популярны или авторитетны, чем другие. Большинство поисковых систем использует методы ранжирования, чтобы вывести в начало списка «лучшие» результаты. Поисковые системы решают, какие страницы более релевантны, и в каком порядке должны быть показаны результаты, по-разному^[15]. Методы поиска, как и сам Интернет со временем меняются. Так появились два основных типа поисковых систем: системы предопределённых и иерархически упорядоченных ключевых слов и системы, в которых генерируется инвертированный индекс на основе анализа текста.

Большинство поисковых систем являются коммерческими предприятиями, которые получают прибыль за счёт рекламы, в некоторых поисковиках можно купить за отдельную плату первые места в выдаче для заданных ключевых слов. Те поисковые системы, которые не берут денег за порядок выдачи результатов, зарабатывают на контекстной рекламе, при этом рекламные сообщения соответствуют запросу пользователя. Такая реклама выводится на странице со списком результатов поиска, и поисковики зарабатывают при каждом клике пользователя на рекламные сообщения.

Существует четыре типа поисковых систем: с поисковыми роботами, управляемые человеком, гибридные и мета-системы^[16].

• системы, использующие поисковые роботы

Состоят из трёх частей: краулер («бот», «робот» или «паук»), индекс и программное обеспечение поисковой системы. Краулер нужен для обхода сети и создания списков веб-страниц. Индекс — большой архив копий веб-страниц. Цель программного обеспечения — оценивать результаты поиска. Благодаря тому, что поисковый робот в этом механизме постоянно исследует сеть, информация в большей степени актуальна. Большинство современных поисковых систем являются системами данного типа.

Эти поисковые системы получают списки веб-страниц. Каталог содержит адрес, заголовок и краткое описание сайта. Каталог ресурсов ищет результаты только из описаний страницы, представленных ему веб-мастерами. Достоинство каталогов в том, что все ресурсы проверяются вручную, следовательно, и качество контента будет лучше по сравнению с результатами, полученными системой первого типа автоматически. Но есть и недостаток — обновление данных каталогов выполняется вручную и может существенно отставать от реального положения дел. Ранжирование страниц не может мгновенно меняться. В качестве примеров таких систем можно привести каталог Yahoo^[en], dmoz и Galaxy.

• гибридные системы

Такие поисковые системы, как Yahoo, Google, MSN, сочетают в себе функции систем, использующие поисковых роботов, и систем, управляемых человеком.

Метапоисковые системы объединяют и ранжируют результаты сразу нескольких поисковиков. Эти поисковые системы были полезны, когда у каждой поисковой системы был уникальный индекс, и поисковые системы были менее «умными». Поскольку сейчас поиск намного улучшился, потребность в них уменьшилась. Примеры: MetaCrawler^[en] и MSN Search.

Google — самая популярная поисковая система в мире с долей на рынке 69,24 %. Bing занимает вторую позицию, его доля 12,26 %^[17].

Самые популярные поисковые системы в мире^[18]:

Поисковая система	Доля рынка в июле 2014	Доля рынка в октябре 2014	Доля рынка в сентябре 2017
Google	68,69 %	58,01 %	69,24 %
Bing	17,17 %	29,06 %	12,26 %
Baidu	6,22 %	8,01 %	6,48 %
Yahoo!	6,74 %	4,01 %	5,19 %
AOL	0,13 %	0,21 %	1,11 %
Excite	0,22 %	0,00 %	0,00 %
Ask	0,13 %	0,10 %	0,24 %

Азия[править | править код]

В восточноазиатских странах и в России Google — не самая популярная поисковая система. В Китае, например, более популярна поисковая система Soso.

В Южной Корее поисковым порталом собственной разработки Naver пользуется около 70 % жителей^[19]Yahoo! Japan и Yahoo! Taiwan — самые популярные системы для поиска в Японии и Тайване соответственно^[20].

Россия и русскоязычные поисковые системы[править | править код]

Яндексом пользуются 53,3 % пользователей в России (Google — 42,9 %)^[21].

Согласно данным LiveInternet в декабре 2017 года об охвате русскоязычных поисковых запросов^[22]:

• Всеязычные:
• Англоязычные и международные:
• Русскоязычные — большинство «русскоязычных» поисковых систем индексируют и ищут тексты на многих языках — украинском, белорусском, английском, татарском и других. Отличаются же они от «всеязычных» систем, индексирующих все документы подряд, тем, что, в основном, индексируют ресурсы, расположенные в доменных зонах, где доминирует русский язык, или другими способами ограничивают своих роботов русскоязычными сайтами.

Некоторые из поисковых систем используют внешние алгоритмы поиска.

Количественные данные поисковой системы Google[править | править код]

Число пользователей Интернета и поисковых систем и требований пользователей к этим системам постоянно растёт. Для увеличений скорости поиска нужной информации крупные поисковые системы содержат большое количество серверов. Сервера обычно группируют в серверные центры (дата-центры). У популярных поисковых систем серверные центры разбросаны по всему миру^[23].

В октябре 2012 года Google запустила проект «Где живёт Интернет», где пользователям предоставляется возможность познакомиться с центрами обработки данных этой компании^[24].

О работе дата-центров поисковой системе Google известно следующее^[23]:

• Суммарная мощность всех дата-центров Google, по состоянию на 2011 год, оценивалась в 220 МВт.
• Когда в 2008 году Google планировала открыть в Орегоне новый комплекс, состоящий из трёх зданий общей площадью 6,5 млн м², в журнале Harper’s Magazine подсчитали, что такой большой комплекс потребляет свыше 100 МВт электроэнергии, что сравнимо с потреблением энергии города с населением 300 000 человек.
• Ориентировочное число серверов Google в 2012 году — 1 000 000.
• Расходы Google на дата-центры составили в 2006 году — $1,9 млрд, а в 2007 году — $2,4 млрд.

Размер всемирной паутины, проиндексированной Google на декабрь 2014 года, составляет примерно 4,36 миллиарда страниц^[25].

Поисковые системы, учитывающие религиозные запреты[править | править код]

Глобальное распространение Интернета и увеличение популярности электронных устройств в арабском и мусульманском мире, в частности, в странах Ближнего Востока и Индийского субконтинента, способствовало развитию локальных поисковых систем, учитывающих исламские традиции. Такие поисковые системы содержат специальные фильтры, которые помогают пользователям не попадать на запрещённые сайты, например, сайты с порнографией, и позволяют им пользоваться только теми сайтами, содержимое которых не противоречит исламской вере.

Незадолго до мусульманского месяца Рамадан, в июле 2013 года, миру был представлен Halalgoogling^[en] — система, выдающая пользователям только халяльные «правильные» ссылки^[26], фильтруя результаты поиска, полученные от других поисковых систем, таких как Google и Bing. Двумя годами ранее, в сентябре 2011 года, был запущен поисковый движок I’mHalal, предназначенный для обслуживания пользователей Ближнего Востока. Однако этот поисковый сервис пришлось вскоре закрыть, по сообщению владельца, из-за отсутствия финансирования^[27].

Отсутствие инвестиций и медленный темп распространения технологий в мусульманском мире препятствовали прогрессу и мешали успеху серьёзного исламского поисковика. Очевиден провал огромных инвестиций в веб-проекты мусульманского образа жизни, одним из которых был Muxlim^[en]. Он получил миллионы долларов от инвесторов, таких как Rite Internet Ventures, и теперь — в соответствии с последним сообщением от I’mHalal перед его закрытием — выступает с сомнительной идеей о том, что «следующий Facebook или Google могут появиться только в странах Ближнего Востока, если вы поддержите нашу блестящую молодёжь»^[28].

Тем не менее исламские эксперты в области Интернета в течение многих лет занимаются определением того, что соответствует или не соответствует шариату, и классифицируют веб-сайты как «халяль» или «харам». Все бывшие и настоящие исламские поисковые системы представляют собой просто специальным образом проиндексированный набор данных либо это главные поисковые системы, такие как Google, Yahoo и Bing, с определённой системой фильтрации, использующейся для того, чтобы пользователи не могли получить доступ к харам-сайтам, таким как сайты о наготе, ЛГБТ, азартных играх и каким-либо другим, тематика которых считается антиисламской^[28].

Среди других религиозно-ориентированных поисковых систем распространёнными являются Jewogle — еврейская версия Google и SeekFind.org — христианский сайт, включающий в себя фильтры, оберегающие пользователей от контента, который может подорвать или ослабить их веру^[29].

Персональные результаты и пузыри фильтров[править | править код]

Многие поисковые системы, такие как Google и Bing, используют алгоритмы выборочного угадывания того, какую информацию пользователь хотел бы увидеть, основываясь на его прошлых действиях в системе. В результате, веб-сайты показывают только ту информацию, которая согласуется с прошлыми интересами пользователя. Этот эффект получил название «пузырь фильтров»^[30].

Всё это ведёт к тому, что пользователи получают намного меньше противоречащей своей точке зрения информации и становятся интеллектуально изолированными в своём собственном «информационном пузыре». Таким образом, «эффект пузыря» может иметь негативные последствия для формирования гражданского мнения^[31].

Несмотря на то, что поисковые системы запрограммированы, чтобы оценивать веб-сайты на основе некоторой комбинации их популярности и релевантности, в реальности экспериментальные исследования указывают на то, что различные политические, экономические и социальные факторы оказывают влияние на поисковую выдачу^[32][33].

Такая предвзятость может быть прямым результатом экономических и коммерческих процессов: компании, которые рекламируются в поисковой системе, могут стать более популярными в результатах обычного поиска в ней. Удаление результатов поиска, не соответствующих местным законам, является примером влияния политических процессов. Например, Google не будет отображать некоторые неонацистские веб-сайты во Франции и Германии, где отрицание Холокоста незаконно^[34].

Предвзятость может также быть следствием социальных процессов, поскольку алгоритмы поисковых систем часто разрабатываются, чтобы исключить неформатные точки зрения в пользу более «популярных» результатов^[35]. Алгоритмы индексации главных поисковых систем отдают приоритет американским сайтам^[33].

Поисковая бомба — один из примеров попытки управления результатами поиска по политическим, социальным или коммерческим причинам.

1. ↑ Chu & Rosenthal, 1996, p. 129.
2. ↑ Tarakeswar & Kavitha, 2011, p. 29.
3. ↑ World-Wide Web Servers.
4. ↑ What’s New.
5. ↑ Oscar Nierstrasz.
6. ↑ Archive of NCSA.
7. ↑ Yahoo! And Netscape.
8. ↑ Netscape, 1996.
9. ↑ The dynamics of competition, 2001.
10. ↑ Intro to Computer Science.
11. ↑ ^{1 2} Google`s history.
12. ↑ Брин и Пейдж, p. 3.
13. ↑ Nigma.
14. ↑ ^{1 2 3} Risvik & Michelsen, 2002, p. 290.
15. ↑ ^{1 2 3 4 5 6} Knowledge Management, 2011.
16. ↑ Tarakeswar & Kavitha, 2011, p. 29.
17. ↑ NMS.
18. ↑ Статистика.
19. ↑ Naver.
20. ↑ Age of Internet Empires.
21. ↑ LiveInternet.
22. ↑ Liveinternet
23. ↑ ^{1 2} Antula.
24. ↑ Where the Internet lives.
25. ↑ World wide web size.
26. ↑ Islam.
27. ↑ I’mHalal
28. ↑ ^{1 2} Halalblog
29. ↑ ChristianNews.
30. ↑ Pariser, 2011.
31. ↑ Auralist, 2012, p. 13.
32. ↑ Segev, 2010.
33. ↑ ^{1 2} Search engine coverage bias, 2004.
34. ↑ Replacement of Google.
35. ↑ Shaping the Web, 2000.

• Gandal, Neil. The dynamics of competition in the internet search engine market. — 2001. — Vol. 19. — P. 1103–1117. — doi:10.1016/S0167-7187(01)00065-0.

• Tarakeswar M. K., Kavitha M. D. Search Engines:A Study (англ.) // Journal of Computer Applications (JCA) : journal. — 2011. — Vol. 4, no. 1. — P. 29—33. — ISSN 0974-1925.
• Vaughan L., Thelwall M. Search engine coverage bias: evidence and possible causes (англ.) // Information Processing & Management : journal. — 2004. — Vol. 40. — P. 693–707. — doi:10.1016/S0306-4573(03)00063-3.

Ссылки[

Лучшие поисковые системы Интернета

Лучшие поисковые системы Интернета. Поисковая система интернета – это специальные программы для поиска, установленные на целый комплекс специализированных машин. А по-простому – это тот же сайт с комплексом программ, только на специальной поисковой машине (сервере). Именно при помощи поисковых систем вы находите всю нужную вам информацию. Поисковых систем очень много.

Лучшие поисковые системы Интернета

1.      Что такое поисковая система Интернета

2.      Популярные поисковые системы нашей страны

3.      Популярные поисковые системы Зарубежья

4.      Необычные поисковые системы

5.      Как правильно искать информацию в Интернете

Самые лучшие поисковые системы в нашей стране:

http://www.yandex.ru

http://www.google.com

http://www.aport.ru

http://www.rambler.ru/

http://go.mail.ru

http://www.webalta.ru/

Самый всеми нелюбимый и навязчивый поисковик.

Популярные поисковики зарубежья

http://www.altavista.com

http://www.alltheweb.com

http://www. bing.com

http://www.google.com
http://www.excite.com
http://www.lycos.com
http://www.mamma.com

http://www.yahoo.com

http://www.dmoz.com
http://www.hotbot.com
http://www.dogpile.com
http://www.netscape.com
http://www.msn.com
http://www.webcrawler.com
http://www.jayde.com
http://www.aol.com
http://www.euroseek.com
http://www.teoma.com
http://www.about.com
http://www.ixquick.com
http://www.lookle.com
http://www.metaeureka.com
http://www.searchspot.com
http://www.slider.com
http://www.allthesites.com
http://www.clickey.com
http://www.galaxy.com
http://brainysearch.com
http://www.orura.com

У каждой страны существую свои популярные поисковые системы.

Необычные поисковые системы

• DuckDuckGo ( https://duckduckgo.com/)— гибридная поисковая система с политикой конфиденциальности пользователя и его поисковых запросов.

• TinEye (http://tineye.com/)— поисковая система, специализирующаяся на поиске изображений в Интернете. С недавнего времени теряет свою актуальность, после того, как Google ввел такую же функцию в своем поиске по картинкам.

• Генон (http://www.genon.ru/) — поисковая система, собирающая и создающая контент у себя на сайте.

Почти в каждой поисковой системе помимо окна поиска расположены ссылки на самые популярные новостные сайты, и сайты определенной тематики.

Вы подводите курсор к ссылке и по щелчку на ней мышкой вас перебрасывают на сайт.

Как правильно искать информацию в Интернете

В каждой поисковой системе есть свои алгоритмы (правила) поиска информации.

Для того, чтобы найти какую-то информацию в Интернете через поисковую систему, необходимо в поле поиска ввести запрос. Если вы введете какое-то одно слово, то вам по этому запросу выдадут тысячи ссылок на сайты, в которых это слово упоминается.

Поэтому необходимо вводить как можно более конкретный запрос, состоящий из двух, трех и более словосочетаний.

Давайте рассмотрим пример запроса в поисковой системе Яндекс.

Допустим, вы хотите найти информацию по вопросу о покупке компьютера. Если вы напишите в окне поиска одно слово «Компьютер», то вам выдадут 133 млн ответов

Надо задать более конкретный запрос. Лучше указать какой именно компьютер вы хотите купить и где (в каком городе).

Тогда уже поисковая система выдаст вам намного меньше ответов на ваш запрос.

Поисковой системе совершенно без разницы, какими буквами вы введете запрос – большими или маленькими.

Яндекс различает существительные и прилагательные, но совершенно игнорирует окончания.

Также ему совершенно безразличны падежи, множественное число и тому подобное.

Для того чтобы поиск был более точным, необходимо взять запрос в кавычки или поставить перед словом восклицательный знак.

А теперь посмотрите на тот же самый запрос, но без восклицательных знаков.

Видите разницу? С восклицательными знаками количество ответов не 2 млн, а 186 тыс.

Если вы поставите восклицательный знак перед словом с большой буква, то вам выдадут ответы, в которых встречается именно это слово с большой буквы.

Если слово в именительном падеже, и вам необходима информация именно по такому слову, и именно так, как вы его написали, то поставьте перед этим словом два восклицательных знака. Например:  !!Мяч.

Поиск выдаст вам ответы именно по этому слову «Мяч» так, как вы его написали. Не «мячик», не «мячи», и с большой буквы.

Если вы напишите словосочетание со словом «на», то Яндекс проигнорирует «на». Например: «на полке». Поиск будет производиться только по слову «полка».

Для того, чтобы он его учел и не игнорировал, надо перед словом «на» поставить знак плюса – «+на».

У каждой поисковой системы свой алгоритм поиска, поэтому если вы пользуетесь каким-то определенным поисковиком, и хотите научиться правильно составлять запросы, то надо просто набрать в поисковой строке «правила поиска в Google» или «правила поиска в Яндекс», перейти по ссылке ответа на ваш запрос и почитать нужную информацию.

С Вами была – Людмила

Понравилась статья — нажмите на кнопки:

Поисковые системы Мира и России

Привет посетители seoslim.ru! Кто-нибудь из вас помнит, каким был интернет 10 лет назад, а 20?

Хотелось бы напомнить, что датой зарождения мировой глобальной сети считается 1983 год, когда сеть ARPANET стала использовать протокол TCP/IP вместо NCP.

До России, а вернее до СССР интернет добрался в 1990 году, тогда и был присвоен первый домен «.su» (Soviet Union).

Лично мне довелось познакомиться с интернетом в школьные годы (начало 2000-ных), по воли случая один из моих близких родственников по профессии программист показал чего стоит ждать в будущем.

Как итог я раньше своих сверстников имел четкое представление, что такое сайт и откуда брать рефераты.

Появление поисковых систем в мире стало делом времени, ведь сайтов становилось с каждым днем все больше, как и пользователей всемирной паутины.

На первых парах зарождались каталоги сайтов, что вроде справочника по веб-ресурсам, многие из них Дмоз и Yahoo существуют и по сей день.

Благодаря ним было легче находить сайт подходящей тематики и конкретного содержания. Но это не был выход из сложившейся ситуации, и даже поиск по каталогам не мог решить вопросы посетителей искавших информацию.

Все это способствовало тому, что постепенно как на дрожжах появлялись поисковики, тем более конкуренции не было, и кто сумел захватить онлайн рынок остался у руля и по сей день.

Поисковая система — это ресурс, который за счет строки поиска позволяет пользователю искать информацию, отображаемую в виде гиперссылок сайтов максимально отвечающие на запрос.

В России интернет после Западных стран тоже развивался ошеломительными темпами и русскоязычные пользователи сети быстро пронюхали про существование поисковых систем Яндекс, Рамблер, Апорт, а позднее и Google.ru. благодаря которым стало возможным быстро находить информацию на сайтах.

Но не все так просто как может показаться на самом деле, потому что под любой поисковой машиной скрывается тысячная, если не миллионная численность сотрудников, серверов и долоровложений.

Возможно, создать поиск не так сложно, но вот чтобы выйти на один уровень с конкурентами и остаться на плаву задача в нынешних реалиях неподъемная.

Я сам помню, как в юношеские годы когда-то пользовался только поиском от Rambler, мне казалось, что это самый крутой поисковик России у которого большое будущее, но я ошибался…

Пик популярность Рамблер пришелся на 2009 год (было набрано рекордное число посетителей), а в 2011 году Rambler заявил, что отказывается от собственного поиска в пользу Яндекса.

В итоге доля трафика сократилась в 100 раз и на данный момент он известен всем лишь парочкой крутых сервисов.

Теперь представьте, как выйти на высокий уровень новому поиску в современном интернете?

Посмотрите на график перераспределения трафика между поисковиками по данным статистки от LiveInternet.

У руля в Рунете по-прежнему остается Яндекс и Гугл, а в хвосте постоянно сменяющие один одного подтягиваются Mail, Bing, Rambler, Yahoo.

Буквально год назад картина по статистике переходов из поиска для России выглядела таким образом.

Мне даже страшно представить, как обойти таких акул новоиспеченному поиску, тебя если не сожрут, то однозначно покусают, а потом купят за гроши.

Удивительно, что когда Google.ru в 2004 году пришел в Рунет ему до сих пор не удалось стать номером один, как это произошло во всех остальных странах кроме: Чехии, где популярен Seznam.cz и Китая, где пользуется спросом Baidu.com.

Я уже писал про недавно запущенный в России национальный поиск «Спутник», казалось бы, у этой машины есть поддержка в лице Ростелекома и его становление как нового портала должно проходить быстрыми темпами, но по сей день, прошел уже год, Спутник плетется позади всех, имея в руках всего 0.005 % входящего трафика.

Ниже я кратко рассмотрю, все известные поисковики России и Мира, которые любят, пользуются и помнят по сей день.

Основные поисковые системы Рунета

Если говорить про русскоязычный интернет, то на данный момент вся слава достается нескольким поисковикам, можно выделить всего два безоговорочных лидера и парочку отстающих, но не менее перспективных поисковых систем.

Я расположил в порядке значимости российские поисковые системы, которым отдают предпочтения пользователи по данным статистики от Лайвинернет.

Яндекс. До сих пор это самый популярный поисковик в России, который уже на протяжении 19 лет остается лидером.

Датой создания проекта Yandex считается 1997 год и кто бы мог подумать, что маленькое подразделение в компании CompTek International вырастет в гигантское зеркало Рунета.

Яшка настолько развит, что предлагает своим пользователям огромный выбор инструментов для работы, ведения бизнеса и развлечений:

Панель для Вебмастеров

Диск — облачное хранилище данных

Электронная почта

Счетчик Метрика

Электронный кошелек

Не стоит забывать и о собственном каталоге сайтов, куда стремятся добавить проекты многие вебмастера.

Основной доход компании идет от контекстной рекламы, которую можно встретить практически на всех страницах поиска, приложениях и в сервисах Яндекса.

Майл.Ру. Данный портал начал свое существование с почтовой службы (Mail.ru) запущенной в 1998 году и по мере развития с каждым годом запускал в сеть новые службы и сервисы.

Так в 2007 году интернет пополнился еще одним поисковым движком Go.mail.ru, только окончательно отказаться от услуг поисковых машин Яндекса и Гугла удалось спустя шесть лет.

Пик популярность поиска Майл.Ру постепенно в Рунете снижается, хотя еще год назад он чуть ли не доходил до 10% трафика.

Мне больше кажется, что портал усиленно развивается в направлении развлекательной сферы, чего только стоят такие сервисы: Одноклассники, Блоги, Ответы, Игры, Мой Мир, Деньги, браузер «Амиго» и другие.

Rambler. Одной из первых поисковых систем Рунета считается Рамблер, в далеком 1996 год это был самый популярный медийно-сервисный интернет-ресурс.

Не смотря на то что в середине 2000-ых годов популярность Рамблера как поисковой машины сошла на нет, он стал позиционировать себя как медиа-портал новостей.

Здесь любой желающий сможет узнать последние новости, разобраться в финансах, недвижимости, купить авто или отправиться в путешествие.

Однако поистине чем может гордиться Rambler, кроме почтовой службы это выпуском рейтинга-классификатора сайтов (Rambler’s Top100), который актуален и по сегодняшний день.

Nigma. Поисковая система, наделенная интеллектом считается Нигма. Отличается от конкурентов тем, что поиск осуществляет по принципу кластеризации, то есть формирования из запроса таблицу документов разделенных на ряд кластеров.

Еще отличительная черта русской интернет машины в том, что поиск осуществляется не только по собственной базе данных, но и по индексным базам Яндекс, Рамблер, Google, Апорт, Yahoo, Bing и других систем.

Также Нигму используют в качестве инструмента для поиска бесплатных торрент-трекеров и музыки, но больше она специализируется на решении задач для студентов и школьников по математике, химии, физике.

Достаточно ввести в строку поиска любую формулу, чтобы получить правильный ответ.

Спутник. Данную российскую поисковую систему можно смело считать самой молодой, в сети появилась в 2014 году.

По заявлениям Ростелекома его детище должно работать исключительно на благо страны, то есть выдача сайтов будет строго фильтроваться, а сам поиск обязуются установить все государственные учреждения и министерства страны.

Прошло мало времени с момента выхода в свет Спутника и о его становлении и разработках говорить рано, однако данные по входящему трафику говорят, что постепенно сохраняется тенденция роста заинтересованной в нем аудитории.

Webalta. Самой вредной и раздражающих всех пользователей поисковой системой считается Вебальта.

Дело в том что ее владельцы, преследуя одну лишь цель продвижения своего детища, пошли на крайние меры и сделали все чтобы система автоматически встраивалась в браузеры пользователей без их ведома становясь поиском по умолчанию.

Конечно же, такую политику продвижения выбирают многие порталы: mail, search.conduit, но webalta переходит все границы, так как удалить ее из Windows еще та непосильная для новичка задача.

Лично у меня этот поисковик ассоциируется больше с вирусом, а не с поиском. 🙁

Metabot. Самой необычной поисковой системой в России считается Матабот. Принцип ее выдаче основан на посылке запроса одновременно ко всем поисковикам.

Далее алгоритмы обрабатывают собранную информацию, удаляют дубли и на выходе формируют общую выдачу.

В отличие от известных поисковых машин, Метабот не имеет собственной базы индекса, то есть не хранит сайты, а находит их в базах других систем.

Aport. Единственная поисковая система, которая переквалифицировалась в торговую площадку, является Апорт.

Некогда могучий поиск, зародившийся одновременно с Яндекс и Рамблер не смог выдержать конкуренции и перестал существовать, как поиск, зато появилось жалкое подобие Яндекс Маркета.

Пик популярности на Апорт приходится на 2005 год, тогда ежедневно портал посещало более 25 миллионов человек.

Популярные поисковики в России зарубежного происхождения

В этом подразделе рассмотрим оставшихся гигантов поисковой выдачи, в русскоязычном сегменте, но которые были созданы за ее пределами, однако благодаря локализованной версии получили распространение и в Рунете.

Google. Мировым лидеров по охвату онлайн аудитории до сих пор остается Гугл, однако для российской аудитории все же он остается вторым по популярности поисковиком после Яндекса.

Датой основания корпорации считается 1998 года, когда два студента Стэндфордского университета (Ларри Пейдж и Сергей Брин) трудились над учебным проектом.

По одной из версий изначально поисковая система должна была носить название Googol, что означает 10 в 100-ой степени, но Сергей Брин допустил в слове ошибку.

До российского рынка Гугл добрался только в 2004 году, где вовсю развивался Яндекс, который в будущем и стал его основным конкурентом.

Наверное, только мировой лидер может похвастаться таким списком полезных служб и инструментов: блоги, картинки, контекстная реклама (Adsense), облачное хранилище данных (Drive), браузер (Chrome) и расширения, социальная сеть G+, почта Gmail, программы, аппаратное обеспечение, операционные системы и другое.

Bing. Одним из конкурентов для Google на Западе считается поисковик Бинг, который кроме того что работает под управлением собственного движка так еще и подмял под себя поисковик Яху с принадлежащими ему сайтами.

Появился Бинг в 1998 году, тогда он носил название MSN Search, после 2006 года был переименован в Windows Live Search.

Компания Microsoft известная еще и облаком для хранения данных OneDrive сделала все, чтобы его творение соответствовала стандартам мирового поиска, неудивительно, что есть спрос даже в Рунете.

Yahoo. Одной из старых поисковых систем «за бугром» считается Яху, над разработкой, которой трудились в 1994 году молодые аспиранты Джерри Янг и Дэвид Файло.

После приобретения Yahoo в 2009 году компанией Майкрософт, в результате чего на всех его сайтах должен использоваться движок от Бинг.

На данный момент доля трафика поиска в мире заметно сократилась, и сейчас себя Яхоо позиционирует больше как почтовая служба.

Заключение

Как видно поисковых систем во всем мире очень много, практически в каждой стране, где есть интернет, создан государственный или коммерческий поиск.

Но только самые продвинутые смогли вырваться в лидеры и занять своем место под солнцем, даже не прибегая к вирусным методам, какие используют Вебальта и Ask.

Будет интересно узнать в комментариях, какой поисковик приглянулся больше всего тебе читатель и почему?

Итоги конкурса комментаторов…

По итогам конкурса комментаторов за прошедший месяц больше всех комментариев оставил Злостик (zlostik.ru).

Однако в отличие от участника занявшего второе место Александр (fazanet.ru) они не были таким развернутыми, поэтому будет справедливо призовое место поделить между двумя призерами.

Спасибо, что комментируете мои посты, жду реквизиты на почту для вручения приза.

Поисковики | hrazvedka

Сейчас в Интернете активно используется более 1700 поисковиков. Для России наиболее полезными и интересными, на мой взгляд, являются следующие:

new https://toolbox.google.com/datasetsearch – бета-версия поисковика Google по базам данных.

https://hackernoon.com/untraceable-search-engines-alternatives – коллекция наиболее популярных среди американских айтишников поисковиков, альтернативных Google.

https://inside.com/ – ручной поиск по избранным темам и кураторские каталоги  ресурсов по конкретным направлениям.

https://abikogailmonxlzl.onion.casa/ – поисковик по Tor.

https://findo.com/ – Поисковик запущенный Давидом Яном. Умеет искать информацию в облачных хранилищах, соцсетях и на пользовательских устройствах (компьютерах и смартфонах), а также обрабатывать запросы по годовым запросам на человеческих языках. Он объединяет все источники информации и индексирует их. Является продолжением платформы системы анализа текста Compreno, разработанной ABBYY.

https://www.skytorrents.in/ – Поисковик по торрентам.

http://www.izito.com/ – метапоисковая система.

https://www.class-central.com/ –  лучший семантический поисковик с элементами искусственного интеллекта по  учебным онлайн курсам лучших университетов мира по самым различным предметам.

http://www.heapr.com/ – самый быстрый в мире поисковик.

http://www.zanran.com/q/ – поиск файлов данных и статистики/

http://kuznech.com/ –  новый визуальный поисковик с широкими возможностями.

http://www.findsounds.com/ – специализированный аудиопоисковик. Ищет различные звуки (дом, природа, машины, люди и так далее) в открытых источниках. Сервис не поддерживает запросы на русском языке, но есть внушительный список русскоязычных тегов, по которым можно выполнить поиск.

https://www.deepgram.com/ – поисковик по аудиофайлам.

http://lookonion.com/ – поиск по умолчанию в Tor-браузере, доступный из обычного интернета.

http://www.findsounds.com/ — аудиопоисковик.

http://search.carrot2.org/stable/search – поисковик и агрегатор в одном флаконе.

https://censys.io/ – новый поисковик по интернету вещей. Конкурент Shodan.

http://infospace.com/ – активно развивающийся и релевантный метапоисковик.

https://www.facebook.com/facebookmedia/get-started/signal — инструмент Signal для поиска новостных поводов в Facebook и Instagram. Пока открыт только для журналистов.

https://ahmia.fi/search/ –  поисковик по Tor.

http://www.meltinfo.com/ – эффективный поисковик по документам в различных форматах, размещенных в интернете. Поддерживает английский язык.

http://www.heapr.com/ – быстрый и полезный поисковик

http://www.searchenginesindex.com/ru/ – подборка региональных и национальных поисковиков с группировкой по странам

http://www.webcrawler.com/ –  один из самых старых поисковиков, переживающий сегодня второе рождение.

https://www.yahoo.com/ – возрожденный собственный поисковик Yahoo. Сильная сторона – поиск в дискуссионных группах и на кураторских площадках.

http://www.linguee.com/ – уникальный ресурс отечественной разработки, представляет собой комбинацию поисковика и лингвистического процессора. Позволяет искать ресурсы, где используется одно и то же иноязычное слово в разных значениях.

https://thingful.net/ – поисковик-визуализатор по интернету вещей. Особенно хорошо работает вместе с Shodan.

http://www.sputnik.ru/ – поисковик от Ростелекома, ориентированный на государственные и отфильтрованные ресурсы.

http://www.data.gov/ – поисковик по всем сайтам и открытым базам данных американского правительства, всех его министерств, ведомств, учреждений и др. структур, финансируемых из федерального бюджета США.

http://yacy.net/en/ – децентрализованная поисковая машина, работающая в рамках одноранговой сети.

http://www.cluuz.com/ — обновленный таблично-визуальный поисковик

http://www.recipebridge.com/ —  специально к Новому Году и Рождеству. Первый в мире специализированный поисковик по кулинарным рецептам для дома. Позволяет устанавливать различные фильтры. Сегодня в базе почти 5 млн.рецептов. Правда, на английском.

http://visualping.io/ – уникальный инструмент, позволяющий отслеживать новые фото- и видео- изображения на сайте и в окрестностях сайта, т.е. неиндексированных веб-страницах ресурса.

http://www.secretsearchenginelabs.com/ – отличительной особенностью поисковика является то, что он принудительно исключает высокоранговые сайты и сайты, попадающие в верхние страницы выдачи основных поисковиков, давая тем самым шанс маленьким нераскрученным сайтам. С Рунетом работает плохо.

http://pervoiskatel.ru/ – русскоязычный и ориентированный на Россию поисковик по людям. Поддерживает несколько фильтров.

http://www.startupbin.com/google-google/ – надстройка над Google для тех, кто не хочет персонализации, а также отражения в поиске результатов Google +, Blogger, YouTube и т.п.

http://ru.millionshort.com/ – интересная надстройка над основными поисковиками и плагин для основных типов браузеров. Суть его в том, что позволяет автоматически убирать из поиска определенное количество (до миллиона) сайтов и ресурсов, стоящих в верхних строках выдачи. Неоценима для путешествий по глухим закоулкам интернета.ый поисковик. Обладает двумя особенностями. Во-первых, имеет седьмой объем индексированных страниц среди англоязычных поисковиков. Во-вторых, для своей работы использует только возобновляемые источники энергии, типа, солнца, ветра, воды и т.п.

http://omgili.com/ – специализированный поисковик по форумам мирового интернета. Добирается даже туда,  где Google не индексирует всю глубину архива.

http://www.faganfinder.com/ — набор эффективных инструментов интернет-поиска на одной поисковой панели. Просто, удобно и эффективно.

http://www.search.com/ – эффективный метапоисковик, объединяющий лучшие поисковые машины в одном месте. В отличие от других метапоисковиков продолжает постоянно совершенствоваться и приобретать новую аудиторию.

Yandex – самый популярный поисковик Рунета, постоянно совершенствует свои поисковые алгоритмы и сервисы.

www.go.mail.ru – поисковик, который несколько последних лет развивает холдинг Mail.ru.

http://rssportal.ru/ – крупнейший каталог русскоязычных новостных лент в формате RSS по различным тематикам. Новости в лентах обновляются несколько раз в сутки.

http://search.qip.ru/ –  универсальный поисковик с большим количеством полезных сервисов, включая такие необычные для России, как бесплатные видеозвонки между абонентами GIP, неограниченное пространство для хранения всех видов файлов, моментальная загрузка картинок, фотографий, скриншотов и многое другое. Особо интересен для конкурентной разведки и айтишников встроенный поисковик по файлам и архивам, позволяющий искать файлы, программы, драйвера, документы, аудио и видеозаписи.

ru.yahoo.com – когда-то самый популярный поисковик Интернета. В настоящее время корпорация переориентировалась на контент и рекламу. Поэтому поисковик может выдавать уникальные результаты, которые не дают более мощные поисковики. К тому же очень удобная стартовая страница и классная почта.

http://ru.ask.com/ – известный американский поисковик запустил и активно продвигает свою русскоязычную версию.

www.mmnt.ru – старейший и наиболее авторитетный поисковик по FTP архивам.

www.filesearch.ru – быстро развивающийся поисковик по файлам, вне зависимости от того, где они расположены.

www.findbook.ru – быстроразвивающийся поисковик книг в Интернете с элементами семантических алгоритмов.

http://scour.com/ – новый метапоисковик, обеспечивающий весьма релевантную выдачу.

http://www.sobotong.com/gl/index.html – полезная надстройка над метапоисковиком, использующим  Google и Bing. Позволяет одновременно вести двуязычный поиск, например, на русском и английском, либо любых других языках. Хорошо работает с русским языком.

http://www.wiibeez.com/ – надстройка, позволяющая с одной страницы вести поиск во всех основных поисковых машинах, включая web1, web2, наиболее популярные сайты типа Википедия, Амазон и т.п.

http://a9.com/ – поисковик, принадлежит компании «Амазон». Использует движок Google. Отличительная особенность – при постоянном поиске через движок,  начинает предлагать списки ресурсов, которые, по мнению поисковика, наиболее точно соответствуют интересам пользователя.

http://www.teoma.com/ – принципиальное отличие от Google состоит в том, что в Teoma при ранжировании страниц учитываются только ссылки с ресурсов, тематически соответствующих запросу, а не со всех проиндексированных страниц базы. Соответственно, резко повышается вероятность найти действительно нужную и новую информацию.

http://www.webcrawler.com/ – проверенный временем метапоисковик, позволяющий вести одновременный поиск по Google, Yahoo, Bing.

http://www.bing.com/ – поисковик от нелюбимого многими Microsoft. На недавних испытаниях на релевантность и качество выдачи показал лучшие результаты, чем Google. Посмотрим, что будет дальше.

https://duckduckgo.com/ – несмотря на экстравагантное название, высоко оценивается специалистами информационного поиска. Преимуществами являются блокирование трастовых и спамовых сайтов, богатый функционал специальных поисков и настроек и, наконец, в отличие от всем известной системы, никого не отслеживает.

http://ixquick.com/ – самый конфиденциальный поисковик в мире. Технологически является наиболее мощной метапоисковой системой, обладает эффективным механизмом анализа поиска на точность и, в отличие от всех других систем, не записывает даже ваш IP-адрес.

http://dogpile.com/ – еще один метапоисковик, агрегирующий наиболее релевантные поисковые запросы Google,  Yahoo, Bing и Ask и представляющий их пользователю в наиболее удобном пакете.

http://www.kngine.com/ –  новый поисковик с элементами семантического веба. Наряду со ссылками позволяет получать агрегированный ответ на поисковый запрос, сгенерированный из наиболее релевантных сведений и без учета Википедии.

http://lookahead.surfwax.com/index-2011.html – реально работающий семантический поисковик для  интернета, корпоративных порталов и сайтов. Технология развивается с 2003 года.

http://www.ask.com/ – кластерный поисковик. Как и обычная поисковая система, сначала находит в своей базе проиндексированные страницы, а затем производит в отличие, например, от обычных поисковиков типа Google, Yandex анализ подобранных ресурсов и находит в них дополнительные ключевые слова, наиболее часто встречающиеся в текстовом запросе. Т.о., наверху выдачи оказываются страницы, которые наиболее популярны среди сайтов аналогичной либо похожей тематики.

www.youtube.com – помимо всего прочего, самый большой поисковик по видеоконтенту Интернета.

http://www.plazoo.com/ – нидерландская разработка, существует уже достаточно давно и стабильно развивается. Специализация – новости, блоги, RSS. Есть рубрикаторы и фильтры. В числе семи поддерживаемых языков есть и русский. Отлично индексируется Рунет.

http://www.melissadata.com/ – компания помимо прочего реализовала бесплатный сервис поиска по самым разным базам данных, включая адреса, открытые персональные данные, данные о компаниях и многое другое. Работает в основном для США и Канады, но постепенно выдвигается в Европу и Азию.

http://www.revimg.com/ – любопытный поисковик изображений. В отличие от традиционных, которые ищут изображения, он по изображению ищет страницы, где эти изображения размещены.

https://twitter.com/#!/search-home – наконец запущен полноценный даже с собственным языком запросов поисковик по Twitter. Операторы будут добавлены в файл с операторами специальных запросов поисковиков.

www.qwika.com – англоязычный поиск в Интернете, интегрированный с Википедией.

Самые полезные сайты — это поисковые системы

На данной страничке представлены наиболее популярные российские, украинские, и международные поисковые системы. Поисковые системы или поисковики предназначены как для поиска информации, так и для раскрутки сайтов в глобальной сети Интернет.

Основой поисковиков являются специальные программы (роботы-пауки), которые автоматически сканируют Интернет и на основе определенных алгоритмов осуществляют индексацию найденных страниц. Из накопленных документов формируются базы данных информационных ресурсов.

По заданному пользователем запросу, состоящему из одного или нескольких слов (можно использовать логические операторы) поисковик формирует перечень, найденных в базе данных, веб-страниц, на которых присутствуют слова, входящие в запрос.

Для поиска информации в Internet пользователь должен точно сформировать запросы для поисковика. В связи с тем, что полнота охвата ресурсов Интернет конкретным поисковиком не превышает 30%, то необходимо осуществлять поиск одной и той же информации с помощью различных поисковых систем.

Кроме поиска информации на сайтах, поисковики используются для раскрутки сайтов. Необходимо отметить, что согласно статистике около 80% посетителей сайта обеспечивают поисковики. Для того чтобы поисковики индексировали страницы Вашего сайта, необходимо, чтобы они нашли Ваш сайт.

Конечно, поисковики автоматически сканируют Интернет и индексируют найденные документы и, в конце концов, найдут и Ваши веб-ресурсы, но для ускорения процесса включения Вашего сайта в индекс поиска необходимо вручную добавить URL Вашего сайта в поисковые системы.

В этой связи на данной страничке указаны ссылки на адреса поисковых систем для осуществления поиска информации в Internet, например, щелкнуть на ссылку «Yandex», а для регистрации сайта в поисковиках необходимо выбрать ссылку «Добавить URL».

Российские поисковые системы

• Yandex — Добавить URL (регистрация сайта в поисковике).
  Одна из самых популярных поисковых систем, которая предназначена для работы с «русскоязычным» интернетом. Кроме того, используя сервис на http://wordstat.yandex.ru/ можно проверить статистику ключевых слов, т.е. проверить частоту запроса ключевых слов.

• Rambler — Регистрация сайта в поисковой системе Rambler (Добавить URL).
  Одна из самых популярных поисковых систем, которая предназначена для работы с «русскоязычным» интернетом.

• Апорт — Добавить URL.
  Одна из самых популярных поисковых систем, которая предназначена для работы с «русскоязычным» интернетом.

• MetaBot.ru – Российская метапоисковая система (метапоисковые системы не имеют собственных баз данных, они передают полученный запрос нескольким поисковым системам с последующей обработкой и выдачей результатов поиска и ссылкой на поисковые машины.)

• Nigma — Регистрация.
  Интеллектуальная поисковая система. Преимущество системы Nigma.ru состоит в том, что ее алгоритм ищет документы с учетом русской орфографии, объединяет результаты, полученные с разных поисковых систем, использует запросы пользователей для улучшения качества кластеризации и счетчики для сортировки результатов поиска

Украинские поисковые системы

• Мета (по Украине) — Добавить URL.
  Одна из популярных поисковых систем предназначена для поиска по украинским серверам и серверам с украинской тематикой. Для добавления сайта в Реестр украинских сайтов необходимо зарегистрироваться или войти под своим логином на МетаПаспорте.

• UAportal — Добавить URL.
  Украинский портал — поисковая система и систематический каталог. В каталоге регистрируются только украинские, и лишь некоторые лучшие мировые ресурсы сети Интернет.

• Uaport — Добавить URL.
  Украинская поисковая система предоставляет возможность поиска по украинским серверам. Имеет тематический каталог сетевых ресурсов Украины и региональный каталог Web-ресурсов. Сайты из всех областей Украины, а также зарубежные источники. В каталог и базу данных поискового сервера вносятся украинские Web-сайты и ресурсы, содержащие информацию об Украине.

Зарубежные поисковые системы

• Google in English — Добавить URL
  Google — это мощная и популярная поисковая система, которая имеет множество дополнительных сервисов.

• Google in Ukraine — Обеспечивает поиск в Интернет, поиск страниц на русском и на украинском языке.

• Google in RU — Обеспечивает поиск в Интернет и поиск страниц на русском языке.

• AltaVista — Submit a Site. Одна из старейших и крупнейших поисковых систем. Служит для поиска как специальной информации в определенной области знаний, так и для поиска информации общего назначения.

• HotBot — Добавить URL (Add). Служит для поиска, как специальной информации, так и для поиска информации общего назначения.

• Yahoo! — Submit Your Site. Первая и одна из самых популярных поисковых систем.

• Bing — Передайте сведения о своем веб-сайте в службу Bing. Bing – это новая поисковая система компании Microsoft

Тематические электронные каталоги

Кроме поисковиков в Интернет имеются тематические электронные каталоги, в которых информация упорядочена по категориям. Регистрация в каталогах — один из эффективных способов увеличения посещаемости Вашего веб-ресурса. Желательно зарегистрировать свой сайт в основных каталогах (DMOZ, Яндекс, Rambler, Yahoo):

 

Какой поисковик самый лучший? Рейтинг самых популярных поисковых систем :: SYL.ru

Поисковая система – это один из ключевых уровней интернета наравне с контентом и браузером. «Яндекс»-поисковик или аналогичные системы («Гугл», «Бинг», DuckDuckGo и другие) позволяют пользователю осуществлять поиск информации во Всемирной паутине, формулируя запрос.

Работа же поисковой системы заключается в том, чтобы найти по этому запросу (ключевому слову или фразе) все документы, страницы, видео, то есть весь контент.

Какой поисковик самый лучший? Есть ли альтернативные варианты, что-то кроме «Гугла» и «Яндекса»? Какой поисковик интернета больше подходит для сканирования англоязычных источников или, например, музыки? Именно об этом и пойдет речь в статье.

Рейтинг: лидеры рынка

Если говорить о мире в целом, то «Гугл»-поисковик является самой популярной поисковой системой. Корпорация занимает практически 70% рынка. Вторую позицию рейтинга занимает «Бинг» (доля – 12,26%). Борьбу за вторую строчку с ним ведет система Baidu (6,48% по состоянию на сентябрь 2015 года). Время от времени они меняются местами.

Так, например, в 2014 «силы» были распределены по-другому: первое место занимал «Гугл»-поисковик с 68,69%, второе – Baidu (17,7%), третье – «Бинг» с капитализацией рынка в 6,22%.

Но общемировые данные очень обобщенные. Какой поисковик самый лучший?

В Китае, к примеру, очень небольшой процент населения сканирует «Гуглом», большинство использует отечественную систему Soso. В Южной Корее большая часть жителей пользуется собственной разработкой – поисковиком интернета Naver. Правда, в последние несколько месяцев количество запросов в этой системе начало стремительно снижаться.

В Японии и Тайване пользователи чаще других используют Yahoo!

Рейтинг: русскоязычные системы

Какой поисковик самый лучший? В России рейтинг поисковых систем совсем не похож на общемировой. Лидер рынка в русскоязычном сегменте интернета – это «Яндекс», которым пользуются более 55% пользователей.

На втором месте «Гугл» с результатом 37,6%. Согласно данным сервиса LiveInternet, охват русскоязычных поисковых запросов во Всемирной паутине распределился следующим образом:

1. Универсальные поисковики: «Гугл» (37,6%), «Бинг» (0,3%), Yahoo! (0,1%).
2. Англоязычные и международные (AskJeeves, например).
3. Русскоязычные системы поиска: «Яндекс» (56,2%), Mail (5,3%), «Рамблер» (0,5%).

DuckDuckGo

Разговор об альтернативных поисковых системах стоит начать с поисковика DuckDuckGo. Это достаточно известная и распространенная система с открытым исходным кодом. Серверы DuckDuckGo находятся в Соединенных Штатах Америки. Результаты поиска довольно обширные, так как система использует не только собственные алгоритмы, но и результаты некоторых других источников, например, «Википедии», поисковика «Бинг» и Yahoo!

Поисковик DuckDuckGo обеспечивает максимальную безопасность личной информации пользователя, приватность и конфиденциальность. Система не собирает никаких данных о пользователях, не хранит историю и максимально ограничивает использование файлов cookie.

Отличие DuckDuckGo в том, что эта система не персонализирует поисковую выдачу, как это делают другие системы. В «Гугле» или «Яндексе», например, пользователь видит только ту информацию, которая согласуется с его предпочтениями. А вот DuckDuckGo формирует реальную картину и позволяет избавиться от навязчивой конкретной рекламы. Поисковый сервис легко ищет информацию на иностранных языках, тогда как «Яндекс» и «Гугл» по умолчанию отдают предпочтение русскоязычным источникам, даже если запрос введен на английском, немецком или другом языке.

В системе можно настроить интерфейс: изменять можно цветовое оформление, шрифты, ссылки и другие параметры всего в несколько кликов.

Пока еще этой поисковой системе далеко до гиганта «Гугла», но утёнок развивается, так что вполне возможно, что в будущем DuckDuckGo займет одну из лидирующих позиций. Команда создала отличный продукт, который обеспечивает анонимный, быстрый и функциональный поиск, заслуживающий внимания пользователя.

NotEvil

Это система, которая осуществляет поиск по анонимной сети Tor. Поисковая система предустановлена в одноименном браузере. Чем лучше notEvil? Он «проходит» туда, куда не могут добраться «Гугл» или «Яндекс»-поисковик. Вообще, в сети Tor очень много ресурсов которые нельзя посетить в «обычном» (законопослушном) интернете. Это такая себе площадка внутри сети со своими социальными платформами, торрент-трекерами, СМИ, блогами, торговыми центрами, форумами, библиотеками и так далее.

Кстати, notEvil – это не единственный в своем роде поисковик. Еще есть Look, который по умолчанию доступен в том же браузере «Тор», и TORCH – одна из самых старых систем поиска в анонимной сети.

YaCy

Бесплатный поисковик YaCy — это совершенно другой подход к организации поиска во Всемирной паутине. Система работает по принципу Р2Р. Это значит, что каждый компьютер, на котором установлен модуль, самостоятельно сканирует интернет, а потом все полученные результаты собираются в единую базу, которой могут пользоваться все пользователи YaCy.

Система полностью независима, автономна, обеспечивает анонимность каждого пользователя. YaCy подойдет сторонникам открытого интернета, который не подвержен влиянию крупных корпораций и государственных органов.

В быту поисковик пока что не очень полезен, зато в перспективе является достойной альтернативой «Гуглу» даже с точки зрения организации процесса поиска информации.

Pipl

Pipl – система, предназначенная для поиска информации о каком-то определенном человеке. Разработчики утверждают, что алгоритмы поисковика ищут людей эффективнее, чем распространенные во всем мире «Гугл» или «Яндекс».

Приоритетными источниками являются профили в социальных сетях комментарии, списки участников, базы данных, где публикуются разнообразные данные о людях, например, базы судебных решений. Но есть и недостаток. Для Pipl недоступны российские базы данных, так что он будет полезен только для поиска информации о гражданах США.

FindSounds

Какой поисковик самый лучший? Если нужно найти музыку или звуки, то, конечно, самым лучшим будет именно FindSounds. Это специализированный поисковик, где есть список тегов. Тут можно выбрать нужный формат аудиофайла или его качество. Все результаты поиска доступны для скачивания.

Wolfram|Alpha

Эта система выдает не страницы, на которых есть нужная пользователю информация, а готовый результат. Например, карты, графики, таблицы, короткие ответы. Сервис как нельзя лучше подходит для вычисления данных и поиска конкретных фактов. Поисковик пока понимает не все запросы, но постоянно развивается.

С помощью Wolfram|Alpha удобно, например, сравнивать параметры для настройки фотоаппарата, смартфона или ноутбука. Также вычислять уровень алкоголя в крови (система запрашивает у пользователя вес и рост, количество выпитого, время, а затем сообщает, через сколько алкоголь полностью выведется из организма).

Инструмент может конвертировать размеры обуви и одежды, считать калории, смотреть курсы валют или настраивать музыкальный инструмент.

Dogpile

Dogpile выводит результаты из выдач всех распространенных поисковых систем сразу. Сервис использует улучшенный алгоритм и, как уверяют разработчики, формирует самую лучшую выдачу в интернете. Кроме того, здесь мало рекламы. Можно попробовать воспользоваться Dogpile, если нужная информация никак не находится в стандартных «Гугле» или «Яндексе».

BoardReader

Эта система ищет информацию на форумах, опросах, сервисах вопросов и ответов, социальным сообществам, сужая поле поиска до социальных площадок. Можно выставить фильтры: язык и дату публикации, название сайта и тому подобное.

Поисковик может пригодиться специалистам по рекламе, которых интересует мнение аудитории.

В заключение

Часто альтернативные поисковые системы скоротечны. Они появляются также быстро, как и умирают. Большинство альтернативных систем на сегодняшний день специализируются на какой-либо узкой нише или тестируют оригинальный алгоритм в формировании результатов поиска.

В контексте описания альтернативных поисковых систем, критерий «лучше» совсем не означает «лучше во всем». Каждый из перечисленных выше сервисов дает конкретному пользователю что-то такое, чего нет в «Гугле» или «Яндексе». В любом случае, ознакомиться с альтернативными вариантами (на фоне того, что система кажется практически монополизированной поисковыми гигантами) интересно и полезно каждому пользователю.