17.12.2017 17:00:00

Сучасний Інтернет важко уявити без пошукових систем. Щодня вони обробляють мільярди запитів, що надходять через десктопні браузери та мобільні додатки. Найскладніші алгоритми буквально передбачають дії користувачів, підказують можливі варіантиданих і видають найбільш точні результати.

Але яка найкраща Пошукова системафункціонує у Мережі на сьогоднішній день? Чому ми віддаємо перевагу якомусь певному пошуковику? У нашій статті ми розберемо, які пошукові системи завоювали найбільшу популярність і в чому їх принципові відмінності.

Рейтинг пошукових систем у світі

Для початку з'ясуємо, які пошукові системи користуються найбільшою популярністю у світі. Для цього звернемося до даних, що їх надає авторитетне аналітичне агентство NetMarketShare. У цій таблиці виведено топ-5 пошукових систем та відсоток запитів користувачів персональних комп'ютерівза 2017 рік:

Неважко помітити, що по обох позиціях пошукача від Google лідирує з максимальним відривом від своїх конкурентів. Більше того, для мобільних пристроїв Google, власне, є монополістом, обробляючи 93% всіх пошукових запитів. Пов'язано це і з поширенням смартфонів на ОС Андроїд.

Крім того, Google – один із наймінімалістичніших пошуковиків. На головній сторінцікористувач бачить лише логотип та рядок пошуку. Також користувачів залучають цікаві дудли – логотипи Google, які перемальовуються на честь певної дати чи події. Дуже часто такі дудли роблять інтерактивними. Таким чином, за всіма вищевказаними показниками Google – це однозначно найкраща пошукова система.

На другому місці за популярністю, як на ПК, так і на смартфонах, міцно утвердилася китайська пошукова система Baidu. Справа в тому, що цей сервіс є єдино доступним у Китаї – ним користуються 92% від населення. Іноді Baidu намагається розширити географічні межі, проте популярності в інших країнах він так і не набув. Багато в чому це пов'язано з досить агресивною політикою просування та конфліктом розширень пошуковика з антивірусами.

Bing – пошукач від Microsoft, яким найчастіше користуються власники персональних комп'ютерів у США. Невеликий відсоток запитів з мобільних пристроївобумовлений тим, що смартфони від Microsoft поступово йдуть із ринку.

Yahoo! – одна з найстаріших пошукових систем, яка була створена в 1995 році. В основному ним користуються жителі США, Великобританії та деяких країн Південно-Східної Азії.

Пошуковик від Яндекс потрапив лише до першої п'ятірки за запитами з ПК. Невеликий відсоток від загальної кількості запитів також обумовлений тим, що вітчизняним пошуковцем користуються користувачі Росії та країн СНД. А замикає топ-5 за популярністю пошукових систем для мобільних пристроїв сервіс Dogpile. Його основна аудиторія – жителі США, Канади та Європи.

Рейтинг пошукових систем у Росії

З'ясувати, яка найкраща пошукова система у російському інтернет-сегменті Рунеті нам допоможуть дані лічильника LiveInternet та аналітичного сервісу Seo-auditor.

Лічильник LiveInternet враховує пошукові запити як із ПК, так і з мобільних платформ. У підсумку, рейтинг популярності пошукових систем у Росії виглядає так:

З великим відривом лідирують два головні конкуренти – Google та Яндекс. Обидва пошукові системи відрізняються високою швидкістю та ефективністю роботи. Крім того, кожен сервіс має свої унікальні «фішки». Наприклад, пошукач від Google видає чітку та лаконічну інформацію про кожен сайт, а також враховує якість сторінок у видачі. Яндекс же приділяє велику увагу своїм додатковим сервісам, які підключаються при кожному запиті в пошуковій системі.

На третьому місці за популярністю опинився пошуковик від Mail.ru. Багато експертів відзначають у даного сервісу добре опрацьовані пошукові алгоритми, швидке оновлення новин на головній сторінці. З іншого боку, вистачає у Mail та недоліків. Насамперед, це брак додаткових сервісів та недоопрацьований анти-спам фільтр.

Колись популярний Rambler зараз обробляє всього 0,2% від загальної кількості пошукових запитів у Рунеті. Якийсь час тому сервіс зробив капітальний ремонт: у пошуковика змінився логотип і була з нуля перемальована головна сторінка. Проте піднятися у рейтингу пошукових систем це, на жаль, не допомогло.

Тим не менш, у Рамблера є свої очевидні переваги. Наприклад, асоціативна система пошуку. Якщо користувач забуває змінити розкладку та вбиває слово vepsrf, пошуковик видає результати на запит «Музика». Зараз цією системою вже нікого не здивуєш, ось тільки Рамблер був першим пошукачем у Рунеті, який зміг якісно реалізувати такий алгоритм.

Менше 200 тисяч запитів на рік обробив пошуковик Bing. Як уже говорилося вище, сервіс від Microsoft популярний, в основному, на Заході, і, швидше за все, більшість запитів у Рунеті через Bing відправляється зі смартфонів і ПК іноземців, що працюють у Росії.

Подібні дані за популярністю пошукових систем можна спостерігати в дослідженні аналітичного агентства Seo-auditor. Порівняйте цифри станом на січень та листопад 2017 року:

Зіставивши дані лічильників Яндекс.Метрика, SpyLog/Openstat, LiveInternet, Hotlog, Рейтинг@Mail.ru, а також за допомогою оригінальних алгоритмів, фахівці Seo-auditor дійшли висновку, що звання «Найкраща пошукова система» в Рунеті знову ділять між собою Google та Яндекс. До того ж помітно, як за рік зменшилася частка запитів через пошукові системи Мейл, Рамблер і Бінг.

Мобільні програми-пошуковики

Серед першої п'ятірки найпопулярніших пошукових систем фірмові мобільні програми є у Google, Яндекс та Bing. Щоб з'ясувати, чим відрізняється кожна утиліта, ми протестували пошукові системи на потужному та продуктивному смартфоні. Як тестовий запит ми використовували один з найпопулярніших, на Наразі, не тільки у Росії, але й у всьому світі – Зіркові Війни 8. Результат можна подивитися на відео нижче:

Google у своєму мобільному пошуковій системі керується тим же принципом, що і в десктопній версії - мінімум елементів інтерфейсу. Пошуковий запит можна вводити як з екранної клавіатури, і голосом. У видачі пошукача можна простежити чітку ієрархію:

• Огляди та рейтинги фільму
• Розклад сеансів у кінотеатрах міста
• Трейлери на YouTube
• Список акторів фільму
• Схожі запити
• Посилання на сайти

Схожу картину можна спостерігати і в пошуковій системі від Яндекса. Російський сервіс у своїй програмі також копіює основну версію. На головній сторінці розміщено корисні сервісиі новини, а пошуковий рядок закріплений внизу екрана. Результати видачі розподіляються так:

• Трейлери та ролики на Яндекс.Відео
• Розклад сеансів у кінотеатрах
• Посилання на Вікіпедію
• Список акторів
• Схожі запити
• Посилання на сайт (причому першим посиланням є сторінка фільму на Кінопошуку, який належить Яндексу).

Окремою «фішкою» Яндекса можна назвати голосовий помічникАліса, за допомогою якого можна не тільки знайти потрібну інформацію, а й скоротати час у приємній, а іноді й кумедній бесіді із цифровим алгоритмом.

Додаток Bing, так само як і Google, йде шляхом лаконічності. На головному екрані розміщено кнопку пошуку на красивому тлі. Після натискання на збільшувальне скло користувач потрапляє на сторінку пошукача. Незважаючи на те, що інтерфейс не русифікований, програма швидко видає потрібні результати. Щоправда, на відміну від Гугла та Яндекса, Bing обмежується лише посиланнями на сайти без додатково увімкнених сервісів.

Альтернативні пошукові системи

Крім найпопулярніших пошукових систем на кшталт Яндекса та Гугла в Мережі існує чимало цікавих пошукових сервісів, які за своїми функціями можуть стати непоганою альтернативою визнаним гігантам. Ми вибрали 5 найцікавіших систем, якими можна користуватися як на ПК, так і смартфонах.

Пошуковик, що базується на трьох основних принципах:

• Відсутність сховища особистих даних
• Відсутність нав'язливої ​​реклами на основі запитів користувача
• Відсутність відстеження дій користувача.

Таким чином, DuckDuckGo оцінять ті, хто віддає перевагу конфіденційності в Мережі і хоче отримувати об'єктивну інформацію, без урахування минулої пошукової поведінки в Інтернеті. Крім того, DuckDuckGo не прив'язаний географічно користувача. Це означає, що інформацію можна шукати і отримувати будь-якою мовою, тоді як Яндекс і Google віддають перевагу російськомовним ресурсам, навіть якщо вбити запит англійською.

YaCy

Децентралізована пошукова система, яка не має єдиного сервера і власника. YaCy це мережа комп'ютерів користувачів, на яких встановлена спеціальна програма. Кожен ПК самостійно сканує Мережу та збирає отриману інформацію у загальну базу даних. Кожен вузол мережі YaCy автономен і, отже, не схильний до державної або корпоративної цензури.

Єдиний недолік вітчизняного користувача – YaCy не русифікований.

Pipl

Pipl - це система, яка призначена для пошуку конкретних користувачів в Мережі. Складні алгоритми збирають усі дані про людину за профілями в соцмережах коментарів, відкритих баз даних тощо. На даний момент, у пошуковій базі Pipl зібрані дані за більш ніж 3 мільярдами людей.

Пошук по Рунету для Pipl є поки що досить складним завданням. Так що цей пошуковик стане кориснішим тим, хто шукає конкретних користувачів у Європі, США або Канаді.

Питання-відповідь система, пошуковик на основі бази знань і наборі обчислювальних алгоритмів. На відміну від інших пошукових систем, Wolfram|Alpha не виводить список посилань за запитами, а формує повноцінну відповідь на основі бази знань про історію, культуру, науку, кінематографію, театр та багато іншого. Крім того, алгоритм підключає дані про відомих людей та сторінок у Мережі.

Наприклад, на запит Star Wars films пошукача видає список усіх фільмів кіновселеної, по кожному з яких можна переглянути індивідуальну інформаційну картку. Далі йде добірка постерів фільмів і Детальна інформаціяпро збори у кінотеатрах.

Wolfram | Alpha постійно поповнює свою базу даних для більш точного виведення найнеобхіднішої інформації за запитами. Для студентів, журналістів, аналітиків та наукових співробітників Wolfram|Alpha – мабуть, найкращий пошуковик, тому що він видає не тільки текстову інформацію, Але й компілює різні графіки, таблиці та схеми для більшої наочності.

Ми познайомили вас із найпопулярнішими пошуковими системами. Звичайно, досить складно назвати певну пошукову систему найкращою у світі. Кожна система має свій набір інструментів, які залучають тих чи інших користувачів. А яким пошукачем найчастіше користуєтеся ви? Розкажіть про свої враження у коментарях до цієї статті!

Донедавна знайти необхідну інформацію у Всесвітній павутині було не так просто. Але, завдяки стрімкому розвитку та появі нових пошукових систем, цей процес став набагато зручнішим і швидшим. У нашому сьогоднішньому огляді 10 самих найкращих сервісівдля пошуку різноманітних даних, які здатні знайти в глибинах інтернету все, що потрібно.

1. Пошукова інтернет система - Bing

Bing – це відома пошукова інтернет система, яка створена у червні 2009 року. Цей сервіс доступний 40 мовами. Її щомісячна кількість унікальних відвідувачів становить приблизно 350 мільйонів людей.

2. Метапошукова інтернет система - AOL Search.com

AOL Search.com- це метапошукова інтернет система, яка була заснована у Сполучених Штатах Америки у 1985 році. Щомісячна кількість відвідувачів цього сервісу становить приблизно 75 мільйонів людей. Посаду генерального директора обіймає Тім Армстронг.

3. Пошукова інтернет система - DuckDuckGo

DuckDuckGo- це інтернет-пошукова системаз відкритим вихідним кодом, яку було запущено в 2008 році Габріелм Вайнбергом. Штаб-квартира компанії розташована у Веллі-Фордж, штат Пенсільванія. Кількість унікальних відвідувачів, що використовують DuckDuckGo, становить близько 13 мільйонів людей на місяць.

4. Пошукова інтернет система - Ask.com

Ask.com- це пошукова інтернет система, головною особливістю якої є пошук відповіді питання. Сервіс був заснований у червні 1996 року в місті Берклі, штат Каліфорнія Гарретт Грюнер і Девід Уортон. Щомісячна кількість унікальних відвідувачів цього сервісу становить приблизно 145 мільйонів людей.

5. Пошукова інтернет система - Google

Google- це найвідоміша пошукова інтернет система, штаб-квартира якої знаходиться в Маунтін-В'ю, Каліфорнія, Сполучені Штати Америки. Заснована компанія 4 вересня 1998 Ларрі Пейджом, Сергієм Михайловичем Бріном. Її щомісячна кількість унікальних відвідувачів становить близько 1.100.000.000 чоловік.

6. Метапошукова інтернет система - MyWebSearch.com

MyWebSearch.com – це метапошукова інтернет система, яка знаходиться на 73 місці у списку найпопулярніших веб-сайтів. Її щомісячна кількість унікальних відвідувачів складає приблизно 60 мільйонів людей.

7. Метапошукова інтернет система - Infospace.com

Представлена ​​пошукова система була заснована у 1996 році. Її штаб-квартира знаходиться в Белльвью, Вашингтоні, Сполучених Штатах. Щомісяця кількість унікальних відвідувачів Infospace.comстановить приблизно 24 мільйони людей.

8. Метапошукова інтернет система - WebCrawler.com

WebCrawler.com– це метапошукова інтернет система, що працює за допомогою Yahoo та Google. Компанія створена у квітні 1994 року. Її щомісячна кількість унікальних відвідувачів становить приблизно 65 мільйонів людей.

9. Метапошукова інтернет система - Info.com

Info.com- це метапошукова система, штаб-квартира якої знаходиться у столиці Великобританії Лондоні. Щомісячна кількість унікальних відвідувачів Info.com складає приблизно 13 мільйонів людей.

10. Пошукова інтернет система - Yahoo

Пошукова інтернет система під назвою Yahoo, яка була заснована в січні 1994 року Джеррі Янгом та Девідом Філом. Генеральним директором компанії є Марісса Майєр. Її щомісячна кількість унікальних відвідувачів становить приблизно 300 мільйонів людей. Штаб-квартира сервісу знаходиться в місті Санта-Клара, Каліфорнія, Сполучені Штати Америки.

А любителям мобільних девайсів та комп'ютерних технологій, напевно, буде цікаво подивитися на

Що це

DuckDuckGo – це досить відома пошукова система з відкритим вихідним кодом. Сервери знаходяться у США. Крім власного робота, пошуковик використовує результати інших джерел: Yahoo, Bing, Вікіпедії.

Чим краще

DuckDuckGo позиціонує себе як пошук, що забезпечує максимальну приватність та конфіденційність. Система не збирає жодних даних про користувача, не зберігає логи (немає історії пошуку), використання файлів cookieмаксимально обмежено.

DuckDuckGo не збирає особисту інформацію користувачів та не ділиться нею. Це наша політика конфіденційності.

Гебрієл Вайнберг (Gabriel Weinberg), засновник DuckDuckGo

Навіщо це вам

Усі великі пошукові системи намагаються персоналізувати пошукову видачу з урахуванням даних про людину перед монітором. Цей феномен отримав назву "міхур фільтрів": користувач бачить тільки ті результати, які узгоджуються з його уподобаннями або які система визнає такими.

Формує об'єктивну картину, яка не залежить від вашої минулої поведінки в Мережі, та позбавляє тематичної реклами Google та «Яндекса», заснованої на ваших запитах. За допомогою DuckDuckGo легко шукати інформацію іноземними мовами, тоді як Google і Яндекс за замовчуванням віддають перевагу російськомовним сайтам, навіть якщо запит введений іншою мовою.

Що це

not Evil - система, яка здійснює пошук анонімної мережі Tor. Для використання потрібно зайти в цю мережу, наприклад, запустивши спеціалізований .

not Evil не єдиний пошуковик у своєму роді. Є LOOK (пошук за замовчуванням у Tor-браузері, доступний зі звичайного інтернету) або TORCH (одна з найстаріших пошукових систем в Tor-мережі) та інші. Ми зупинилися на not Evil внаслідок недвозначного натяку на Google (досить подивитися на стартову сторінку).

Чим краще

Шукає там, куди Google, «Яндексу» та іншим пошуковим системам вхід закритий у принципі.

Навіщо це вам

У мережі Tor багато ресурсів, які неможливо зустріти у законослухняному інтернеті. І їх кількість зростатиме в міру того, як посилюється контроль влади над змістом Мережі. Tor – це своєрідна мережа всередині Мережі зі своїми соціалками, торрент-трекерами, ЗМІ, торговими майданчиками, блогами, бібліотеками тощо.

3. YaCy

Що це

YaCy – децентралізована пошукова система, що працює за принципом мереж P2P. Кожен комп'ютер, де встановлено основний програмний модуль, сканує інтернет самостійно, тобто є аналогом пошукового робота. Отримані результати збираються до загальної бази, яку використовують усі учасники YaCy.

Чим краще

Тут складно говорити, краще це чи гірше, тому що YaCy – це зовсім інший підхід до організації пошуку. Відсутність єдиного сервера та компанії-власника робить результати повністю незалежними від чиїхось переваг. Автономність кожного вузла виключає цензуру. YaCy здатний вести пошук у глибокому вебі та неіндексованих мережах загального користування.

Навіщо це вам

Якщо ви прихильник відкритого ПЗ та вільного інтернету, не схильного до впливу державних органів та великих корпорацій, то YaCy - це ваш вибір. Також за його допомогою можна організувати пошук усередині корпоративної чи іншої автономної мережі. І нехай поки що в побуті YaCy не надто корисний, він є гідною альтернативою Google з погляду процесу пошуку.

4. Pipl

Що це

Pipl – система, призначена для пошуку інформації про конкретну людину.

Чим краще

Автори Pipl стверджують, що їхні спеціалізовані алгоритми шукають ефективніше, ніж «звичайні» пошукові системи. Зокрема, пріоритетними є профілі соціальних мереж, коментарі, списки учасників та різні бази даних, де публікуються відомості про людей, наприклад, бази судових рішень. Лідерство Pipl у цій галузі підтверджено оцінками Lifehacker.com, TechCrunch та інших видань.

Навіщо це вам

Якщо вам потрібно знайти інформацію про людину, яка проживає в США, то Pipl буде набагато ефективнішою за Google. Бази даних російських судів, певне, недоступні для пошукача. Тому з громадянами Росії він справляється негаразд.

Що це

FindSounds - ще одна спеціалізована пошукова система. Шукає у відкритих джерелах різні звуки: будинок, природа, машини, люди тощо. Сервіс не підтримує запити російською мовою, але є перелік російськомовних тегів, за якими можна виконувати пошук.

Чим краще

У видачі лише звуки та нічого зайвого. У налаштуваннях можна виставити бажаний формат та якість звучання. Всі знайдені звуки доступні для завантаження. Є пошук за зразком.

Навіщо це вам

Якщо вам потрібно швидко знайти звук мушкетного пострілу, удари дятла-сосуна або крик Гомера Сімпсона, цей сервіс для вас. І це ми вибрали лише з доступних російськомовних запитів. На англійській мовіспектр ще ширший.

Якщо серйозно, спеціальний сервіс передбачає спеціалізовану аудиторію. Але раптом і вам знадобиться?

Що це

Wolfram | Alpha - обчислювально-пошукова система. Замість посилань на статті, що містять ключові слова, вона видає готову відповідь на запит користувача. Наприклад, якщо ввести у форму пошуку «порівняти населення Нью-Йорка та Сан-Франциско» англійською, то Wolfram|Alpha відразу виведе на екран таблиці та графіки з порівнянням.

Чим краще

Цей сервіс краще за інших підходить для пошуку фактів і обчислення даних. Wolfram|Alpha накопичує та систематизує доступні в Мережі знання з різних областей, включаючи науку, культуру та розваги. Якщо в цій базі знаходиться готова відповідь на пошуковий запит, система показує його, якщо ні – обчислює та виводить результат. При цьому користувач бачить тільки нічого зайвого.

Навіщо це вам

Якщо ви, наприклад, студент, аналітик, журналіст або науковий співробітник, можете використовувати Wolfram|Alpha для пошуку та обчислення даних, пов'язаних з вашою діяльністю. Сервіс розуміє не всі запити, але постійно розвивається і стає розумнішим.

Що це

Метапошуковик Dogpile виводить комбінований список результатів з пошукових видач Google, Yahoo та інших популярних систем.

Чим краще

По-перше, Dogpile відображає менше реклами. По-друге, сервіс використовує особливий алгоритм, щоб знаходити та показувати найкращі результати з різних пошукових систем. Як стверджують розробники Dogpile, їх системи формує найповнішу видачу у всьому інтернеті.

Навіщо це вам

Якщо ви не можете знайти інформацію в Google або іншому стандартному пошуковику, пошукайте її відразу в декількох пошукових системах за допомогою Dogpile.

Що це

BoardReader - система для текстового пошуку за форумами, сервісами запитань та відповідей та іншими спільнотами.

Чим краще

Сервіс дозволяє звузити поле пошуку до соціальних майданчиків. Завдяки спеціальним фільтрам ви можете швидко знаходити пости та коментарі, які відповідають вашим критеріям: мові, даті публікації та назві сайту.

Навіщо це вам

BoardReader може стати у нагоді піарникам та іншим фахівцям у галузі медіа, яких цікавить думка масової з тих чи інших питань.

На закінчення

Життя альтернативних пошукових систем часто буває швидкоплинним. Про довгострокові перспективи подібних проектів Лайфхакер запитав колишнього генерального директора української філії компанії «Яндекс» Сергія Петренка.

Сергій Петренко

Колишній генеральний директор "Яндекс.України".

Щодо долі альтернативних пошукових систем, то вона проста: бути дуже нішевими проектами з невеликою аудиторією, отже без ясних комерційних перспектив чи, навпаки, з повною ясністю їхньої відсутності.

Якщо подивитися на приклади в статті, то видно, що такі пошукові системи або спеціалізуються у вузькій, але затребуваній ніші, яка, можливо, поки що, не виросла настільки, щоб виявитися помітною на радарах Google або «Яндекса», або тестують оригінальну гіпотезу в ранжируванні. яка поки що не застосовна у звичайному пошуку.

Наприклад, якщо пошук по Tor раптом виявиться затребуваним, тобто результати звідти знадобляться хоча б відсотку аудиторії Google, то звичайно звичайні пошукові системи почнуть вирішувати проблему, як їх знайти і показати користувачеві. Якщо поведінка аудиторії покаже, що помітній частці користувачів у помітній кількості запитів більш релевантними здаються результати, дані без урахування факторів, що залежать від користувача, то Яндекс або Google почнуть давати такі результати.

«Бути краще» у контексті цієї статті не означає «бути краще у всьому». Так, у багатьох аспектах нашим героям далеко до «Яндекса» (навіть до Bing далеко). Але кожен з цих сервісів дає користувачеві щось таке, чого не можуть запропонувати гіганти пошукової індустрії. Напевно, ви теж знаєте подібні проекти. Поділіться з нами – обговоримо.

CNN свого часу назвала Shodan «найстрашнішим пошуковцем інтернету». І навіть його назва справді звучить страшно. Незважаючи на те, що це було три роки тому, Shodan не надто розвинувся з тих пір. Для тих, хто не знайомий з Shodan: він шукає підключені до інтернету пристрої по всьому світу. Це поняття включає не тільки комп'ютери і смартфони, він також може знайти вітрові турбіни, світлофори, пристрої зчитування номерних знаків, холодильники і практично всі інші пристрої з підключенням до Мережі.

Не варто забувати про те, що багато з цих пристроїв, якими ми користуємося щодня, не мають захисту. Отже, такий пошуковик – мрія хакера. Shodan не єдина пошукова система такого типу. У цій статті ми розглянемо ще чотири пошукові системи, що орієнтуються на пошук вразливостей. Можливо деякі з них вам знайомі.

Спочатку давайте дізнаємося більше про Shodan.

Shodan

Рисунок 1. Пошуковик Shodan

Нагадаємо, що Shodan далеко не новий, але пошуковик, що постійно оновлюється. Його назва є відсиланням до SHODAN, персонажа із серії ігор System Shock. Найпоширеніший запит у цей пошуковик - "Server: SQ-WEBCAM" - показує кількість підключених в даний момент IP-камер. Якщо ви намагаєтеся скористатися Shodan вперше, введіть цей топовий запит і перегляньте, що вийде.

Основна причина, через яку Shodan вважається хорошим пошуковцем для хакерів, полягає у типі інформації, яку він здатний надати (наприклад, типи з'єднання). Незважаючи на те, що подібну інформацію можна знайти і в Google, ви повинні використовувати для цього вірні умови пошуку, які завжди очевидні.

Ще один з найпопулярніших запитів у Shodan – «пароль за замовчуванням». Ви будете здивовані, як багато пристроїв перераховані у пошуковій видачі за цим запитом. Сподіватимемося, що вашого там немає, але якщо є, краще змініть пароль.

Shodan є досить корисним, якщо ви шукаєте більш конкретну інформацію. Хороший приклад: зробити пошук за запитом «SSH port:’22’». Ви побачите безліч пристроїв, що працюють за SSH та використовують порт 22.

У результатах видачі ви також можете побачити IP-адресу, розташування та порти, які використовує пристрій.

Також Shodan зазвичай показує деякі особливості кожного пристрою, наприклад: MAC-алгоритми, алгоритми шифрування, алгоритми стиснення.

Якщо ви помітили, що інформація про ваш пристрій, яку ви не хотіли б оприлюднити, з'явилася в пошуковій видачі Shodan, варто замислитись над тим, щоб пропатчити його. Для тестерів ця інформація така ж важлива, як для хакерів.

Звичайно, і для звичайного користувача, який не є хакером або тестером, цікаво буде досліджувати Shodan і подивитися, яка інформація видається в ньому.

Ще один із лякаючих запитів - "port: '6666'' kiler", який знаходить пристрої, заражені трояном KilerRat.

Рисунок 2. Троян KilerRat

KilerRat – троян, що надає віддалений доступдо зараженого комп'ютера. Він може красти облікові дані, змінювати записи в реєстрі, отримувати доступ до веб-камери користувача.

PunkSPIDER

Рисунок 3. Пошуковик PunkSPIDER

На перший погляд, PunkSPIDER не виглядає великою і серйозною пошуковою системою, особливо в порівнянні з Shodan. Але їхні цілі схожі. PunkSPIDER є системою для пошуку вразливостей у веб-застосунках. У його основі лежить PunkSCAN, сканер безпеки. PunkSPIDER може шукати вразливості, схильні до таких типів атак: міжсайтовий скриптинг (XSS), сліпа SQL-ін'єкція (BSQLI), Path Traversal (TRAV).

Навіть якщо ви поняття не маєте, що являють собою ці види атак, ви все одно можете використовувати PunkSPIDER для перевірки свого сайту на вразливості.

Ось приклад результату для запиту сайт:

Scanned: 2016-08-11T20:12:57.054Z

Bsqli:0 | sqli:0 | xss:0 | trav:0 | mxi:0 | osci:0 | xpathi:0 | Overall risk:0

Перший рядок відображає домен. У другому рядку показано дату та час, коли домен був доданий у систему PunkSPIDER. У третьому рядку можна побачити список різних типіватак і були виявлені вразливі до цих атак місця.

Якщо ви зробите узагальнені запити, використовуючи терміни на кшталт «блог», « соціальні мережі», «Форум» або «Порно», ви отримаєте сотні результатів. Той факт, що сайт відображається у видачі, ще не означає, що він заражений. Для більш гнучкого використання PunkSPIDER можна скористатись спеціальною довідкою.

Також можна перевірити, як це працює із сайтами в мережі Tor. Якщо ввести в пошук ".onion", ми отримаємо 588 результатів. Незрозуміло, чи вони інфіковані чи ні, але це можна перевірити.

IVRE

Рисунок 4. Пошуковик IVRE

Пошуковик IVRE, на відміну від Shodan чи PunkSPIDER, створений для хакерів, програмістів, тестерів. Навіть використання головної консолі цього пошукача потребує базових знань мережевих технологій.

Так що ж є IVRE (Instrument de veille sur les réseaux extérieurs)? Насправді це відкритий вихідний код, написаний на Python з MongoDB. Використовує такі інструменти, як Bro, Argus, NFDUMP та ZMap для виведення даних про підключені до інтернету пристрої. IVRE також підтримує можливість імпорту даних у форматі XML із Nmap та Masscan.

Головний сайт IVRE надає результати сканування Nmap, які можна відсортувати, використовуючи ключові слова (у цьому сенсі є схожість із Shodan). Ось кілька ключових слів, які можна спробувати: "phpmyadmin", "anonftp", "x11open". Таким чином, фільтр «phpmyadmin» повертає пошукові результати по серверах phpMyAdmin, «anonftp» шукає FTP-сервери, що надають анонімний доступ, «x11open» шукає відкриті сервери X11. Це, може, і не є революційним відкриттям, однак, якщо витратити деякий час і зрозуміти принцип та особливості роботи IVRE, можна виявити, наскільки корисним є пошуковик.

Приклад нижче показує результати пошуку за ключовими словами «phpmyadmin» та «sortby:endtime».

Рисунок 5. Пошукова видача IVRE

Тим, хто хоче знати більше про технічні особливості IVRE, рекомендується відвідати їх GitHub. Також можна почитати їх, хоча він давно не оновлювався.

ZoomEye

Малюнок 6. Головна сторінка пошуковика ZoomEye

ZoomEye, як і його аналоги, шукає підключені до інтернету пристрої та вразливості. Але перш ніж ви скажете «ми це вже проходили», давайте розберемося, у чому його особливості.

За ZoomEye стоять розробники з Knownsec Inc, китайської компанії, що працює в галузі безпеки, що знаходиться в Пекіні. Перша версія цього пошукача була випущена в 2013 році, а остання відома під назвою ZoomEye 3.0.

Знову ж таки, отримати з роботи з цією пошуковою системою більше користі можна, якщо ви знаєте конкретні рядки та ключові слова для пошуку того, що вам потрібно. Ось кілька прикладів:

Apache httpd- Знаходить результати для HTTP-серверів Apache.

device:"webcam"- Знаходить список веб-камер, підключених до Інтернету.

app:”TED 5000 Power use monitor”- Знаходить список моніторів The Energy Detective (TED).

ZoomEye, як і Shodan, дозволяє легко фільтрувати результати пошуку країною, громадськими пристроями, веб-сервісами і т. д. Якщо ж ви не знаєте, що саме шукати, пошукова система починає відображати популярні запити.

У деяких випадках пошук навіть за будь-яким випадковим словом може призвести до досить цікавих результатів. Наприклад, спробуйте пошукати за словом «zombie».

Censys

Зрештою, давайте подивимося на Censys. Він, як і описані вище пошукові системи, шукає пристрої, підключені до інтернету. Censys збирає дані, використовуючи ZMap та ZGrab (сканер прикладного рівня, який працює за допомогою ZMap), та сканує адресний простір IPv4.

Можете поекспериментувати із Censys. Ось кілька прикладів, які можна використовувати для пошуку:

https://www.censys.io/ipv4?q=80.http.get.status_code%3A%20200 - цей запит дозволяє здійснити пошук усіх хостів з певним кодом стану HTTP.

Також можна ввести до пошуковий рядок IP-адреса, наприклад "66.24.206.155" або "71.20.34.200". Крім того, Censys може виконувати повнотекстовий пошук. Якщо ви введете "Intel", ви знайдете не тільки пристрої Intel, але й хости із записом "Intel" у реєстраційних даних. Як і в більшості пошукових систем, ви можете використати логічні оператори"and", "or" та "not".

Знову ж таки, ця інформація для того, щоб ви знали, з чого почати. Далі, впізнаючи поступово систему, ви знайдете набагато корисніші функції.

Як щодо посібника з експлуатації?

Робота з більшістю цих пошукових систем потребує трохи практики, перш ніж вони стануть дійсно ефективними інструментами. Але буде цікаво просто подивитися, як вони працюють та які результати видають.

Для тих, хто давно не новачок, ці пошукові системи можуть стати потужними інструментами. Дуже корисними вони можуть бути і розробників.

Так що якщо пошукові запити "SMTP server" або "APC AOS cryptlib sshd" викликають у вас усмішку розуміння, вам настійно рекомендується спробувати всі вищезазначені пошукові системи.

Слово «гуглити» вже давно стало синонімом фрази «шукати інформацію в інтернеті». Причиною цього є монопольна позиція Google. Щоденно він відповідає на 3,5 млрд. запитів.

Багато російськомовних користувачів не здогадуються про існування альтернативних пошукових систем, хіба що крім Яндекса і Майл ру.

Але у світі є й інші популярні пошукові системи. Багато з них є не менш зручними та цікавими, а часом навіть безпечнішими.

Розглянемо такі пошукові системи світу:

• Bing;
• Yahoo!;
• Baidu;

Bing

Bing.com – відомий пошуковик інформації від Microsoft. Натомість Bing є старим ворогом Google. Іноді конкуренти звинувачують Бінг у "списуванні", а відразу після його релізу з'явилися жарти типу "Bing Is Not Google" (Бінг не Google).

Пошуковик Bing коректно шукає як інформацію, так і картинки. А ще він непогано оформлений – щодня на головній сторінці змінюються теми. Або теми можна самостійно міняти за допомогою стрілок.<» (назад) или «>» (вперед), які знаходяться у нижньому правому кутку пошукача.

Рис. 1 Пошуковик bing

З Bing справді приємно працювати, але навряд чи його можна назвати повноцінною альтернативою Гуглу. Адже він також збирає інформацію про користувачів, хоча Microsoft, у свою чергу, запевняє, що вона зберігається на їхніх серверах трохи більше півроку.

Yahoo!

Yahoo.com по праву можна назвати пошуковою системою-ветераном. Він був заснований 20 років тому двома аспірантами Стендфордського університету – Джеррі Янгом та Девідом Файло. На даний момент він посідає почесне друге місце серед пошукових систем (якщо не враховувати китайську пошукову систему Baidu). Портал пропонує своїм користувачам довгий перелік продуктів та сервісів (наприклад, e-mail, новини, погода).

Рис. 2 Пошуковик Yahoo!

У 2008 році компанія Microsoft хотіла купити Yahoo! за 44 млрд. доларів, але отримала відмову. Зараз вони все ж таки співпрацюють, тому що пошук на порталі здійснюється за допомогою системи Bing.

Duckduckgo.com – повноцінна альтернатива Google. Ця пошукова система інформації позиціонує себе як найбільш конфіденційну пошукову систему.

Свого часу команда пошукача навіть організувала велику плакатну акцію під назвою Google слідкує за тобою. Ми – ні». Гугл не зміг проігнорувати це і відповів: "На жаль, DuckDuckGo грає на страхах людей і пропонує неповну інформацію, аби привернути до себе увагу".

Рис. 3 Пошуковик DuckDuckgo

Особливістю системи DuckDuckGo є те, що вона відмовилася від використання «бульбашки фільтрів». Це означає, що пошуковик пропонує вам не тільки ту інформацію, яку вважає за потрібну, а всю, що в нього є. Таким чином, на двох різних ви отримаєте однаковий перелік відповідей на запити, а не як під час пошуку в Гуглі.

Китайський пошуковик Baidu

Baidu.com є лідером серед пошукових систем Китаю і входить до п'ятірки основних пошукових систем світу. Результати пошуку включають картинки і відео.

Китайський пошуковик має свій антивірус та онлайн-енциклопедію, яка називається Байдупедія. Вона була заснована в 2006 році і вже встигла випередити китайську версію Вікіпедії за кількістю статей.

Рис. 4 Китайська пошукова система Baidu

Baidu поки що існує тільки в китайській та японській версіях, тому навряд чи його можна назвати зручним для російськомовного користувача.

Ecosia.org є досить незвичайною пошуковою системою. Її девіз: "Ecosia - зелений пошук".

Рис. 5 Пошуковик ecosia

Спільно з іншими користувачами пошукової системи (число яких на даний момент становить 2 250 710 осіб) Ви можете зробити свій внесок у висадку дерев у Бразилії.

Компанія, яка на даний момент складається лише з 10 співробітників, віддає 80 відсотків своїх доходів на підтримку бразильського парку Тумукумаку. За рік (період із серпня 2013 по серпень 2014 року) завдяки Ecosia було висаджено 556 841 дерево. Звіти щомісяця публікуються на веб-сайті пошуковика.