Коротка історія пошуку і як Google вийшов на перше місце

Після спроби полюбити Bing, заграючи з поліпшеною конфіденційністю DuckDuckGo, і (затвор) навіть намагаючись зрозуміти, чи був Yahoo краще, ніж минулого разу, коли я використовував його (близько 2004 року), я все ще не можу знайти кращий варіант для онлайн-пошуку, ніж чинний чемпіон Google.


Розблокуйте чит-лист «Кращі поєднання клавіш пошуку Google» прямо зараз!

Це підпише вас на нашу розсилку

Введіть адресу електронної пошти

[] [] [] [] розблокування

Прочитайте нашу політику конфіденційності

Розрив скорочується, але в кінцевому підсумку Google як і раніше залишається корінним через релевантність результатів, швидкість, з якою індексуються сайти і виконуються пошуки, і їх постійного поштовху, щоб стати ще краще.

Після півдюжини (або більше) невдалих спроб протягом багатьох років знайти кращу альтернативу, це змусило мене спробувати розшифрувати те, що робить Google краще, ніж конкуренти в цьому просторі.

Ось що я знайшов.

Коротка історія пошукових систем

По-перше, я відчуваю, що, можливо, варто поглянути на деякі технології, які наводять пошукові системи, і компанії, які отримали нас тут.

Створення Арчі (1990)

Арчі вважається першою пошуковою системою. Незважаючи на здається примітивністю зараз, Арчі був інструментом, який індексував загальнодоступні FTP-сайти, намагаючись дозволити користувачам знаходити конкретні файли. Це була всесвітня павутина, тому вам потрібно було отримати доступ до серверів Archie за допомогою локального клієнта або через Telnet., який є мережевим протоколом, який дозволяє з'єднувати два комп'ютери в одній мережі.

Арчі стимулював інновації в додаткових технологіях, які працювали аналогічним чином, таких як Вероніка і Джугхед, VLib, Gopher та інші. Ці технології були піонерами пошукової індустрії, хоча їх швидко замінили більш просунуті технології.

Мандрівник Всесвітньої павутини (1993)

Створений 1993 року World Wide Web Wanderer був першим ботом, створеним для індексації веб-сайтів і автоматичної вставки їх у базу даних. Wandex, як виявилося, почав як спосіб вимірювання розміру мережі, підраховуючи активні сервери по всьому світу, щоб виміряти зростання. Замість цього він став зразком для сучасних веб-павуків, які несуть відповідальність за сканування мережі з метою індексації її вмісту.

Excite (1993)

Excite був проектом шести студентів бакалаврату в Стенфордському університеті, який намагався використовувати статистичний аналіз відносин загальною мовою, щоб поліпшити релевантність в індексації. Excite - тоді відомий як Architext - використовував журналістів для написання коротких оглядів веб-сайтів для підвищення зручності використання порівняно з більш примітивними пошуковими системами і каталогами на основі посилань.

Пошуковий бум (1994)

1994 був, мабуть, найбільшим роком в історії пошукових систем. Через 12 місяців ми побачили запуск Infoseek, AlceVista, WebCrawler, Yahoo! і Lycos.

  • Infoseek: дозволяє користувачам відправляти свої веб-сторінки в режимі реального часу і автоматично індексує їх на основі категорій користувача.
  • AltaVista: перша пошукова система, яка використовує необмежену пропускну здатність, дозволяє пошукові запити природною мовою і використовує модифікатори пошуку для підтвердження результатів.
  • WebCrawler: перший сканер, який проіндексував цілі сторінки, а не тільки заголовки або заголовки та описи.
  • Lycos: перша пошукова система для сортування за релевантністю. Lycos також постійно мав найбільшу базу зберіганих сайтів, і на піку (близько 1996 р.) сервіс сканував і проіндексував понад 60 мільйонів веб-сайтів.

Пошукові системи протягом цього періоду часу (і через кілька років) активно використовували мета-теги, які містили елементи заголовка, опису та ключових слів, додані веб-майстром на веб-сайт. Ці теги, а також щільність ключових слів у тексті веб-сайту були основними факторами ранжування, які допомогли павукам правильно ідентифікувати і проіндексувати контент.

Це також відкрило двері для веб-спаму, оскільки перші експерти з SEO швидко навчилися маніпулювати цією системою, вставляючи ключові слова в теги і контент неприродним чином, намагаючись розіграти систему.

Запитай/Запитай Дживса (1997)

Ask - і їх служба Ask Jeeves - використовували редакторів-людей, щоб спробувати включити популярні пошукові запити користувачів в списки як партнерських, так і платних сайтів включення. Служба використовувала автоматизацію у формі системи ранжування DirectHit, яка намагалася ранжувати сайти за популярністю, але вони виявили, що цим занадто легко маніпулювати, і кілька років потому припинили використовувати движок.

MSN / Bing (1998/2009)

MSN запустила свою власну пошукову систему, щоб оцінити успіх інших продуктів Microsoft і перейти до пошуку в Інтернеті. Пошукова система використовувала Overture, Looksmart та інші платні каталоги для включення результатів пошуку, поки Google не довів успіх своєї моделі зворотних посилань.

Цей доказ концепції з боку Google призвів до того, що в 2004 році MSN прийняла аналогічну стратегію, хоча і не таку.

У 2009 році MSN перейменував у Bing і поліпшив інтерфейс користувача, включивши в нього вбудований пошук (підказки, які з'являються в міру введення), контент, який з'являється на сторінці результатів пошуку (на відміну від необхідності натискати посилання на один з результатів пошуку).) і безліч нових функцій, розроблених для спрощення пошуку і підвищення його доступності.

Як Google став кращим (і чому він все ще є)

До кінця 90-х років пошукові системи стали практично непридатними для використання через актуальність (або її відсутність) результатів пошуку і поширеність веб-спаму. До його запуску в 1998 році і протягом півстоліття після цього конкуренти дійсно не мали відповіді на зростаючі проблеми, викликані веб-спамом і маніпуляціями з пошуковими системами, які в кінцевому підсумку стали називатися SEO (пошукова оптимізація).

Введіть Google.

Google почав як проект - відомий як BackRub - Ларрі Пейджем і Сергієм Бріном 1996 року. Метою цього проекту було революціонізувати пошук, використовуючи посилання як основний показник ранжування для підвищення релевантності. Теорія - відома як нотація цитування - оберталася навколо ідеї, що кожен сайт, пов'язаний з іншим сайтом, по суті висловлював свою впевненість у контенті, пропонованому на його сторінках. Ці посилання служили голосами, а якірний текст всередині посилання служив способом індексування сайтів на основі того, за що інші голосували за ці голоси.

Технологія була захоплюючою, і це змусило Бріна і Пейджа спробувати продати її конкурентам у світі пошуку за 750 000 доларів. На щастя, ніхто не був зацікавлений. Повертаючись до кресленої дошки, Пейдж і Брін продовжували вдосконалювати технологію, і до 2000 року Google стала найбільшою пошуковою системою в світі.

Як Google залишається на вершині

Адаптованість може бути кращим способом описати, як Google залишається найбільш використовуваною пошуковою системою в світі. Коли маркетологи і фахівці з пошукових систем вчаться маніпулювати системою, Google змінює її. Коли нові технології, такі як соціальні мережі, починають грати активну роль у наших розмовах, Google знаходить спосіб інтегрувати їх в алгоритм для підвищення релевантності. Коли змінюються звички пошуку, Google змінюється разом з ними.

Google постійно дивиться, аналізує і розвивається. Використовуючи величезні обсяги даних, які вони збирають від кожного з нас, що використовують свої продукти, вони можуть постійно надавати більш якісний, більш актуальний і зручний для користувача продукт, ніж будь-який з їх конкурентів.

Як виглядає майбутнє пошуку

Хоча Google знаходиться на вершині, і на горизонті, схоже, немає конкурентів, здатних змістити їх, в Інтернеті все швидко змінюється. Ось що Google та інші роблять для підвищення релевантності наших результатів пошуку як зараз, так і в найближчому майбутньому.

Розуміння намірів і семантики користувача

Пошукові системи, включаючи Google, використовувалися для надання результатів залежно від того, наскільки добре запити відповідали веб-сторінкам. Тепер Bing, Google і Yahoo! всі намагаються поліпшити свої результати, ґрунтуючись на розумінні сенсу, що стоїть за ними, відомого як семантичний пошук

Наприклад, якщо користувач шукає «Кращі морепродукти» - результати минулих років будуть залежати від того, який веб-сайт вважається найбільш авторитетним для цих ключових слів. Тепер пошукові системи роблять більший упор на розуміння того, що саме ви шукаєте, щоб вони могли надати найбільш оптимізовані результати. У цьому випадку користувач, швидше за все, шукає кращі ресторани морепродуктів поблизу або рецепти. Розуміння того, що через трильйони можливих пошукових запитів все ускладнюється.

Більше уваги на місці

Наведений вище приклад запиту про морепродукти є однією з основних причин, через яку місце розташування стає настільки важливим. Можливо, ви не шукаєте ресторани морепродуктів в Сан-Франциско, якщо ви живете в Сінгапурі (але якщо ви це робите, просто додайте «в Сан-Франциско» до вашого запиту). Пошук на основі місця розташування змінює все, оскільки всі основні пошукові системи тепер використовують ваше місце розташування для надання персоналізованих результатів для ваших пошуків.

Покращений мобільний досвід

2015 рік був першим в історії, коли мобільний трафік перевищив трафік ноутбуків і настільних комп'ютерів, і все ще залишається тенденція зі швидким рухом вгору. Насправді, велика частина інтернет-трафіку зі смартфонів пов'язана з пошуком. Через мінливий час, в який ми живемо, важливо надати користувачам мобільних пристроїв бездоганну мобільність.

Google робить це, випускаючи новий мобільний алгоритм, який приховує сайти, які не відображаються належним чином на мобільних пристроях. Ця алгоритмічна зміна стосується тільки мобільного трафіку, але вона повинна збагатити досвід мобільних користувачів і прокласти шлях до подальших мобільних інновацій.

Yahoo! ще одна велика пошукова система з упором на мобільні пристрої. Генеральний директор Марісса Майєр (колишня співробітниця Google) змістила акцент на Yahoo! для того, щоб розставити пріоритети для мобільних пристроїв в якості основного засобу відновлення актуальності.

Графік знань

Bing і Google значною мірою вкладають кошти у використання своїх величезних баз даних для швидкого надання інформації за конкретними ключовими словами і фразами. Щоб поліпшити взаємодію з користувачем, обидва намагаються виключити додаткові кроки, які користувач повинен зробити, щоб знайти інформацію, і замість цього покладаються на технологію графа знань.

Наприклад, фільми, імена знаменитостей або запити, пов'язані з місцем розташування, тепер містять інформацію про запит у верхній частині сторінки. Для швидкого пошуку це може позбавити вас від додаткових кроків, пов'язаних з необхідністю заглибитися в результати або відвідати кілька сайтів, щоб знайти інформацію.

Це має велике значення для мобільних пристроїв, а також для голосового пошуку (наприклад, Siri або Google Now), оскільки більшість пошукових запитів - це швидкі спроби отримати інформацію, а не вичерпні пошукові запити.

Пошук нових способів покращення алгоритмів

Пошукові системи постійно воюють одна з одною, а також невідомі, які ховаються прямо за рогом. У прагненні бути кращими, кожен з них повинен швидко і з високою віддачею отримати результат. Таким чином, алгоритми у всіх основних пошукових системах постійно змінюються, намагаючись випередити криву і знайти нові метрики, які можуть призвести до кращих результатів.

Одним з найбільш яскравих прикладів цього може бути оцінка довіри на основі знань., ґрунтуючись на патенті Google. У той час як Google прямо заперечує будь-який намір використовувати цей патент у своєму алгоритмі пошуку в найближчому майбутньому, його наслідки величезні. Якщо ви коли-небудь отримували невірну інформацію після онлайн-пошуку, ця нова система скорингу може змінити все це шляхом ранжирування сайтів на основі результатів у сховищі знань Google (сховища фактів, витягнутих з проіндексованого контенту) і їх відповідності.

Зрештою, спроба передбачити, як виглядають технології пошукових систем за межами наступного року або двох, є вищою вправою в марноті. Проте, це повинно продовжувати наближати нас на один крок ближче до епохи, коли ми зустрічаємося з відповіддю на будь-яке питання майже миттєво.

Чи є краща пошукова система, ніж Google? Що робить це краще? Які технології або зміни, пов'язані з пошуком, вам найбільше подобаються в найближчому майбутньому? Вимкніть звук у коментарях нижче. Я хотів би почути вашу думку!