Як зробити свій пошуковик або моє ходіння по граблях

Багато новачків в сфері «вебмастерінга» (назвемо це так) в якийсь момент знаходять «геніальну» ідею, «а не замутити мені свій пошуковик ?! продавати рекламу, рубати бабло! ». Зізнаюся, було і у мене таке ... 3 рази.

Пошуковик по рунету - вбивця Яндекса

Назбирав посилань по тематиці, став вивчати, перелопатив все, що виявив по Апорт і Яндексу. Скачав кілька безкоштовних движків з павуками, але «знань» не вистачило, навіть щоб їх просто поставити. Голота на вигадки хитра: взяв скрипт каталогу (без бд, на txt файлах), з пошуком по базі сайтів і став наповнювати його сайтами: спочатку сам, потім найняв модератора. І що б ви думали? Зрозуміло, затія провалилася, але з`явилися ідеї, які вилилися пошуковик по книгам, про нього - далі.

Пошуковик по книгам

Покопавшись в немногічісленних партнерках рунета (2004-2007 роки приблизно), взяв дві книжкових: Колібрі і Болеро, причина вибору проста - в обох випадках з партнерського інтерфейсу можна було викачати бази даних з товарами цих магазинів. Інформації в базах було мало: назва книги, автор, адреса на сайті магазина. Але цього вистачило щоб створити каталог + пошуковик. Причому по книгам видавалися і анотації (Парс в режимі реального часу з сайтів магазинів, так, про кешуванні я тоді й гадки не мав, так само як і не користувався автоматичним перенаправленням ...).

Книжковий пошуковик успіхом не користувався, але каталог приносив тони нафти трафіку з Яндекса, відповідно продажу книг. Більшість покупок були з доставкою поштою, післяплатою, тому надходжень на рахунок чекати доводилося місяцями ... Пошта Росії.

вбивця Гугла

Основний напрямок моєї роботи було в «буржунеті», зокрема працював з PPC, переважно з ЮМАКС, а тому в якості «движка» для наступного пошукача вибрав їх фид. Озброївшись php (а точніше переробивши парсери книжкових каталогів), навчився додавати до видачі додаткову інформацію відповідно запитом користувача, картинки і т.д (прям як зараз почав робити Гугл# 128578; ).

І тут сталося прекрасне. Пошуковики: МСН (нині - Бінг) і Гугл почали індексувати результати видачі «мого пошукача» і радувати трафіком, який в свою чергу щедро оплачувалася ЮМАКС.

І поки колеги клепали Дори, я клепав такі пошуковики: різні дізи, різні джерела для додаткової інформації. Навіщо робити Дори і перенаправляти трафік на фід, ризикуючи потрапити в бан через редиректу, коли можна робити, наприклад, тематичні міні-сайти, без редиректу? Білі дорвеи, здається так зараз їх прийнято називати. Ідилія тривала недовго - менше року. Зміни алгоритмів на початку на мсн, потім і у Гугла поховали подібні рішення (точніше, зробили їх куди менш ефективними).

Десь під час краху «системи» в мсн, я «з горя» взяв один з забаннених доменів - adne.info і переніс на нього блог, який раніше вів то на якомусь форумі, то в рамках сайту рекламного агентства.

3 рази! 3 рази наступав на схожі граблі: деякі люди не вчаться навіть на власних помилках :)