Как собрать качественную базу каталогов?
Я думаю абсолютное большинство людей причастных к seo знакомы с такой деятельностью как регистрация сайта в каталогах. В 2005 году я написал и опубликовал на форуме forum.searchengines.ru простенькую инструкцию, как собрать базу каталогов. Сейчас я решил выложить обновленную актуальную версию той статьи.
Итак. Для сбора базы и дальнейшей работы с ней вам понадобится AllSubmitter. Моя статья основана на работе именно с этой программой, и если у вас нет AllSubmitter`a, то учтите что часть статьи может быть вам не совсем понятна.
Часть 1-я. Сбор начальной базы.
Как вам известно AllSubmitter обучаемая и самообучаемая программа. Для того чтобы создать довольно объемную базу каталогов с возможностью авто-регистрации нужно не так уж и много времени и усилий. Для начала давайте соберем перую базу каталогов. Нажмите кнопочку «Добавить с SE» и соберите базу каталогов по каким-либо характерным признакам. Допустим мы используем такие фразы:
- автомобильный каталог
- белый каталог
- белый каталог ресурсов
- белый каталог сайтов
- белый каталог ссылок
- бесплатный каталог
- бесплатный каталог сайтов
- добавить в каталог
- добавить ресурс в каталог
- добавить сайт в каталог
- добавить ссылку в каталог
- добавление в каталоги
- добавление новой ссылки в каталог
- добавление ссылки в каталог
- зарегистрировать в каталоге
- зарегистрировать сайт в каталоге
- интернет каталог
- каталог add
- каталог без обратной ссылки
- каталог интернет магазинов
- каталог интернет ресурсов
- каталог компаний
- каталог магазинов
- каталог онлайн
- каталог организаций
- каталог ресурсов
- каталог сайтов
- каталог сайтов ссылок
- каталог сайтов яндекс
- каталог серверов
- каталог ссылок
- регистрация в каталоге
- регистрация в каталоге бесплатно
- регистрация сайта в каталоге
- регистрация сайта в каталоге бесплатно
- тематические каталоги
- тематический каталог сайтов
Отпарсив поисковые системы по этим фразам мы получим список объемом в несколько тысяч url-ов.
Теперь можно создать какой-нибудь проект и начать его полуавтоматическую регистрацию по этому списку. Средняя скорость качественной ручной регистрации 1000-1400 каталогов за рабочий день. То есть через несколько дней у вас будет база очищенная от всяческого мусора.
Большинство каталогов по которым хоть раз была удачна проведена ручная регистрация становятся «автоматическими», то есть доступными для регистрации в автоматическом режиме. А AllSubmitter впредь при поиске формы добавления на отпарсенных каталогах будет стараться присваивать новым каталогам статус «авто», на основе их анализа по признакам уже автоматических каталогов.
Часть 2-я. Увеличиваем базу.
Тут от вас потребуется немного наблюдательности и знание языка поисковых запросов Яндекса.
Присваивать новым каталогам статус «авто» у AllSubmitter`а получается благодаря тому, что у них схожая архитектура, или они основаны на одном и том же движке, что и уже автоматические каталоги. Чтобы увеличить автоматическую базу — надо уметь распознавать признаки однотипных каталогов, и создавать на их основе запросы к поисковым системам.
Пример: имеется несколько каталогов на базе движка CNCat. Их объединяет кусок адреса страницы добавления сайта cncat_add.php
Итак чтобы получить список известных Яндексу каталогов на базе движка CNCat нам надо задать ему следующий запрос: inurl:cncat_add.php.
Так, анализируя признаки, мы можем вытащить из Яндекса большинство однотипных каталогов сайтов.
Часть 3-я. Увеличиваем базу благодаря языку запросов Яндекса
Как известно, в большинстве случаев, за 1 раз Яндекс отдает максимум 1000 результатов. К счастью даже самые распространенные однотипные каталоги обычно не превышают 1000 шт на одинаковом движке.
Однако существуют запросы не являющиеся признаком какого-либо конкретного движка, например запрос «Добавить сайт». Как вы можете видеть Яндекс находит 11 млн ответов на этот запрос, но вам удастся получить максимум 1000 из них.
Как быть?
Тут нам приходят на помощь сложносоставные запросы основанные на языке запросов Яндекса. В предыдущем пункте мы с вами уже разобрались как работать с признаками каталогов, теперь давайте попробуем их комбинировать.
- «Добавить сайт» inurl:add 55 тыс. ответов
- «Добавить сайт» inurl:add.php 3692 ответа
- «Добавить сайт» inurl:add.html 2112 ответов
- «Добавить сайт» inurl:add.pl 4 ответа
- «Добавить сайт» title:(Добавить сайт) inurl:add 6894 ответа
- и т.д.
Ну вы поняли, да?
Эпилог.
Надеюсь вы нашли в этой статье для себя что-то новое и полезное. Применение этой техники позволяет мне уже несколько лет обладать актуальной базой объемом более 15.000 каталогов с возможностью автоматической регистрации.
P.S. Господа, не забывайте о карме и душевном спокойствии, используете чужие каталоги — поддержите баланс сил, создайте свой.
Метки: базы, каталоги, парсинг, продвижение, тИЦ.
