Привет уважаемые читатели seoslim.ru! Сегодня у нас будет интересный пост, в котором мы с вами будем парсить поисковую выдачу с помощью программы Key Collector.
Кто-то скажет, что здесь такого, добавляешь интересующий запрос, жмешь «Начать сбор» и ждешь, пока программа проанализирует левую колонку Yandex.Wordstat.
Ключевое слово здесь ждешь, так как если запрос ВЧ или СЧ и вы хотите выбрать все ключи, то ждать придется нереально долго, полюс Яндекс будет требовать от вас периодически вводить капчу.
Как вариант семантическое ядро можно вытянуть у конкурентов, однако узнать точную частотность конкретных слов с неизменными окончаниями все равно проще через Key Collector.
Ладно если получилось немного запросов, а если их будет 3000 или 20 000? Представляете сколько придется потратить времени, чтобы программа смогла собрать все данные? Для того, чтобы облегчить себе жизнь опытные вебмастера используют прокси, а если они еще будут качественные, то процесс сбора данных ускорится в несколько раз.
Поэтому давайте ниже я наглядно покажу, как происходит сбор СЯ для сайта в программе Кей Коллектор без прокси и с ними.
Парсинг поисковой выдачи без Прокси
Теперь можно запустить программу Кей Коллектор, задать нужные параметры парсинга и начать сбор запросов.
Какие вносить правки в настройки софта каждый решает сам, например, если не знаете какой из пунктов за что отвечает, можно перейти на официальную страницу и почитать FAQ, где все очень подробно расписано.
Лично у меня Key Collector работает следующим образом.
В разделе «Общие» выставлены такие значения.
В разделе «Yandex.Wordstat» обратите внимание на количество выставленных потоков, их 1, так как будет использован основной IP-адерс без прокси.
Обязательно добавляем аккаунт от Яндекса, чтобы собирать данные в Yandex.Direct.
Здесь обратите внимание на формат ввода логина и пароля от аккаунта, я выбрал самые первый способ.
Даже после проделывания всех манипуляций, во время сбора данных нам иногда будет показываться капча, которая будет тормозить весь процесс.
В таких случаях не надо жалеть пару центов, подключить любой из сервисов антикапчи, чтобы капчу разгадывали за вас другие люди.
Для этого переходим в раздел «Антикапча» — «Автораспознавание», далее отмечаем один из сервисов, в моем случае это ruCaptcha, предварительно пополняем баланс, после чего указываем Key.
Если все сделано правильно, внизу страницы появится статус антикапчи с актуальным балансом вашего аккаунта.
Настойки завершены, после этого открываем окно, пакетный сбор фраз, вводим ключевое слово или группу запросов и начинаем сбор.
Ради эксперимента я ввел десяток запросов и засек время.
На выполнение задачи, программа затратила почти 10 минут и собрала 803 ключа.
Теперь представьте сколько нам надо потратить времени на обработку нескольких тысяч поисковых запросов, а ведь еще надо проверить точную частотность, конкуренцию в Гугл и Яндекс по каждому слову.
Настройка Key Collector и парсинг с Прокси
Не будем о грустном, теперь давайте посмотрим, как собирается статистику всё тот же Кей Коллектор только уже с использованием прокси.
Первым делом нам понадобятся сами прокси, приобрести их можно на сайте proxy-seller.ru, так как нам нужны надежные и относительно недорогие IP.
Минимальный срок пользования прокси 1 неделя, давайте возьмем 5 штук.
После регистрации на сайте и оплаты тарифа на почту придут прокси, а также порт, логин и пароль для их авторизации.
Аналогичная информации будет в личном кабинете, где можно видеть период их действия.
Теперь можно возвращаться в настройки программы для парсинга Key Collector.
Первое, что надо сделать это отметить галочкой пункт «Использовать прокси-серверы».
Далее жмем добавить из буфера и вводим полученные ранее айпишники в формате адрес:порт@логин:пароль
Теперь самое важное, это проверка добавленных IP на блокировку Яндекс Вордстатом. Для чего выбираете все добавленные адреса (отмечаете чекбокс), указываете один поток и жмете проверить в Wordstat.
Если все хорошо АйПи должны подсвечиваться зеленым цветом.
Если они остались красными, тогда смотрите журнал событий в Кей Коллекторе, там будет написано, что не срабатывает.
Мне помогла решить эту проблему очистка куков и кэша всех браузеров. Но может быть и дело в самих прокси, в случае чего стоит обратиться в службу поддержки и вам их заменят.
Почти все готово, осталось только для каждого proxy добавить аккаунт Yandex.
Для этого предварительно регистрируем новые акки и выбираем в программе вкладку Яндекс Директ — Добавить списком.
И вводим их через такой формат #ipадрес:порт:ipлогин:пароль:yandexлогин:yandexпароль
В этом же окне спускаемся немного вниз и указываем количество потоков, равное количеству добавленных прокси. Также снимаем галочку использовать основной IP.
Тоже самое количество потоков надо выставить и в окне настроек Яндекс Вордстат.
На этом все, можно сохранять изменения и переходить к окну сбора запросов.
Для чистоты эксперимента указываем тоже самое количество запросов, что и без прокси и смотрим как быстро программа, справится с задачей.
На этот раз Кей Коллектор справился менее чем за 3 минуты, собрал столько же запросов и даже не пришлось вводить капчу.
Как видно ускорение парсинга очень хорошее и это только на 10 ключах, а теперь представьте если их будет 20, 30, 100 или 10 000?
Имея всего 5 IP адресов мы получаем экономию по времени более чем в 3 раза, однако с увеличением числа запросов, экономия будет еще больше. Главное помнить о том, что прокси должны быть качественными, тогда не придется вводить капчу.
Понятное дело, что нет нужды платить за использование proxy каждый день, многие, в том числе и я делают так. Когда создается семантическое ядро, для этого достаточно кропотливой работы на несколько дней, максимум месяц.
Покупается аккаунт в Serpstat, чтобы собрать запросы конкурентов и покупаются прокси, чтобы не тратить время на длительный сбор частотности и дополнительных ключей.
После того, как у вас будет несколько тысяч слов, можно переходить к кластеризации и не спеша день за днем все разбирать по группам и формировать разделы сайта и будущие статьи.
На этом у меня все, надеюсь данный пост вам был полезен.
Программа Кей Коллектор у нас есть, но вот пользоваться ею я теперь умею благодаря вашей статье Максим))
Кей Коллектор отличная программа. Я ключевые слова подбираю только с помощью её.