Парсинг ключевых слов

Собственные системы аналитики

Собственные счетчики и системы аналитики позволяют собирать списки ключевых слов, по которым люди уже заходили на сайт. Самые популярные из них, и бесплатные:

— Google Analytics
Не покажет зашифрованные запросы Яндекса, а также скроет многие ключи, по которым люди переходили из Google, но какой-то полезный список ключевых слов все же можно получить. При связи с панелью для вебмастеров можно получить больше информации по запросам.

— Яндекс.Метрика
Статистика переходов и ключевых слов из Яндекса и других поисковиков, в том числе из Яндекс.Картинок.

— LiveInternet
Полезно использовать вместе с другими системами аналитики, чтобы собирать как можно больше данных.

Сервисы поисковых систем

Поисковики предоставляют собственные бесплатные сервисы для анализа и подбора ключевых слов.

— Яндекс Вордстат
Подбор ключевых слов от Яндекса. Можно задавать регион и искать связанные слова, смотреть популярность запросов.

— Рамблер Вордстат
Статистика по запросам от Рамблера. Можно выбирать период и проверять сезонность запросов. Также позволяет узнать популярность запроса в разных странах и российских регионах.

— Keyword Planner от Google
Подбор запросов от Google. Можно настроить поиск не только слов из органики, но и видео-запросов с YouTube.

— Статистика запросов от Mail.ru
Реальные запросы в Mail с демографической статистикой. Хорошо показывает, что некоторые высокочастотные фразы не такие уж высокочастотные.

— Тренды Google
Поиск трендовых (быстрорастущих) запросов, текущих, за период или в разных странах.

— Google Correlate
Поиск слов, коррелирующих с заданным. Производится на основе поведенческих данных (одинаковой активности пользователей по разным запросам).

Готовые оффлайн и онлайн базы

Готовая база ключевых слов – также хороший источник семантики. Все базы обычно платные.

— База Пастухова [платная]
База русскоязычных ключевых слов с данными по количеству запросов в Яндексе и цене кликов в Бегуне. Автоматизированные фильтры и разные функции для работы со списками ключевиков через программный интерфейс.

— UP Base [платная]
Русская и английская базы ключевых слов из различных доступных источников, очищенные от мусора. Программа имеет ряд требований и ограничений.

— Мутаген [платная]
Онлайн-база, где можно подобрать эффективные ключевики. Показывает для запросов уровень конкуренции, имеет API.

— KeyBooster [платная]
Хранит запросы, которые люди парсили из вордстата сервисом «Магадан».

— RooStat [платная]
База запросов из Рунета для интеграции в свой софт. Ежемесячные обновления.

Сервисы анализа конкурентов

Эти сервисы предназначены для анализа конкурентов и имеют широкий функционал, в том числе здесь можно быстро составить семантическое ядро, основываясь на семантике заданных сайтов.

— АДВСЁ [платная]
Статистика поисковой рекламы в Яндексе и Google. Подбор семантики, исходя из конкретных сайтов (поиск запросов, по которым эти сайты размещают контекстную рекламу).

— advODKA [платная]
Анализ ключевых слов, по которым показываются объявления сайта, видимость домена в ТОП20 Яндекса и Google (регионы «Москва» и «Питер») с различной статистикой.

— SpyWords [платная]
Анализ семантики сайтов-конкурентов, поиск уникальных запросов видимости домена в поиске (по московскому региону), по сравнению с другими заданными доменами.

— SemRush [платная]
Собирает ТОП20 Google и Bing по 100 млн. запросов. Удобный инструмент для тех, кто продвигает сайт под русскоязычный или зарубежный Google.

— Prodvigator [платная]
Анализ украинского, российского, болгарского и казахстанского Google, а также поисковой выдачи Яндекса (Мск) по базе реальных запросов. Быстрая выборка не только поисковых запросов, но и подсказок.

— TopVisor [платная]
Парсинг контекста (Яндекс, Гугл), поисковых подсказок (в т.ч. из Mail и Спутника) или выгрузка ключевиков из панели для вебмастеров или системы аналитики для анализируемых проектов.

— Spy Fu [платная]
Подбор англоязычных запросов для зарубежных проектов. Итоговая статистика имеет параметр сложности продвижения запросов.

— Keyword Eye [платная]
Просмотр конкурентости заданных англоязычных ключевых слов в виде облака. Формирование предложений (выгрузка из готовой базы по заданной фразе).

— SimilarWeb [условно бесплатно]
Отображает разные параметры сайта, в том числе, по каким запросам он получает трафик из органического поиска или контекста.

— Alexa [условно бесплатно]
Подобный сервису SimilarWeb. В бесплатной версии можно узнать лишь 5 трафиковых запросов сайта. Берет данные из своего тулбара.

Специализированные сервисы подбора семантики

— keywordtool.io [бесплатно]
Удобная альтернатива AdWords Planner. 750 предложений для каждого ключевого слова, основанные на подсказках Google для разных языков (83 доступных языка) и регионов (192 домена Google). Подбор семантики из YouTube, AppStore и Bing.

— fastkeywords.biz [условно бесплатно]
Поиск по базе ключевых слов. Имеет возможность задавать маску, чтобы находить слова с разными окончаниями. Неизвестно, как часто обновляется.

— actualkeywords.com [платная]
Поиск по готовой базе англоязычных ключевых слов, готовые тематические подборки.

— keywords.megaindex.ru [бесплатно]
Подбор ключевых слов для сайта от MegaIndex. Неудобно, но бесплатно.

—wordtracker.com [платная]
Популярный зарубежный инструмент анализа ключевых слов.

—ubersuggest.org [бесплатно]
Парсер поисковых подсказок Google. Можно задать язык и вертикаль поиска – например, спарсить семантику из поиска по изображениям или новостям.

—wordpot.com [бесплатно]
Бесплатный подбор англоязычных запросов.

—words.elama.ru [бесплатно]
Удобный подбор поисковых запросов. Правда нет возможности экспортировать список.

—keywordtooldominator.com/k/amazon-keyword-tool/ [бесплатно]
Семантика из интернет-магазина Амазон. Очень удобный инструмент для сбора коммерческих (транзакционных) запросов.

Программы для работы с семантическим ядром

— Key Collector [платная]
Многофункциональная программа под Windows для работы с семантическим ядром.

— Yandex Wordstat Helper [бесплатно]
Расширение для Mozilla Firefox и Google Chrome, ускоряющее сбор ключевых слов в Яндекс.Вордстате.

— export.yandex.ru/inflect.xml [бесплатно]
Склонятор ключевых слов от Яндекса.

— Mystem [бесплатно]
Программа от Яндекса для морфологического анализа текста на русском языке. Можно использовать для приведения ключевых слов в нормальную форму.

— Магадан [платная]
Парсер ключевых слов Яндекс.Директа (Вордстата). Помогает составлять семантическое ядро и подготавливать рекламные кампании.

— tools.k50project.ru/lemma/ [бесплатно]
Лемматизатор для лингвистических экспериментов. Приведение ключевых слов к нормальной форме.

— kg.ppc-panel.ru [бесплатно]
Создание групп запросов по общим вхождениям. Удобный и простой инструмент.

— Макрос от Devaka [бесплатно]
Макрос для OpenOffice, упрощающий классификацию поисковых запросов.

devaka.ru

Ищите его в «Магадане»

Магадан – не только далекий город, это и онлайн парсер-программа для собирания ключевых слов, а также статистического анализа запросов Яндекс. Экономит ваше время и деньги, очень удобна для специалистов, работающих с рекламным наполнением Яндекс.Директ, составлением семантического ядра веб-сайта. Парсер ключевых слов «Магадан LITE» имеет такие характеристики:

• автосбор ключевиков
• поддерживает запросы с восклицательными знаками, кавычками
• возможен поиск по базам данных, для собранных баз встроен браузер
• в наличии – фильтр для ключевых слов
• экспорт слов – в txt файл, импорт – в собственную базу.

Скачать парсер Магадан для сайтов и научиться с ним работать можно на официальном сайте.

Чистка, перемешивание, генерация от KeyWordKeeper

Аналогичная, тоже бесплатная автоматическая программа, незаменима при массовой обработке ключевиков. Вот ее главные преимущества:

• элементарная и просто чистка, перемешивание сайтов;
• удаление повторений и генерация перестановок;
• разбивка и объединение файлов;
• KeyWordKeeper не требует установки.

«Пингвин»: фильтрует мгновенно

Еще один из таких инструментов называется «Penguin».

• Производит онлайн парсер ключевых слов в любых количествах, практически моментально, даже если таковых много.
• Простой и доступный в пользовании, единственное, что непременно следует учесть, – это установить на компьютере объемную оперативную память.

Отличительные черты «Пингвина», признанного одной из самых полезных вещей этого рода, – это его возможности:

• удалять дубли и перемешивать списки «ключей»;
• сортировать (по длине, алфавиту);
• ограничивать (по количеству символов, слов);
• добавлять, заменять либо удалять их; р
• аботать с фильтрами, списками слов.

F-Checker Free

Парсер ключевых слов F-Checker Free отлично решает вопрос оценки результативности подобранных «ключей» для сайтов. Для этого существует специальный параметр, называемый KEI-keyword effectiveness index. Значимость ключевого слова прямо зависит от этого индекса. Парсер не игнорирует слова в кавычках, работает с фильтрами и списками, проверяет конкуренцию в Яндекс, данные Wordstat. Работает без установки.

К бесплатным системам статучета и анализа слов, используя которые пользователи находят сайты, принадлежат собственные списки «ключей». Например:

• Яндекс.Метрика.
• Google Analytics.
• LiveInternet.
• Google Correlate.
• Рамблер Вордстат и прочее.

Есть также базы, за которые требуется платить.

ijobtest.ru

Зачем нужен Kparser?

На официальном сайте найдете несколько полезных статей с описанием способов применения Kparser. Например:

• В Youtube — осуществляет подбор тегов и ключевых слов с «длинным хвостом» для видео, которые бы отлично охарактеризовали ролик и были максимально эффективны с точки зрения продвижения.
• Google — сбор подсказок под SEO и Adwords. Используя совместно сервисы Adwords Keyword Tool и Kparser, вы достигнете лучшего результата по выборке. Причем последний выдает в разы больше информации + доступен всем пользователями.
• Google Search Console — соединение данных из двух инструментов позволит улучшить показатели органического трафа. Собирайте релевантные подсказки для тайтлов/текстов имеющихся страниц либо делайте новые под ключевые запросы с хорошим потенциалом.
• Определяйте минус слова под ваши Adwords и Direct кампании.
• Google Search Trends — ищите трендовые направления для создания актуального контента + формируйте через Kparser фразы с длинным хвостом.
• eBay + Amazon — по аналогии с Youtube и другими нишевыми продуктами  рассматриваемый проект помогает определять релевантные ключи и поднять ваш товар повыше в выдаче.

Советую хорошенько изучить все эти инструкции, т.к. там весьма детально рассмотрены ситуации, в которых Kparser позволит выжать максимум из того или иного сервиса. К сожалению, пока что информация представлена только на английском.

Возьмем к примеру Youtube…

По правилам хорошей оптимизации ролика вам нужно:

• придумать наиболее релевантный ключевой запрос для видео;
• использовать его в имени загружаемого файла, заголовке и других элементах на странице;
• создать хорошее описание с вашими ключевиками и похожими по смыслу фразами;
• добавить запросы в теги, по которым должны находить данное видео;
• напоследок поделитесь роликом во всех своих социальных аккаунтах и, возможно, попросите об этом друзей либо закажите небольшую рекламу — надо постараться сделать своего рода вирусный эффект после публикации.

Теги для видоса — очень важны. Если их не указываете, то получите нулевую оценку параметра vidIQ. С заполненными полями результат явно получше:

Теги добавляются дабы поисковики понимали о чем ваше видео и, соответственно, по каким запросам в Youtube оно будет ранжироваться.

Если у вас новый канал, старайтесь использовать менее конкурентные ключевики с длинным хвостом — так больше шансов побороться за трафик. Популярным авторам есть смысл вклиниться в борьбу по крутым тегам. Найти подходящие варианты вам как раз и поможет текущий инструмент.

tods-blog.com.ua

После прочтения статей вы научитесь: оптимизировать кампании в Excel методами, которые используются в оптимизаторах конверсий; автоматически собирать семантику, сегментировать и создавать объявления; прогнозировать конверсию на базе истории и многое другое.

Темы статей:

1. Выгрузка данных из Google Analytics и Яндекс Метрики по API
2. Парсинг ключевых слов в Key Collector
3. Кластеризация запросов
4. Агрегирование данных
5. Прогнозирование конверсии для ключевых слов
6. Расчет ставок
7. Разработка заголовков
8. Разработка рекламных кампаний
9. Анализ эффективности

Материал сложный и раскрывает только базовые подходы к автоматизации, чтобы задать вам вектор развития.

В прошлой статье мы получили список запросов с конверсиями из Яндекс Метрики, которые теперь нам предстоит распарсить входящие запросы. Парсить будем входящие ключевые слова с частотностью менее 2000, но более 30 запросов в месяц по России.

Что мы делаем?

1) У нас есть запросы с конверсиями, которые нам нужно расширить

2) Мы берем запросы с конверсиями и парсим их входящие запросы, которыми мы их потом и расширим 3) То есть мы создаем базу входящих ключевых слов, из которой подтянем похожие слова к словам с конверсиями. Если слово будет входить в одну группу с фразой с конверсией, то мы его «подтягиваем». 4) На практике можно использовать не только входящие слова, но и любые другие, базу слов можно «расширять» бесконечно, вы ограничены только ресурсами кластеризации. В рамках статьи мы взяли только входящие запросы, чтобы не усложнять ее.

Парсим частотность запросов в Key Collector. Используем прокси с сайта primeproxy.net . Сайт проверенный, вы нам поверьте, мы парсим в промышленных масштабах!

Цены

Вставляем полученные прокси в настройки, как на скринах. К каждому IP нужно закрепить аккаунт в Яндекс Директе. В нашем случае мы купили 5 прокси и сможем парсить в 5 потоков. Вставляем адреса в соответствующие поля.

И сюда.

Вставляем слова в Key Collector

Запускаем парсинг

Фильтруем список ключевых слов от 50 до 2000, чтобы распарсить их в вордстате.

Почему именно такие цифры? — Меньше 30 собирать слова нет смысла, их там очень мало — легче просто охватить их задав широкое соответствие, а свыше 2000 слишком много, потребуется много ресурсов на кластеризацию и немного другой подход, который усложнит статью.

Тут одна проблема, у нас 1500 ключевых слов, которые включают входящие запросы и получается так, что мы будем парсить один и тот же массив несколько раз, например, у нас есть слова «купить игрушку танк» и «купить игрушку». Нам не смысла парсить «купить игрушку танк», так как она находится внутри «купить игрушку».

Но как из массива 1500 удалить входящие слова? Готовых решений нет, поэтому пришлось написать свой код на Python.

  
  #!/usr/bin/env python  # -*- coding: UTF-8 -*-    # импортируем библиотеки  import pandas as pd  import re    # открываем таблицу  df = pd.read_excel('Слова для парсинга в вордстате.xlsx', header=0)    # в столбике delete пишем delete для входящих ключевых слов  df.loc[:,'delete'] = 0  for i in range(len(df)):   temp = df.loc[i,'delete']   t = df.copy()   for word in df.loc[i,'Keyword'].split(' '):   t = t[t['Keyword'].str.contains(word)]   for idx in t.index:   df.loc[idx,'delete'] = 'delete'   df.loc[i,'delete'] = temp    # сохраняем таблицу в файл  df.to_excel('Слова для парсинга в вордстате.xlsx')    

На выходе получаем новый столбик «delete», в котором значение «0» значит верхний запрос, а «delete» входящий — все входящие запросы мы удаляем, а верхние распарсиваем в wordstat’е

Фильтруем слова со значением «0» и копируем их в кей коллектор, получилось 1000 слов из 1500.

Вставляем в KeyCollector

Для парсинга используем настройки, которые на скрине — мы изменили кол-во потоков на 5, так как у нас 5 прокси и для каждого свой аккаунт в Яндекс Директе.

Все, парсинг запущен, в следующем этапе поговорим о прогнозировании.

Пишите вопросы в комментариях, какие темы было бы интересно раскрыть подробнее? Если у вас есть идеи или советы, то делитесь!

1jam.ru

Источники и инструменты сбора поисковых запросов

Для сбора ключевых слов существует много возможностей. У каждой есть свои плюсы и минусы. Ниже я привел наиболее популярные, на мой взгляд, инструменты.

• Поисковые системы
• Яндекс
• Google
• Mail
• …….
• Парсеры
• Кей Коллектор – keycollector.ru
• Datacol
• A-Parser
• …….
• Облачные сервисы
• Rush-Analytics.ru
• Just-Magic.ru
• Topvisor.ru
• SemRush.ru
• ……
• Базы поисковых слов
• Pastuhov.com – базы Пастухова
• MOAB – moab.pro
• …….
• И еще достаточно много других достойных сервисов.

Как собирать ключевые слова

Для Рунета основным источником ключевых слов является сервис Wordstat от ПС Яндекс.

Запросов от Google, как правило, получается гораздо меньше и поэтому они чаще используются на этапе сбора базовых запросов. Как результат, в подавляющем большинстве случаев парсят Вордстат и этого бывает вполне достаточно.

Если же у Вас какая-то узкая ниша и надо обеспечивать максимальную полноту, тогда можно подключать сервисы Google и/или базы запросов.

Процедура парсинга запросов в облачных сервисах проходит довольно просто. Например, для Rush-Analytics необходимо задавать следующие параметры:

• Настроить проект в сервисе.
• Установить региональность.
• Выбрать пункт «Собрать ключевые слова».
• Загрузить список Базовых Запросов.
• Загрузить список минус-слов, если они у Вас уже есть.
• Инициировать работу парсера по сбору ключевых фраз.

Более наглядно этот процесс можно увидеть в этом небольшом видеоролике.

У меня первый прогон обычно используется для формирования списка минус слов. Выгружаю полученный результат и методом пристального взора составляю список таких слов.

Второй прогон, с учетом собранных минусов, уже будет более результативным и список ключей будет содержать гораздо меньше мусорных запросов. Тем не менее мы опять просматриваем полученные ключи, чистим мусор, пополняем список минус-слов и у нас все готово для следующего шага — сбора подсказок.

Плюсы и минусы работы с Кей Коллектором

Еще один вариант – сбор парсером KeyCollector (КК). Эта программа покупается один раз, причем по вполне сходной и доступной цене, а затем используем бесплатно.

При больших объемах КК очень сильно подгружает Ваш ПК, да и скорость сбора данных у него низкая. Поэтому мощность компьютера, на котором Вы хотите парсить большие объемы должна быть соответствующей.

Для настройки многих операций сбора КК может потребовать определенных умственных усилий и хлопот при подключение разных аккаунтов, прокси-серверов, работе с капчей и т.п.

Но без этого получить данные без ощутимых материальных затрат не получится.

Я использую KeyCollector при работе над СЯ в основном на этапе чистки собранных ключей от мусора, дублей и т.п..

Дополнительные варианты подбора запросов

Можно собирать запросы и руками, используя для этого тот же Вордстат. Но при профессиональной работе это приведет к большим временным затратам, да и качество будет заметно хромать.
Такой способ подходит для подбора ключей на одну страницу, можно назвать экспресс методом для быстрой оценки ситуации.

Для сайта более целесообразно воспользоваться средствами автоматизации. Вы получите качественный результат гораздо быстрее и за сравнительно небольшие деньги.

Базы ключевых слов Пастухова, MOAB и другие используются реже, поскольку данные в этих базах не успевают обновляться так быстро как в Вордстат. Но в некоторых случаях, когда собранных запросов в облачных сервисах недостаточно, то подключают данные и из этих источников.

P.S. Облачные сервисы, к которым относятся Just-Magic, Rush-Analytics, TopVisor и другие собирают запросы быстро и не загружают Ваш компьютер. Но при больших объемах данных сумма за оказанные услуги будет довольно большой.

Поэтому, с точки зрения финансов и времени, Вам придется определяться самим. Если есть возможность переложить денежные затраты на Заказчика, то облачные сервисы будут гораздо уместнее. Если же Вы хотите заработать эти деньги, то тогда придется вложиться в покупку мощного ПК, программы КейКоллектор и освоить работу с этим парсером.

inetmkt.ru

Каждый кто имеет свой собственный блог или сайт, неоднократно слышал как важен качественный и уникальный контент. Я не спорю, так и есть, но это далеко не всё, что необходимо для того чтобы посетители приходили к вам на сайт. Ещё один немало важный, если не менее важный момент, это правильно подобранное ключевое слово. 

Практически все веб мастера знают что такое семантическое ядро, это набор ключевых слов под которые будут писаться статьи и по которым будет продвигаться сайт или блог. Естественно, неправильно составленное семантическое ядро, серьёзно навредит вашему проекту.

Правильно составить семантическое ядро, нам поможет бесплатная программа словоёб. Хоть она немного и урезанна по функционалу, не имея столько возможностей как KeyCollector, для начинающего вебмастера её вполне хватит. Начинать работу с словоёбом, необходимо с его настройки.

Настройка программы словоёб

Для того чтобы попасть в настройки, необходимо нажать на значок «шестерёнку», в левом верхнем углу. 

В общих настройках по умолчанию всё установлено оптимально, единственное, надо изменить значение во вкладке «Таймауты». Увеличив время задержки между запросами в Wordstat. Я ставлю от 10000 до 15000 мс. Делается это для того чтобы сервис Wordstat не заблокировал ваш IP. И снизить количество повторных попыток с 10 до 2. 

После перейдите во вкладку «Yandex.WordStat», где произведём основные настройки. 

1. В пункте «Глубина парсинга» ставим 0, если поставить например 2, то после окончания основного парсинга начнётся глубинный анализ по каждому ключевому слову. Это, во первых очень долго, во вторых есть шанс блокировки IP.

2. Второй пункт «Парсить страниц» означает какое максимальное число страниц, программа будет парсить. Ставим 500, так как некоторые запросы очень популярны и содержат очень большое количество запросов.

3. «Добавлять в таблицу слова с частотностями» я поставил от ста до тысячи. Программа начнёт парсить слова с частотностью от 1000 показов в месяц на убывание, закончится парсинг ключевым словом в 100 показов.Эта настройка индивидуальна, ставьте те параметры которые необходимы вам.

4. В пункт «Настройки аккаунтов Яндекс», необходимо ввести логин вашего аккаунта, зарегистрированного в поисковой системе Яндекс, поставить двоеточие и прописать пароль. Советую ставить несколько аккаунтов. Внимание, не вводите свои личные аккаунты, во избежании блокировки. Зарегистрируйте новые, специально для программы словоёб.

5. В заключении нажмите кнопку «сохранить изменения».

Теперь когда мы сделали необходимые настройки, остаётся разобраться как работать с словоёбом. Далее я покажу вам как подобрать хорошие ключевые слова.

Парсинг ключевых слов в программе словоёб 

Для примера, я буду парсить запрос «создать сайт». Чтобы начать парсинг, откройте программу и создайте новый проект, нажав на кнопку «Создать новый проект». 

После, необходимо указать стоп слова. Это очень нужная функция предусмотренная в программе, с её помощью отфильтровываются ненужные запросы. Я укажу «купить» и «скачать». Тем самым избавлюсь от запросов, содержащих в себе эти слова. Для этого нажмите на кнопку «Стоп-слова» 

Впишите их и нажмите «Применить список при сборе в Yandex.Wordstat». 

Теперь когда стоп слова вписаны, кликните по кнопке «Левая колонка Yandex.Wordstat». 

В открывшемся окне, добавляем фразу которую собираетесь парсить, я напишу «создать сайт», далее необходимо нажать «Парсить с Yandex.Wordstat». 

После того как закончится парсинг, мы наблюдаем вот такую таблицу с поисковыми запросами.

Всего в таблице получилось 365 запросов, естественно много из них ненужные, их надо отфильтровать. Выделите их галочкой, затем в окне программы кликните правой кнопкой мыши и выберите пункт «Удалить отмеченное». 

На отфильтрованные запросы, необходимо собрать количество точных вхождений. То есть, узнать сколько раз набирали в поисковике именно этот запрос.

Для этого в меню программы словоёб, надо нажать кнопку «Частотности Yandex.Wordstat», и выбрать пункт Собрать частотности»!». 

В итоге мы видим вот такую таблицу, чем выше число точных вхождений, тем выше качество запроса. Как видите, некоторые слова имеют малое количество точных вхождений, они являются «пустышками». И продвигаться по ним, я не рекомендую.

Этих двух колонок, мне хватает для сбора качественных ключей. Но на этом возможности программы не заканчиваются, так же, можно парсить правую колонку, определить сезонность и другие параметры запросов, экспериментируйте. 

Далее, я проверяю конкурентность в поисковой выдаче Яндекса, анализируя топ сайтов, по данному запросу. Кстати можете почитать о том Как настроить браузер Яндекс

Ну а у меня всё, если вы ещё не пользуетесь словоёбом для составления правильного семантического ядра, самое время начать. 

normalnet.ru

Парсинг Вордстат

Начинаем парсить вордстат. Жмем кнопки как на скрине, в поле добавляем список полученных запросов для парсинга. Обратите внимание, что в парсинг вордстата лучше добавлять предварительно составленные исходные слова со знаками плюс (+) перед предлогами. При парсинге остальных сервисов плюсы нужно убирать.

Парсинг Гугл Адвордс

Предварительно регистрируемся в Гугл Адвордс. При парсинге программа обращается к сервису https://adwords.google.com/ko/KeywordPlanner/

Вручную через интернет эксполрер открываете этот сервис, устанавливаете ваше местоположение.

При настройке парсинга выбираете либо «Не менять настройки аккаунта» — тогда будет учитываться местоположение. Либо выбираете «Без учета местоположения».

Я в основном использую «Без учета местоположения», после ненужные ключевые слова все равно отфильтровываются. В каких-то частных случаях можно использовать местоположение (возможно, при рассчете бюджетов на контекстную рекламу в регионе).

Поисковые подсказки

Очень много хороших запросов собирается через поисковые подсказки. Через них собираются запросы длиннее 7 слов (которые например в Яндекс Вордстат не отображаются). Встречаются очень траффиковые запросы длиннее 7 слов, поэтому я рекомендую собирать все.

В целом тут все просто, только не рекомендую собирать подсказки с Ютуба.

 

Сервис Sape.Wizard

Дает немного хороших ключей. Тут есть 2 интересующие нас функции — «Сбор расширений ключевых фраз» и «Анализ доменов».

В сбор расширений ключевых фраз пихаем начальный список запросов. Жмем «начать сбор».

 

После того как сбор закончится можно использовать «Анализ доменов» — берем топовые сайты в вашем регионе, вставляем, жмем «Начать сбор». Сервис подберет тематичные ключевые слова.

 

Сервис Rookee

Тут почти так же как с Wizard.Sape. Сначала включаем «Сбор расширений ключевых фраз».

Потом «Составление семантического ядра».

Остальные сервисы

Есть еще Рамблер Адстат (иногда не работает, дает мало ключей), Майл Ру — тоже дает мало ключей. Их тоже стоит использовать, думаю что не нужно отдельно пояснять как их парсить — вставляем исходные ключи, жмем «Начать сбор».

Платные сервисы — SpyWords, SEMRush, Мутаген и Серпстат. Их не буду рассматривать т.к. ключей они дают не намного больше и эта статья нацелена на то, чтоб с относительно небольшими затратами собрать побольше запросов.

Остальные источники запросов

Яндекс Метрика

Если у вас в аккаунте есть сайт нужной тематики — можно выгрузить оттуда ключевые слова.

Если делать вручную. Заходим в дашборд своего сайта. Жмем «Отчеты — Стандартные отчеты — Источники — Поисковые фразы».  Выбираем побольше период. Если сайт моложе года, то просто жмем «Год». Если старше — вручную выбираем больший период.

Получаем табличку, из которой берем фразы и вручную добавляем список в Кей Коллектор.

Если через Кей Коллектор.

Жмем иконку. Нужно авторизоваться в Яндексе, затем выбираем площадку откуда хотим скачать ключевые фразы, выбираем период побольше, жмем «Получить данные».

Яндекс Вебмастер

Заходим в аккаунт, выбираем интересующий сайт. Жмем «Поисковые запросы», жмем «История запросов», жмем вкладку «Популярные запросы». Выбираем период дат побольше.

Внизу будет кнопка «Архив» — кликаем, скачивается архив запросов по которым сайт имел видимость за выбранный период.

Файл будет формата .csv. Если у кого-то через Эксель открываются кракозябры, то открываем файл через Notepad++, меняем кодировку файла на ANSI, открываем снова в Экселе — должно стать все нормально.

Чтоб выделить именно запросы без всякой левой информации в Экселе выбираем вкладку «Данные», там жмем иконку «Текст по столбцам» и разбиваем на столбцы с разделителем запятая. Получим отдельно столбик с фразами, которые добавляем в Кей Коллектор.

Google Search Console

Если вы добавляли сайт в Гугл, то там тоже можно скачать немного запросов. Идем сюда https://www.google.com/webmasters/tools/search-analytics, выбираем нужный сайт, ищем «Анализ поисковых запросов», выбираем период дат побольше. Внизу будет кнопка «Скачать».

Тоже возможны неудобства с кодировкой — делаем все как описано выше с ключами из Яндекс Вебмастера.

Базы ключевых слов

Еще один хороший источник поисковых запросов — базы ключевых слов. Самая крутая на мой взгляд из бесплатных — Букварикс. Из платных есть базы Пастухова, МОАБ, Амазин Кейвордс и другие.

 

nigilist.pro

Работа с семантикой и другими факторами внутренней оптимизации сайта – сейчас один из основных трендов, и вряд ли что-то изменится в ближайшие годы.

Как показывает практика, при хорошо спроектированной структуре и грамотно оптимизированных под ключевые слова посадочных, положительный эффект для проекта не заставит себя долго ждать.

Но, сами понимаете, волшебной кнопки, которая позволила бы получить крутое семантическое ядро одним кликом, пока еще не придумали. Поэтому, чтобы собрать как можно больше ключей, и привести их в удобный для использования вид, придется потратить немало времени и одним инструментом тут вряд ли обойдется.

В этом посте я решил сделать подборку сервисов и софта для подбора ключевых слов, которые сам так и или иначе использую в работе.

У каждого из них свои особенности, и какой использовать в качестве основного – это уже вопрос личных предпочтений.

Key Collector

Наверное, самая известная программа для таких целей, о которой слышал каждый, кто имеет дело со сбором семантики.

Key Collector позволяет парсить ключевые слова из различных источников (Wordstat, AdWords, веб-аналитика, поисковые подсказки и т. д.), определять частотность запросов, фильтровать их, группировать, удалять дубли, снимать позиции и оценивать по нескольким десяткам различных параметров.

В плане функционала это самый настоящий «комбайн», что, правда может вызвать замешательство у новичка, у которого глаза разбежаться от всего обилия кнопочек и меню.

Программа обновляется каждые несколько дней, разработчики быстро реагируют на любые изменения в подключаемых сервисах.

Помимо широкого спектра возможностей, одно из основных преимуществ Key Collector – доступная цена. На данный момент стоимость программы составляет всего 1700 рублей.

Rush Analytics.ru

Инструмент для автоматизации сбора и группировки ключевых слов, основное преимущество которого по сравнению с Key Collector и другими десктопными программами – отсутствие привязки к конкретному компьютеру.

Для работы с семантикой доступны такие основные инструменты как парсинг запросов через Wordstat, сбор поисковых подсказок и продвинутая кластеризация.

Вся работа осуществляется на стороне сервера, а значит, отсутствует необходимость в мощном компьютере (если работа ведется с ядром в десятки тысяч ключевых слов) и получить доступ к результатам можно дома, в офисе, да и вообще где угодно.

Кроме этого, пользователь Rush Analytics получает еще ряд преимуществ:

• огромная экономия времени: до 100 ключевых слов в секунду через Wordstat, до 200 поисковых подсказок и кластеризация до 10 000 ключевых слов за 10 минут;
• нет необходимости использовать прокси-сервера и антикаптчи;
• функционал стоп-слов позволяет удалять ненужные запросы на лету;
• любая глубина сбора поисковых подсказок;
• продвинутый алгоритм кластеризации с классификацией запросов по типам (информационные или коммерческие) и автоматическим подбором посадочных;
• а также ряд других полезных опций.

Правда стоит такое удовольствие не бесплатно: по 0,03 за сбор слов по Wordstat и определение частотности, 0,01 р. за фразу из подсказок и 0,5 р. за кластеризацию ключевого слова. В ближайшем будущем создатели сервиса планируют переход на модель оплаты по подпискам.

Букварикс

База ключевых слов, в которой более 1,5 миллиарда слов и фраз русскоязычного сегмента Интернета. Как уже понятно из названия, основная особенность программы – отсутствие необходимости каждый раз парсить запросы с нуля, об этом за вас уже позаботились разработчики. Что изрядно сэкономит время.

Букварикс предназначен, прежде всего, для выборок, и содержит только минимально необходимые функции для фильтрации. Поэтому, лучше всего использовать программу в сочетании с Rush Analytics и Key Collector, для постобработки. Данные можно экспортировать в .txt и .csv.

Данные по Wordstat представлены в двух вариантах – широкое и точное соответствие – однако, это информация на момент актуальной сборки базы, и я бы рекомендовал дополнительно перепроверять частотность.

Основной аргумент в пользу использования Букварикса – программа совершенно бесплатна, и, похоже, будет оставаться таковой в ближайшем будущем.

База Пастухова

Наверное, самый известный продукт такого рода в Рунете, который будет полезен для любого вебмастера. Доступно несколько вариантов базы – русская (1,57 миллиарда ключевых слов), английская (1,3 миллиарда ключевых слов) и русская база подсказок (3 миллиарда запросов и связей между ними).

Правда, в отличие от Букварикса, который обновляется ежемесячно, апдейт базы Пастухова осуществляется всего 1-2 раза в год.

Вполне логичный вопрос – зачем нужна база Пастухова, если есть бесплатный Букварикс? Все дело в том, что здесь доступны куда более широкие возможности для создания выборок и фильтрации ключей. Например, можно делать выборки и сортировки по числовым данным (количество запросов), количеству слов в фразе и т. д.

Еще одно важное преимущество – с недавних пор доступны онлайн-версии баз, что, во-первых, позволяет не зависеть от конкретного компьютера и его мощностей. Ну а во-вторых, делает базу кроссплатформенной, так что владельцы MacBook и прочих линуксов, теперь тоже в теме.

В общем, для обычного фрилансера может быть и дороговато, но, для тех, кто работает с крупными проектами и семантикой большого объема, инструмент очень полезный. На данный момент, весь комплект баз можно купить за $200.

База ключевых слов MOAB

Еще одна база ключевых слов, создатели которой, похоже, решили побить все рекорды по объемам. В нее входят 3,2 миллиарда запросов из Яндекс.Метрики, 6 миллиардов запросов из подсказок Яндекса и более 2 миллиардов запросов из подсказок Google по EN/USA.

Основное отличие MOAB от других баз – ключевые фразы, которые в нее входят, получены путем парсинга всех открытых счетчиков Метрики, которые были закрыты Яндексом в конце января 2015 года. В конце декабря 2014 года разработчики MOAB успели спарсить все это добро, до того как одна из последних лазеек была закрыта.

Учитывая особенности MOAB, основные ее плюсы и минусы легко определить. Ключевое преимущество – возможность получить запросы, по которым идет реальный трафик. Да еще и с такими данными как количество визитов, количество просмотров, поисковая система, показатель отказов, глубина просмотра, время на сайте.

Минус – база устаревает, и явно не подходит для трендовых тематик или тех ниш, которые появились относительно недавно.

Например, вряд ли получится собрать по ней семантику по запросам связанным с Apple Watch, так как сам девайс появился на рынке только в апреле 2015 года.

Пользоваться MOAB можно по модели подписок — от 250 р. до 1000 р. в месяц.

SpyWords.ru

Порой, секрет успеха бывает довольно простым – подсмотреть, как там все работает у конкурентов, и просто сделать лучше. Так и с подбором ключей для семантики – у сайтов конкурентов можно вытянуть очень «вкусные» запросы, до которых сам мог бы и не додуматься.

SpyWords.ru – сервис, который позволяет узнать запросы конкурентов в поиске и контексте, определить видимость доменов и отдельных страниц, отслеживать сниппеты и позиции в выдаче. Причем, он собирает данные и по Яндекс и по Google.

Можно собирать Топ доменов по определенному запросу, и выгружать ключи по ним в целом, или для конкретного URL, который показывается именно по этой фразе:

Очень полезная, кстати, возможность, если вы точечно собираете семантику под составленный заранее контент-план.

Микс из запросов на основе видимости конкурентов, с небольшой дошлифовкой вручную или при помощи других инструментов, может обеспечить отличные результаты.

Есть возможность находить конкурентов в поиске для своего сайта, сравнивать домены по пересечению фраз, и множество других полезных опций. Тарифных планов всего два: Pro за 1950 р., и Unlim за 4950 р. в месяц.

Keys.so

Сервис для анализа семантики сайтов конкурентов, который выводит данные по видимости домена в Рунете, охвату ключей и количеству запросов вплоть до Топ 50.

Позволяет собирать ключевые слова по домену в целом и отдельным его страницам, а также, имеет ряд уникальных функций. Например, можно по идентификатору Adsense ID и другим параметрам, «спалить» всю сетку проектов владельца интересного вам проекта.

На данный момент в сайте более 80 миллионов запросов и более 19 миллионов проанализированных сайтов. Внушительно, если учитывать, что речь идет конкретно о Рунете.

Может показаться, что это маловато на фоне баз с миллиардными объемами, однако, это то, что прошло фильтрацию разработчиками – зачищены дубли и удалены все ключи, годовая частотность которых меньше 10.

Конкуретный анализ позволяет найти домены, которые находятся в Топе выдачи Яндекса по нужным вам ключам. Особенно стоит обратить внимание на процент совпадений по ключевикам, ниже пример для сайта apple-тематики:

Таким образом, можно отсеять наиболее релевантные сайты и не отвлекаться на монстров типа otvet.mail.ru и Википедии, которые, наверное, показываются по запросам всех возможных тематик.

Serpstat.com

Многим он знаком еще под старым названием – «Продвигатор». После ребрендинга сервис позиционируется как инструмент для комплексной поисковой аналитики, направленной в первую очередь на анализ сайтов конкурентов.

В контексте подбора ключевых слов, стоит обратить внимание на такие возможности Serpstat как данные по видимости сайта в поиске, поисковые запросы по которым домен показывается в Топ-100 выдачи, возможность узнать, какие страницы домена наиболее популярны и какие публикации генерируют больше всего трафика.

При помощи пункта меню «Дерево сайта» можно экспортировать список страниц с наибольшей видимостью, списком ключей и их частотностью, в удобном для дальнейшего анализа, древовидном виде:

В суммарном отчете можно быстро ознакомиться с историей изменения видимость (способ найти быстро растущие проекты), узнать ближайших конкурентов и сравнить между собой несколько доменов.

Стоит отметить, что функционал подбора семантики составляет только часть из инструментов, а развитие Serpstat движется в сторону универсального сервиса.

Ориентирован он в первую очередь на работу с Google, данные по Яндексу доступны только для Москвы, Санкт-Петербурга и Украины. Стоимость тарифных планов – от $19 до $299 в месяц.

SemRush.com

Один из первых инструментов такого рода, ориентированный на вебмастеров работающих в первую очередь в англоязычном сегменте — под Google.

Аналитическая база по Google.ru у них тоже есть, но, явно уступает более узкоспециализированным аналогам типа того же SpyWords. А вот под бурж этот сервис вне конкуренции.

Анализ сайта при помощи SemRush позволяет получить такую информацию как:

• ключевые слова, по которым сайты конкурентов показываются в органическом поиске;
• динамика изменений видимости за определенный период времени;
• какие страницы показываются по тому или иному запросу;
• топ самых трафиковых и видимых страниц на сайте;
• различные данные по ключам, такие как трафик, количество запросов, уровень конкуренции, стоимость в Adwords и т.п.

Есть много интересных фишек, например, поиск сайтов-конкурентов и визуализация этих данных в виде карты:

В целом, сервис очень интересный и полезный. При стоимости базового тарифа в $69.95 за месяц, если вы работаете под бурж, его использование точно должно окупиться.

Keywordtool.io

Довольно простой инструмент для быстрого подбора запросов под Google или примерной оценки потенциала ниши, который можно рассматривать в качестве альтернативы Keyword Planner.

Бесплатная версия позволяет получить до 750 ключевых слов по любому из региональных поисков Google (com, ru, com.ua и т.д.), для разных языков, а также, запросы из статистики по YouTube, Bing, Amazon и App Store. Отдельно выводится вкладка с фразами вопросительного характера:

Минус, правда, в том, что, как видно на скриншоте, данные о частотности, стоимости клика и конкуренции, доступны только для PRO-аккаунтов (от $48 до $88 в месяц).

За эти деньги, конечно, можно найти куда более интересные решения, тем более, если вы работаете под бурж. Так что данный сервис я бы рекомендовал рассматривать только в качестве оценочного инструмента.

Подведем итоги

Внутренняя оптимизация и контент в наше время рулят. Думаю, с этим согласится каждый практикующий сеошник. А в основе всего этого, конечно же, лежат ключевые слова и грамотно составленная семантика.

Нужно понимать, что подбор ключевых слов сейчас, это куда больше, чем выборка на скорую руку в Wordstat или Keyword Planner. И если на первых порах это может занять довольно много времени, можете не сомневаться, в будущем это сильно упростить вам жизнь.

Трафик с поисковых систем можно получить гораздо быстрее и с куда меньшими усилиями, когда оптимизация страниц сайта проводится под правильные ключевые слова. А перечисленные в этой статье инструменты, помогут подобрать их куда быстрее и точнее, чем, если бы это делалось вручную.

Буду очень рад, если этот список оказался для вас полезным. Если есть чем дополнить статью, пишите в комментариях!

seoinsoul.ru