Мануал по использованию программы YaParser

Мануал по использованию программы YaParser

Возможности программы:

·  Парсит ссылки из выдачи Яндекса (включая подозрительные сайты, или без них);

·  Парсит статистику слов;

·  Парсит статистику запросов;

·  Сниппеты из выдачи Яндекса;

·  Рассчитывает KEI по заданной формуле;

·  Количество предложения в Я. Маркете;

·  Проверяет позиции сайтов в Яндексе по запросам;

·  Для обхода ограничений Яндекса использует задержку парсинга, сервис ;

·  +бонус – Искалка Бонусных Фрихостов!

Интерфейс программы YaParser

1.  Поле для ввода ключевых слов с возможностью добавления либо из буфера, либо из выбранного файла. «+» означает, что запросы из следующего файла необходимо добавлять в конец списка.

2.  Поле настроек парсинга (подробнее об этом далее).

3.  Настройки, Информация о выполнении задач(обновляется по ходу работы программы), Сайты для проверки позиций.

Настройка парсера

Перед началом использования парсера необходимо настроить его. Делаем следующее. В центрально части окна программы нажимаем кнопку View. Откроется страница настройки поиска Яндекса. ОБЯЗАТЕЛЬНО необходимо настроить следующие параметры:

Язык интерфейса – русский; Открывать найденные документы – Каждый в своем окне.

По желанию можно настроить следующие параметры:

Галочку «Показывать статистику слов»(если будете сбирать эти данные); Показывать N найденных документов; Уровень фильтрации, регион и т. д.

После настройки этих параметров жмем кнопку «Сохранить и вернуться к поиску» и далее настраиваем параметры парсинга: Регион (если нужно парсить региональную выдачу по городу, стране), Язык (если вдруг нужно искать страницы только на русском или другом языке), Дата обновления (например для поиска недавно проиндексированных сайтов)…

Далее вам нужно скопировать в буфер обмена адресную строку полученной страницы и нажать кнопку Set. Программа сама вытащит из буфера строку и разберет все установленные вами параметры парсинга.

Работа парсера YaParser

Парсер может сразу собирать все, что вы попросите по каждому запросу: ссылки, статистику запросов, статистику слов, число страниц, сниппеты и предложения в Я. Маркете. Для этого следует в Настройках поставить все галочки.

Ссылки собираются по каждому запросу и сохраняются в папке urls в отдельные текстовики, а в файле _total. txt сохраняются все ссылки вместе БЕЗ ДУБЛЕЙ. Не забывайте устанавливать галочку на пункте «С нежелательными сайтами», если вам нужно собирать все сайты из выдачи, даже те, которые Яндекс считает потенциально опасными.

Сниппеты записываются по такому же принципу в папку snipets. Не забывайте в Настройках программы указывать минимальный размер сниппета, который нужно брать из выдачи. При парсинге сниппетов стоит обратить внимание на файл snippets-trash. txt, в котором находится список тегов или участков текста, которые не нужно включать в результирующий файл. Сделано это для того, чтобы отфильтровать теги и прочий ненужный для текстовки мусор.

Проверка позиции сайта. Чтобы просто проверить позиции сайта в выдаче нужно снять все галочки и поставить одну «проверять позиции сайта». После добавить список запросов, по которым проверять наличие и во вкладке «Сайты» - список сайтов(по одному в строке), которые нужно искать в выдаче). После нажатия на кнопку «Старт» начнется поиск указанных сайтов в поисковой выдаче Яндекса по указанным запросам.

Галочки: Собирать статистику запросов, Собирать число страниц, Собирать статистику слов, Предложения в ЯМаркете. Для обработки всех этих данных парсеру нужно дать лишь список запросов и нажать кнопку «Старт». Результаты вы сможете просмотреть в файле _stats. txt. Формат файла следующий:

Ключевик;показов по вордстат;число страниц;KEI;предложения в ЯМаркете.

«KEI=» - тут вы можете отредактировать формулу вычисления KEI. P – количество запросов в месяц, Q – конкуренция, количество страниц, содержащих запрос.

Настройки прокси берутся из настроек Internet Explorer.

Количество потоков регулируется в верхней части окна.

Бонус – FinderFreeHosts

Программа для поиска бонусников.

Принцип работы

На входе программе дается список спарсенных ссылок(не обязательно спарсенных моим парсером). После выбора файла(файлов) нажимаем на кнопку «СТАРТ» и получаем результат в правой колонке.

При выборе файла с урлами есть два варианта: Файл и Папка. Если выбрали Файл, то по нажатию на кнопку «Выберите файлы», вы выберете нужный файл со ссылками и он будет проверен. Если выбрано Папка, то становится активным счетчик и вы можете добавить в список по 5000(сколько угодно) первых урлов из каждого файла в выбранной папке. Это сделано для того, чтобы вы имели возможность проверить например сначала ТОП30, потом ТОП10 и т. д. по каждому запросу. При втором варианте вам нужно будет тоже выбрать один файл!!! Все остальные файлы из этой папки программа найдет сама.

Программа находит все одинаковые домены и выводит вам статистику о частоте их появления в базе. Есть возможность сортировки по количеству появлений(счетчик справа, по умолчанию стоит 2). В первом окне вы получаете список найденных доменов. Двойным кликом по каждому вы можете просмотреть все страницы, найденные на этом домене в нижнем поле.