A-Parser - продвинутый парсер поисковых систем, WordStat, YouTube, Suggest, PR, etc

Тема в разделе "Продажа скриптов и софта", создана пользователем AgentBabla, 17 фев 2018.

  1. AgentBabla

    AgentBabla Administrator Команда форума

    Регистрация:
    31 янв 2018
    Сообщения:
    969
    Симпатии:
    104
    Баллы:
    43
    Что такое A-Parser?

    Это быстрый парсер с уклоном на универсальность, удобность и прозводительность.
    На данный момент умеет парсить:

    Поисковые системы

    • [​IMG] Google
    • [​IMG] Bing
    • [​IMG] Yahoo
    • [​IMG] Yandex
    • [​IMG] QIP - парсинг яндекса через search.qip.ru с выдачей до 5000 результатов с одного запроса
    • [​IMG] AOL - парсер search.aol.com, этот поисковик использует американскую выдачу Google

    Каждый парсер может парсить ссылки, анкоры, сниппеты, количество страниц

    Для гугла умеет обходить ограничение в 1000 результатов(скоро и для всех остальных парсеров так же будет), т.е. по одному запросу собирает всю выдачу

    Для Яндекса есть возможность распознавания каптчи через сервис AntiGate(или любой другой с поддержкой их API)

    Парсеры кейвордов

    Сервисы поиска ключевых слов

    • [​IMG] Yandex WordStat - собирает все кейворды и количество показов до указанной страницы. Так же собирает дополнительные кейворды, показы по главному кейворду и дату обновления статистики. Может сам подставляет найденные ключевые слова в запросы до указанного уровня.

    Подсказки поисковых систем

    • Подсказки и релейтед кеи Google
    • Подсказки и релейтед Bing
    • Подсказки, релейтед и трендовые кеи Yahoo
    • Подсказки и релейтед Yandex

    Для подсказок Google и Yandex умеет автоматически собирать все кеи(подстановки до указанного уровня), для всех остальных парсеров такая возможность скоро так же появится

    Параметры сайтов и доменов

    • [​IMG] Rank::Alexa - парсер Alexa Rank, парсит глобальный рейтинг, топ рейтинг по стране, саму страну и количество бек-линков
    • [​IMG] Rank::MajestiSEO - парсер количества беклинков с сервиса majesticseo.com, парсит количество ссылающихся страниц, количество уникальных IP-адресов, подсетей класса C и количество уникальных доменов
    • [​IMG] Rank::SEMrush - проверяет рейтинг SEMrush, количество SE траффика и его стоимость, количество Ads траффика и его стоимость
    • [​IMG] Rank::OpenSiteExplorer - проверяет рейтинг домена\страницы по OpenSiteExplorer, а так же количество беклинков и бекдоменов
    • [​IMG] SE::Google::position - проверка позиции домена по ключевому слову в Google
    • [​IMG] SE::Yandex::position - проверка позиции домена по ключевому слову в Yandex
    • SE::QIP::position - проверка позиции домена по ключевому слову в search.qip.ru
    • SE::Google::pageRank - PR страниц и доменов
    • SE::Google::SafeBrowsing - проверка домена в блеклисте гугла(подпись harm в выдачи)
    • SE::Yandex::TIC - проверка тематического индекса цитирования домена в Яндексе(тИЦ)
    • SE::DMOZ - наличие сайта в каталоге DMOZ
    • SE::Google::TrustCheck - проверка сайта на траст(доверие) гугла(дополнительный блок ссылок в выдаче и т.п.)
    • Net::Whois - определяет зарегистрирован домен или нет, а так же дату окончания регистрации
    • SE::Bing::LangDetect - определение языка сайта через поисковик Bing
    • Net::DNS - парсер резолвит домены в IP адреса
    • Rank::Category - автоматически определяет категорию сайта на английском языке, категории такие же как в dmoz.org, например google.com - Computers/Internet/Searching
    • Rank::CMS - определение около 200 видов CMS на основе признаков. Определяет все популярные форумы, блоги, CMS, гестбуки, вики и множество других типов движков


    Парсеры различных сервисов

    • SE::YouTube - полноценный парсер YouTube, парсит ссылку на ролик, титл, описание, длину ролика, дату добавления, имя пользователя и количество просмотров. Поддерживает все фильтры YouTube
    • SE::Google::Maps - парсер ссылок в результатах выдачи в картах Гугла(Google Maps), позволяет искать сайты привязанные к определенной местности
    • SE::Yandex::Direct - парсер direct.yandex.ru, парсит список всех объявлений(титл, текст, домен) и кол-во объявлений по определенному запросу
    • SE::Google::Images - парсер Google Images, парсит прямые ссылки на картинки, сниппеты, разрешение и размер
    • SE::Bing::Translator - переводчик через сервис www.bing.com/translator/, поддерживает все языки сервиса, включая автоопределение языка оригинала текста
    • Util::AntiGate - распознавание каптчи через сервис AntiGate, служит для настройки и тестирования распознавания каптч

    Парсинг контента

    • HTML::LinkExtractor - парсит внешние и внутренние ссылки с указанного сайта, может ходить по внутренним ссылкам до выбранного уровня.
    • Net::HTTP - скачивает указанную страницу, поддерживает многостраничный парсинг.

    Планируется еще много парсеров в ближайшем будущем, все созданно для того чтобы быстро добавлять новые парсеры.

    Обработка и фильтрация результатов

    • Фильтрация любого результата по вхождению строки, эквивалентности строк, регулярному выражению, больше, меньше, равно и т.п.
    • Уникализация любого результата по строке, домену, главному домену, папке, строке без учета параметров.
    • Парсинг любого результата с использованием регулярных выражений.

    Не было бы никакого A-Parser'а если бы не он не имел все нижеперечисленные преимущества, оставляя остальные парсеры далеко в стороне:

    • Полностью интерактивный мега-юзабильный веб интерфейс
      • Быстрое добавление заданий - Quick Task, когда не нужны никакие настройки, а хочется только побыстрому спарсить результаты
      • Расширенный редактор заданий, позволяет комбинировать несколько парсеров в одном задании, к примеру можно одновременно парсить ссылки со всех парсеров поисковых систем, делать уник по всем результатам прямо в процессе работы и т.д.
      • Очередь заданий - статистика в реальном времени, выполнение одновременно нескольких заданий и т.д.
      • Встроенные подсказки для элементов управления позволяют просматривать хелп непосредственно в интерфейсе
      • Поддержка русского и английского языка
    • Огромная скорость работы, подробнее тут: Производительность
    • Поддержка двух самых популярных платформ - Linux и Windows, производительность под Windows фактически не отличается от Linux версии
    • User API - интеграция возможностей парсера в свои скрипты, подробнее тут: User API, взаимодействие с другими программами и скриптами
    • Открытая разработка, багтрекер, выслушивание всех мнений и их реализация
    • Первоклассная тех поддержка, знакомая многим по моему старому проекту - A-Poster'у
    • Данный список можно еще долго продолжать, в ближайшее время все уникальные возможности и подробное их описание появится в Wiki

    Более подробное описание и скриншоты

    Wiki - дополнительная информация, инструкции и т.д.

    Скриншот интерфейса:
    [​IMG]

    На данном скриншоте показан пример добавления задания на парсинг одновременно трёх поисковых систем - Google, Bing и Yahoo, одновременная уникализация по домену всех результатов

    Ценовая политика

    На данный момент продается версия Pro(все парсеры) и Enterprise(все парсеры + API)
    • Цена лицензии - 200$
    • Первый год обновления бесплатны, после первого года использования абонентская плата за обновления - 15$ за каждые 3 месяца(возможность работы без обновлений сохраняется)
    • Цена лицензии с API: +50$ к стоимости основной лицензии
    • Всем клиентам кто имеет лицензию на A-Poster - цена всего 150$
    • Комплект A-Parser + A-Poster всего за 300$!
    • Специальное предложение - всем покупателям A-Parser'а предоставляются приватные прокси на 20 потоков на 2 недели!

    Лицензия позволяет запускать A-Parser на одном сервере\компьютере(напоминаю поддерживается работа на всех версиях Windows и Linux). Переносить можно бесплатно, нельзя запускать на нескольких компьютерах одновременно.

    Для покупки парсера зарегистрируйтесь на сайте http://a-parser.com и свяжитесь со мной по любому из следующих контактов:
    Предварительно перед покупкой с удовольствием отвечу на любые ваши вопросы, а также возможно обсуждение реализации недостающего вам функционала.
     

Поделиться этой страницей

Share