A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров.

[Forbidden]

A-Parser - многопоточный парсер поисковых систем, сервисов оценки сайтов, ключевых слов, контента(текст, ссылки, email, телефоны, произвольные данные) и других различных сервисов(youtube, картинки, переводчик...), всего A-Parser содержит более 70 парсеров

На сегодняшний день A-Parser развился в невероятный SEO комбаин, позволяющий покрыть огромное число задач для SEO-специалистов и вебмастеров любого уровня подготовки:

• Используйте встроенные парсеры чтобы с легкостью получать и анализировать любые данные
• Воспользуйтесь нашим каталогом парсеров и пресетов для расширения возможностей A-Parser и решения нестандартных задач
• Если вы продвинутый пользователь - создавайте свои собственные парсеры на основе регулярных выражений или XPath
• Владеете JavaScript? Тогда A-Parser предлагает вам беспрецедентную возможность программировать свои собственные парсеры, используя всю мощь возможностей A-Parser!
• Для автоматизации мы предлагаем API позволяющий легко встроить A-Parser в ваши бизнес процессы, а также для создания сервисов любого уровня сложности на базе нашего парсера

Кроме этого мы предоставляем услуги по составлению заданий и написанию парсеров под ваши задачи, в кратчайшие сроки и по демократичной цене. Хотите спарсить целиком интернет магазин(Ozon, Amazon, AliExpress)? Проверить 100 миллионов сайтов по вашим признакам? Получить данные с любого сайта в структурированном виде(CSV, JSON, XML, SQL)? В решении этих задач поможет наша дополнительная платная поддержка

A-Parser полностью решает рутинные задачи по получению, обработки и систематизации данных, необходимых для работы в следующих областях:

• SEO-оптимизация сайтов и Web-аналитика
  • Сбор баз ссылок для XRumer, A-Poster, AllSubmitter, ZennoPoster...
  • Оценка сайтов и доменов по множеству параметров
  • Мониторинг позиции любых сайтов в поисковых системах
  • Сбор контента(текст, картинки, ролики) для генерации сайтов(дорвеев)
  • Отслеживание обратных ссылок
  • Сбор произвольной информации с любых сайтов(например телефоны/e-mails, сообщения с форумов, объявления...)
  • Сбор и оценка ключевых слов
  • Сбор списка обратных ссылок
  • И многое другое
• Web-безопасность
  • Сбор и фильтрация баз ссылок по признакам
  • Определение CMS сайтов
  • Формирование произвольных GET, POST запросов с одновременной фильтрацией ответа
• Сетевое администрирование
  • Работа с DNS службой - резолвинг доменов в IP адреса
  • Работа с Whois - дата регистрации и окончания регистрации доменов, name-cервера

A-Parser обладает следующими преимуществами:

• Колоссальная производительность
  • Многопоточность - парсер способен распараллеливать сетевые операции до 5000-10000 потоков в зависимости от конфигурации компьютера и решаемой задачи
  • Продуманная внутренняя архитектура, в которую заложена производительность и расширяемость
  • Множественные оптимизации сложных операций
  • Парсер не требователен к ресурсам, может работать как на компьютере, так и на VDS или сервере, на операционных системах Windows, Linux или FreeBSD
• Промышленные масштабы
  • Парсер разрабатывался с учетом работы с неограниченным размером данных
  • Способен обрабатывать сотни миллионов и миллиардов запросов
  • Размеры файлов запросов и результатов ничем не ограничены и могут достигать терабайтных значений
• Автономность
  • A-Parser рассчитан на бесперебойную и беспрерывную работу без участия пользователя
  • Очередь заданий позволяет нагрузить парсер работой на недели и месяцы вперед
  • Одновременное выполнение нескольких разных задач для скорейшего получения результатов
• Поддержка более 70 парсеров
• Создание собственных пресетов
  • Использование регулярных выражений
  • Поддержка XPath
  • Поддержка многостраничного парсинга
  • Проверка контента и наличия следующей страницы
• Создание собственных парсеров
  • Быстрая разработка на JavaScript
  • Многопоточность и работу с прокси обеспечивает A-Parser
• Распознавание каптчи
  • Поддержка множества сервисов: антигейт, cheap-captcha.com, rucaptcha.com и любых других на основе AntiGate API
  • Поддержка CapMonster и XEvil
• Мощные инструменты для формирования запросов и результатов
  • Конструктор запросов и результатов - позволяет видоизменять данные(поиск и замена, выделение домена из ссылки, преобразования по регулярным выражениям...)
  • Подстановки для запросов: из файла; перебор слов, символов и цифр
  • Фильтрация результатов - по вхождению подстроки, равенству, больше\меньше
  • Уникализация результатов - по строке, по домену, по главному домену(A-Parser знает все домены верхнего уровня, в т.ч. такие как co.uk, msk.ru)
  • Мощный шаблонизатор результатов на основе Template Toolkit - позволяет выводить результаты в любом удобном виде(текстом, csv, html, xml, json, sql, произвольный формат)
• Гибкость настроек
  • В парсере используется система пресетов - для каждого парсера можно создать множество предустановленных настроек для различных ситуаций
  • Настроить можно все - никаких рамок и ограничений
  • Экспорт и импорт настроек позволяет легко обмениваться опытом с другими пользователями
• Сетевые возможности
  • Поддержка HTTP/1.1, HTTP/2 и HTTPS(TLS)
  • Поддержка HTTP и SOCKS5 прокси, в т.ч. с авторизацией
  • Полностью асинхронная работа с сетью, включая работу с DNS
• API
  • Возможность интегрировать и управлять парсером из своих программ и скриптов
  • Полная автоматизация бизнес-процессов
  • Клиенты для PHP, Perl, Python и NodeJS
• Постоянные улучшения и исправления
  • Разработка парсера началась в 2011 году, а первый релиз вышел зимой 2012 года
  • С тех пор было выпущено более 100 новых версий, включающих множество улучшений и исправлений
  • A-Parser не останавливается в развитии, идет активная разработка, будет реализовано множество новых функций, в т.ч. по запросам от пользователей
• Техническая поддержка
  • Мы прилагаем все усилия по поддержке пользователей и ответам на все возникающие вопросы
  • Создана подробная документация по A-Parser'у, открыт форум для пользователей
  • Специалист технической поддержки готов ответить любым удобным способом: ICQ, Skype, Jabber, GoogleTalk, e-mail и через форму онлайн связи на сайте
  • Разработчики A-Parser'а готовы ответить на любые сложные и технические вопросы, также открыт к обсуждению улучшений и дополнений для парсера

Более подробно ознакомится с возможностями парсера можно в полноценной документации

A-Parser предоставляется в трех версиях, сравнительная таблица и стоимость лицензий:



Мы принимаем к оплате в автоматическом режиме все популярные платежные системы, такие как Bitcoin, WebMoney, PayPal, Visa, MasterCard, Paxum, Яндекс.Деньги, QIWI, PerfectMoney, банковские переводы, терминалы оплаты и многое другое.
Для приобретения лицензии необходимо зарегистрироваться на сайте https://a-parser.com и перейти на страницу оплаты.
Если у вас возникли вопросы - обращайтесь по любым контактам в техническую поддержку

[y4b53]

+1, лучший парсер, рекомендую

[Wonder]

Парсером пока не пользовался, но в свое время покупал Апостер. Хотелось бы высказать огромную благодарность автору именно за поддержку своего софта. Такое чувство, что он за компом 24 часа в сутки. Сколько раз ему ни стучал, всегда был готов помочь и ответить на любые вопросы. Вообще это редкость, когда человек пишет такой отличный софт и при этом оказывает такую качественную поддержку. Рекомендую!

[Forbidden]

Спасибо всем за отзывы!

Как всегда новая версия )

A-Parser - версия 1.1.20 - обновление парсера Rank::CMS, разные форматы результатов для нескольких файлов

Улучшения

• Полностью переработан парсер Rank::CMS, теперь он определяет движок сайта на основе большой и качественной базы признаков Wappalyzer, также появилась возможность выбрать категорию или конкретные движки для распознавания
• Появилась возможность сохранять результаты одного задания в разные файлы, с выбором формата результата для каждого файла, к примеру при парсинге Гугла можно сохранять ссылки в один файл и сниппеты в другой
• Добавлена возможность использовать шаблоны в параметрах Extra query string и User Agent
• В шаблонах теперь можно использовать инструменты, которые доступны через переменную $tools, первый инструмент - выбор произвольного User Agent: $tools.ua.random(), список агентов хранится в файле files/tools/user-agents.txt
• Улучшен парсер Net::DNS при работе через прокси
• В API появилась возможность запрашивать статус сразу нескольких заданий
• В API появилась возможность скачивать файл результата
• Парсер SE::AOL теперь позволяет выбрать US, UK, FR или DE выдачу
• В парсере Rank::Ahrefs теперь дополнительно парсятся параметры URL Rank и Ahrefs Domain Rank

Исправления

• Исправлен парсер SE::YouTube в связи с изменением в выдачи
• Исправлен парсинг с блогов в парсере SE::Google в связи с изменением в выдачи
• Исправлена ошибка при которой парсер мог вылететь если в качестве запроса передать очень длинный URL

[Hector]

Я не понял что там с обновлениями. Сколько будет стоить обновить по истечению срока бесплатных обновлений?

[dady]

Сообщение от Hector

Я не понял что там с обновлениями. Сколько будет стоить обновить по истечению срока бесплатных обновлений?

3 месяца обновлений: $19
1 год обновлений: $69
Пожизненные обновления: $199

[Hector]

спасибо dady

[A-Parser Support]

A-Parser - версия 1.1.41 - новые парсеры MailRu и Dogpile, поддержка многоядерности для чекера CMS

Улучшения

• Новый парсер SE::MailRu - собирает ссылки, анкоры и сниппеты, количество результатов в выдаче
• Новый парсер SE::MailRu::position - проверяет позиции сайтов в выдаче go.mail.ru
• Новый парсер SE::Dogpile - парсер поисковика dogpile.com, собирает ссылки, анкоры и сниппеты, количество результатов в выдаче и связанные ключевые слова
• Добавлена экспериментальная поддержка многоядерных процессоров для наиболее требовательного к ресурсам процессора парсера Rank::CMS
• Для парсера Rank::Ahrefs добавлен парсинг социальных факторов(google+, twitter, facebook), а также возможность выбора режима отчета(ссылка, папка, домен, домен с сабдоменами)
• Для парсера Rank::MajesticSEO добавлена возможность получать данные по полной ссылке
• Новая опция Emulate browser headers для парсера Net::HTTP - автоматически эмулирует хедеры современных браузеров
• Для парсера SE::Yandex::position теперь доступна статистика по использованию каптчи

Исправления

• Исправлен парсинг рекламных блоков в парсере SE::Google в связи с изменением в выдачи
• Исправлен парсер SE::Baidu в связи с изменением в выдачи
• Исправлен парсер проверки языка сайта SE::Bing::LangDetect

[A-Parser Support]

A-Parser - версия 1.1.61 - улучшение очереди заданий, поддержка аккаунтов в парсере Яндекса

Улучшения

• Появилась возможность ограничивать общее потребление потоков, что позволяет пропускать задания превышающие текущее потребление, давая возможность выполнится заданиям с меньшим числом потоков. Также данный функционал полезен при использовании прокси-сервисов с лимитированным числом подключений, тем самым можно гарантированно не выходить за пределы тарифа
• В очереди заданий теперь можно удалить все задания разом, отдельно для активной очереди и очереди завершенных заданий
• Парсер SE::Yandex теперь поддерживает работу с аккаунтами(опция Use Accounts)
• При парсинге рекламы в SE::Google теперь дополнительно можно вывести позицию рекламного блока(сверху или справа), а также номер страницы выдачи, на котором показано рекламное объявление

Исправления

• Исправлено отображение русских имен файлов запросов и результатов на ОС Linux
• Исправлено определение ТИц в парсере SE::Yandex::TIC
• Исправлено распознавание каптчи в регистраторе аккаунтов Яндекса SE::Yandex::Register в связи с изменением в выдачи
• Исправлена работа с заблокированными аккаунтами в парсере SE::Yandex::WordStat

[8bitcat]

а что означают ограничения 20 потоков на 2 недели, 50 потоков на месяц?

[Strannic]

есть у кого нибудь решение на С# снипетах зеннопостера для работы с апарсером через аpi? Если не жалко киньте пару сниппетов на отправку и прием запроса.