A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента

[A-Parser Support]

В парсере баг LinkExtractor когда исправите?

О каком баге речь? Напишите в тех поддержку, в чат на сайте или через Телеграм в @aparser_bot

Добавлено спустя 43 секунды:
Курс по заработку на PBN используя A-Parser(+включает лицензию)



Наш хороший друг Николай Кодий запускает очередной набор на курсы по подбору дропов и построению качественных сеток PBN, с применением A-Parser в качестве одного из основных инструментов.

Курс учит профессии или помогает в ней прокачаться и упорядочить знания.

Каждый из студентов бесплатно получает весь лицензионный софт (в том числе и A-Parser), необходимый для подбора дропов.

Данный курс без "воды" и с живыми вебинарами, с разборками домашних заданий — вы получите концентрат опыта и алгоритмы наработок, которые никто другой не показывает. А, кроме того, сможете попрактиковаться в поиске дропов на продажу. И поднятии на них сеток, для себя или на продажу.

Курс насыщен практикой на реальных задачах. Каждый выпускник получает весь необходимый инструментарий. Многие из выпускников потом находят работу в хороших компаниях или работают на себя.

Подробнее о курсе читайте на ленде курса - https://kurs.pbn.link

[A-Parser Support]

В парсере баг LinkExtractor когда исправите?

Здравствуйте!
Ваша проблема с багом решена?
Вы можете связаться с поддержкой А-Парсер по ссылке - https://a-parser.com/pages/support/

Добавлено спустя 1 минуту 1 секунду:
Сборник рецептов #47: информация о Youtube каналах, отзывы из Google Play и чекер апдейтов

47-й сборник рецептов, в который вошли парсер данных о Youtube каналах, парсер отзывов из Google Play и универсальный чекер изменений на страницах с уведомлением в Telegram.

Парсинг данных о Youtube канале
Парсер для сбора информации о каналах на Youtube. Данный парсер собирает описания каналов, дату регистрации, общее количество просмотров, страну, ссылки и email, если он есть в описании.


Парсинг отзывов Google Play Market
Парсер комментариев к приложениям в Google Play, который позволяет парсить как тексты отзывов, так и различную информацию: имя автора, аватар, дату и рейтинг.


Универсальный чекер апдейтов(текста, цен и т.п.) на страницах с уведомлением в Telegram
Данный парсер позволяет отслеживать изменения на различных страницах и получать уведомления в Telegram. Особенностью парсера является возможность гибко добавлять признаки для разных сайтов без необходимости вмешиваться в код. Также парсер формирует отчет, в котором видно сколько раз сработали и сколько уведомлений было отправлено.



Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

[A-Parser Support]

1.2.1294 - новые опции и расширение перечня типов собираемых данных в некоторых парсерах, багфиксы



Улучшения

• В SE::Google добавлены новые опции:
  • Exact match - соответствует опции в поисковике "Точное соответствие";
  • Safe search - позволяет включать/отключать Безопасный поиск Google
• В SE::DuckDuckGo добавлены опции Safe search и Serp time, а также исправлены мелкие ошибки в логике работы
  
• В SE::Google::Trends добавлена опция Use empty queries(ignore query value) которая позволяет осуществлять поиск по категории
  
• В SE::Yandex::Direct реализована поддержка каптч, а также добавлена переменная, позволяющая различать органическую и рекламную выдачу
  
• В SE::YouTube добавлена возможность парсить "Похожие запросы", а также собирать дату добавления видео
  
• В SE::Yandex::Suggest добавлен выбор способа запроса, один из которых позволяет собирать все расширенные подсказки (реклама, факты, ссылки на сайты)
• В Net::HTTP добавлена опция Don't verify TLS certs
  
• В Google::Maps добавлена возможность парсить ссылку на карточку компании
  
• Добавлено обнаружение ограниченных (18+) профилей в Social::Instagram::Profile
  
• Улучшена поддержка доменных прокси
  
• Исправлена работа с await this.request в JavaScript API v2
  
• Реализован автоматический запуск заданий в статусе Some error при перезагрузке A-Parser
  
• Добавлен флаг статичного формата имени файла результата, который позволит более гибко называть файлы и при этом сохранять возможность получать ссылки на них через getTaskResultsFile

Исправления в связи с изменениями в выдаче

• Исправлено определение AMP ссылок в SE::Google
  
• Исправлен парсинг рекламных анкоров в SE::Yandex
  
• Исправлена проблема со 100%-м баном запросов в SE::Bing
• Исправлена работа Net::Whois с доменной зоной .sex
  
• В Shop::AliExpress изменился набор собираемых данных
  
• Адаптация к изменениям в верстке: SE::Google, SE::Yandex, SE::Bing, SE::Seznam, Rank::MOZ, DeepL::Translator, HTML::LinkExtractor, SE::Startpage, SE::Yandex::ByImage, Rank::MajesticSEO, Shop::Yandex::Market, SE::Rambler, SE::YouTube

Исправления

• Исправлена работа с поисковыми операторами в SE::DuckDuckGo
  
• Исправлена работа SE::Google::Translate с некоторыми языками
  
• Исправлена работа Redis API, проблема появилась в одной из предыдущих версий

[A-Parser Support]

Бонусы от Leadgid и видеоуроки от DIM STUDIO



Дорогие друзья!

Наш партнёр, международная финансовая партнёрская сеть Leadgid, подготовила бонусы для новых пользователей!

Регистрируйтесь уже сейчас, лейте трафик и получайте бонус +10% к первой выплате. Для этого достаточно сообщить своему менеджеру промокод APARSERSTART10

В Leadgid вы можете найти более 500 финансовых офферов и более 30 ГЕО.

В арсенале партнёрки есть офферы не только по СНГ, но и по всему миру: Испании, Эстонии, Польше, Мексике, Вьетнаму, США и многим другим странам!

Leadgid известен в арбитражных кругах своим насыщенным нетворкингом и крутыми конкурсами. Принимайте участие в новом конкурсе "Остров Сокровищ Leadgid" и летите вместе с Leadgid на Мальдивы, где вас будет ждать грандиозная вечеринка с розыгрышем главных призов!

Регистрация по ссылке: https://my.leadgid.com/?utm_source=aparser&utm_medium=referral&utm_campaign=collab

______________________________________________________________
А также, мы представляем видео уроки по работе с A-Parser от DIM STUDIO. На данный момент уже доступно 13 уроков и их список будет пополняться.

Плейлист со всеми видео уроками

https://youtu.be/8_UGg2qycII

Список тем:
<ol>
[*]Знакомство. Установка, первичная настройка, запуск первого проекта.
[*]A-Parser - XEVIL: Подключаем и проверяем.
[*]Сбор главныx страниц phpbb форумов.
[*]Как собрать DLE сайты через проверку HTML кода.
[*]Последовательный сбор трёх движков статистики (Refspam).
[*]Сбор ников с сайтов.
[*]Поиск активных ссылок в отчётах Xrumer + Nofollow.
[*]Сбор базы форм обратной связи для Xrumer.
[*]Импорт/Экспорт пресетов.
[*]Поиск движка AWSTATS.
[*]Определяем движки из баз для Xrumer с помощью Rank::CMS.
[*]Сбор базы ключевых слов через Rank::Bukvarix::Keyword.
[*]Собираем данные из групп Telegram.
</ol>Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

[A-Parser Support]

Сборник статей #13: работа с MongoDB и поиск дроп доменов

Представляем 13-й сборник статей, в который вошли статья о работе с MongoDB и статья по поиску дроп доменов с использованием A-Parser.

Пример интеграции А-Парсера с MongoDB. CRUD Операции
В данной статье рассмотрен пример интеграции А-Парсера с MongoDB. В частности показаны CRUD операции. В качестве хранимых данных в базе используются результаты работы парсера поисковой выдачи Bing.


Дроп домены: для построения сеток PBN
PBN, или Private Blog Network — это сетка сайтов, созданных для того, чтобы с них проставлять ссылки на свои «белые» проекты для выхода в ТОП в высококонкурентных нишах. Такая сетка строится на дроп-доменах, поскольку у них есть история (конечно же, она должна быть чистой), траст, беклинки и даже трафик. В этой статье на конкретном примере показан пример решения задачи по поиску дропов с использованием A-Parser.



Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :-D ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники статей

[A-Parser Support]

1.2.1325 - новые парсеры Pinterest, улучшения в существующих парсерах, исправление ошибок



Улучшения

• Добавлены парсеры Pinterest:
  
  • SE:: Pinterest - парсинг поисковой выдачи Pinterest
  • SE:: Pinterest::Suggest - парсинг подсказок Pinterest с возможностью парсить в глубину
• В SE::Google добавлен парсинг исправленного запроса
  
• В SE:: Dogpile::Images добавлена поддержка рекаптч
  
• В Shop::Yandex::Market добавлен сбор количества покупок и просмотров
  
• В HTML::EmailExtractor улучшено обнаружение почт, защищенных CF

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям в верстке в SE::Google и SE::Yandex
  
• Исправлено определение turbo страниц в SE::Yandex
  
• Исправлена и оптимизирована работа SE::Google::TrustCheck и SE::Google::Compromised
  
• SE::Google::Cache, SE:: DuckDuckGo, Rank::Alexa, Rank::Ahrefs

Исправления

• Исправлена проблема с распознаванием символов диакритики
• Устранены падения при ошибках в некоторых API запросах
• Исправлены зависания при парсинге SE::Yandex с использованием аккаунтов
  
• Исправлена ошибка распознавания дат в Net::Whois, а также адаптирован сбор данных для некоторых зон
• Исправлена ошибка выбора IP для Xevil/CapMonster в Util::ReCaptcha2
• Исправлена ошибка с указанием Provider url в Util::ReCaptcha2
  
• Исправлена ошибка при которой отсутствовал объект с перечнем редиректов в Net::HTTP при Engine = Chrome
  
• Исправлена работа Net::HTTP с http сайтами при Engine = Chrome
• JS парсеры: исправлена работа noChange в this.proxy.set()
• JS парсеры: исправлена ошибка, при которой set.lvl был пустой при вызове другого парсера из JS парсера
• Исправлена работа кнопки Выход

[A-Parser Support]

Сборник рецептов #48: скорость загрузки сайтов, парсер SocialBlade и определение категорий сайтов

48-й сборник рецептов, в котором собраны пресеты для сбора данных о скорости загрузки сайтов, парсинга статистики из SocialBlade и определения категорий сайтов.

Получение показателей скорости загрузки сайтов с помощью Chrome UX Report Compare Tool
Пресет для сбора данных о скорости загрузки сайтов/страниц с возможностью выбрать платформу (Desktop/Mobile/All). С его помощью можно массово измерить скорость по большим спискам сайтов и сравнить их производительность.


Парсинг статистики с Social Blade
Парсер для сбора данных из сервиса socialblade.com. С его помощью по ключевому слову, имени, бренду можно найти пользователей по социальным платформам, собрать количества подписчиков и спарсить теги твича.


Проверка категории сайтов через сервис cyren.com
Парсер сервиса cyren.com. С его помощью можно определить категорию сайта, а также собрать Alexa rank и некоторые Whois данные.



Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

[A-Parser Support]

Видео урок: Сбор форм обратной связи с тематических ресурсов +200 OK

Новый видео урок по работе с A-Parser от DIM STUDIO, в котором рассмотрен способ сбора форм обратной связи с тематических ресурсов.

Видео: https://youtu.be/idhtDKBrucI

В данном уроке показано как собрать формы обратной связи с тематических ресурсов с последующей проверкой на 200 OK через A-Parser для подготовки к последующему прогону через Xrumer.

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

[A-Parser Support]

1.2.1353 - Обновление NodeJS, поддержка Windows 11 и Windows Server 2022



Улучшения

• NodeJS обновлен до версии 16.11.0
  
• Добавлена полная поддержка ОС Windows 11 и Windows Server 2022
  
• В SE::Google::Translate добавлена опция Device, которая позволяет переключаться между mobile и desktop версиями переводчика
• Улучшена работа с очень большими запросами в DeepL::Translator
  
• Улучшен алгоритм разделения запросов на части в SE::Yandex::Translate, теперь он максимально приближен к оригиналу
  
• В SE::Google::Cache добавлена переменная $link, содержащая ссылку из тулбара
• В Shop::Amazon добавлена возможность парсить ASIN товаров
• В Rank::MajesticSEO добавлена возможность собирать Incoming Languages и Site Languages

Исправления в связи с изменениями в выдаче

• Исправлен парсинг рекламы в SE::Google
• Исправлен парсинг $related в desktop выдаче SE::Yandex
  
• Исправлен парсинг сниппетов в desktop выдаче и парсинг mobile выдачи в целом в SE::Bing
  
• Исправлена работа парсеров Rank::Ahrefs и Rank::Ahrefs::KeywordDifficulty
• Rank::LinkPad удален из сборки в связи с закрытием доступа к данным
  
• Исправлен парсинг $totalcount в SE::Yahoo

Исправления

• Исправлена ошибка с символом $ в DeepL::Translator
• Исправлена работа прокси при использовании движка Chrome в Net::HTTP
  
• Исправлена проблема стабильности при использовании в некоторых случаях HTML::TextExtractor и HTML::TextExtractor::LangDetect
  
• Исправлена проблема из-за которой SE::Youtube иногда завершался с ошибкой
• Исправлен вывод исходников страниц в SE::Google::ByImage

[A-Parser Support]

Сборник статей #14: авторизация на сайтах, скачивание изображений и парсинг Telegram

Представляем 14-й сборник статей, в который вошли обзор вариантов авторизации на сайтах, статья о скачивании изображений из сайтов и способ получения сообщений из чатов Telegram.

Варианты авторизации на сайте с помощью A-Parser
В статье рассмотрено 3 основных варианта авторизации на сайте с использованием различного функционала A-Parser.


Скачивание всех изображений из сайта
Обзор решения задачи по скачиванию всех изображений из сайта. В статье рассмотрено 2 способа парсинга и показаны преимущества и недостатки каждого.


Способ получения данных с чатов Телеграм используя экспорт сообщений
Статья, посвященная вопросу парсинга данных из Telegram. В статье описаны и сравниваются между собой встроенный в клиент Telegram экспорт сообщений и парсинг с помощью A-Parser.



Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники статей