A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

[A-Parser Support]

Сборник статей #13: работа с MongoDB и поиск дроп доменов(https://a-parser.com/threads/7086/)

Представляем 13-й сборник статей, в который вошли статья о работе с MongoDB и статья по поиску дроп доменов с использованием A-Parser.

Пример интеграции А-Парсера с MongoDB. CRUD Операции (https://a-parser.com/resources/428/)

В данной статье рассмотрен пример интеграции А-Парсера с MongoDB. В частности показаны CRUD операции. В качестве хранимых данных в базе используются результаты работы парсера поисковой выдачи Bing.



Дроп домены: для построения сеток PBN (https://a-parser.com/resources/427/)

PBN, или Private Blog Network — это сетка сайтов, созданных для того, чтобы с них проставлять ссылки на свои «белые» проекты для выхода в ТОП в высококонкурентных нишах. Такая сетка строится на дроп-доменах, поскольку у них есть история (конечно же, она должна быть чистой), траст, беклинки и даже трафик. В этой статье на конкретном примере показан пример решения задачи по поиску дропов с использованием A-Parser.



Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ -
https://a-parser.com/pages/affiliate/ -

[A-Parser Support]

1.2.1325 - новые парсеры Pinterest, улучшения в существующих парсерах, исправление ошибок(https://a-parser.com/threads/7100/)



Улучшения

• Добавлены парсеры Pinterest:
  • SE::Pinterest (https://a-parser.com/docs/parsers/se-pinterest) - парсинг поисковой выдачи Pinterest
  • SE::Pinterest::Suggest (https://a-parser.com/docs/parsers/se-pinterest-suggest) - парсинг подсказок Pinterest с возможностью парсить в глубину
• В SE::Google (https://a-parser.com/docs/parsers/se-google) добавлен парсинг исправленного запроса
  
• В SE::Dogpile::Images (https://a-parser.com/docs/parsers/se-dogpile-images) добавлена поддержка рекаптч
  
• В Shop::Yandex::Market (https://a-parser.com/docs/parsers/shop-yandex-market) добавлен сбор количества покупок и просмотров
  
• В HTML::EmailExtractor (https://a-parser.com/docs/parsers/html-emailextractor) улучшено обнаружение почт, защищенных CF

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям в верстке в SE::Google (https://a-parser.com/docs/parsers/se-google) и SE::Yandex (https://a-parser.com/docs/parsers/se-yandex)
  
• Исправлено определение turbo страниц в SE::Yandex (https://a-parser.com/docs/parsers/se-yandex)
  
• Исправлена и оптимизирована работа SE::Google::TrustCheck (https://a-parser.com/docs/parsers/se-google-trustcheck) и SE::Google::Compromised (https://a-parser.com/docs/parsers/se-google-compromised)
  
• SE::Google::Cache (https://a-parser.com/docs/parsers/se-google-cache), SE::DuckDuckGo (https://a-parser.com/docs/parsers/se-duckduckgo), Rank::Alexa (https://a-parser.com/docs/parsers/rank-alexa), Rank::Ahrefs (https://a-parser.com/docs/parsers/rank-ahrefs)

Исправления

• Исправлена проблема с распознаванием символов диакритики
• Устранены падения при ошибках в некоторых API запросах
• Исправлены зависания при парсинге SE::Yandex (https://a-parser.com/docs/parsers/se-yandex) с использованием аккаунтов
  
• Исправлена ошибка распознавания дат в Net::Whois (https://a-parser.com/docs/parsers/net-whois), а также адаптирован сбор данных для некоторых зон
• Исправлена ошибка выбора IP для Xevil/CapMonster в Util::ReCaptcha2 (https://a-parser.com/docs/parsers/util-recaptcha2)
• Исправлена ошибка с указанием Provider url в Util::ReCaptcha2 (https://a-parser.com/docs/parsers/util-recaptcha2)
  
• Исправлена ошибка при которой отсутствовал объект с перечнем редиректов в Net::HTTP (https://a-parser.com/docs/parsers/net-http) при Engine = Chrome
  
• Исправлена работа Net::HTTP (https://a-parser.com/docs/parsers/net-http) с http сайтами при Engine = Chrome
• JS парсеры: исправлена работа noChange в this.proxy.set()
• JS парсеры: исправлена ошибка, при которой set.lvl был пустой при вызове другого парсера из JS парсера
• Исправлена работа кнопки Выход

– https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ
- https://a-parser.com/pages/affiliate/

[A-Parser Support]

Сборник рецептов #48: скорость загрузки сайтов, парсер SocialBlade и определение категорий сайтов(https://a-parser.com/threads/7123/)

48-й сборник рецептов, в котором собраны пресеты для сбора данных о скорости загрузки сайтов, парсинга статистики из SocialBlade и определения категорий сайтов.

Получение показателей скорости загрузки сайтов с помощью Chrome UX Report Compare Tool (https://a-parser.com/resources/429/)
Пресет для сбора данных о скорости загрузки сайтов/страниц с возможностью выбрать платформу (Desktop/Mobile/All). С его помощью можно массово измерить скорость по большим спискам сайтов и сравнить их производительность.



Парсинг статистики с Social Blade (https://a-parser.com/resources/430/)
Парсер для сбора данных из сервиса socialblade.com. С его помощью по ключевому слову, имени, бренду можно найти пользователей по социальным платформам, собрать количества подписчиков и спарсить теги твича.



Проверка категории сайтов через сервис cyren.com (https://a-parser.com/resources/431/)
Парсер сервиса cyren.com. С его помощью можно определить категорию сайта, а также собрать Alexa rank и некоторые Whois данные.




Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

– https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ
- https://a-parser.com/pages/affiliate/

[A-Parser Support]

Видео урок: Сбор форм обратной связи с тематических ресурсов +200 OK(https://a-parser.com/threads/7130/)

Новый видео урок по работе с A-Parser от DIM STUDIO, в котором рассмотрен способ сбора форм обратной связи с тематических ресурсов.



В данном уроке показано как собрать формы обратной связи с тематических ресурсов с последующей проверкой на 200 OK через A-Parser для подготовки к последующему прогону через Xrumer.

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser (https://www.youtube.com/c/AParser_channel) и DIM STUDIO ! - (https://www.youtube.com/channel/UCzTUeWXwm4YApVVXTWwySrw)

– https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ
– https://a-parser.com/pages/affiliate/

[A-Parser Support]

1.2.1353 - Обновление NodeJS, поддержка Windows 11 и Windows Server 2022(https://a-parser.com/threads/7157/)



Улучшения

• NodeJS обновлен до версии 16.11.0
  
• Добавлена полная поддержка ОС Windows 11 и Windows Server 2022
  
• В SE::Google::Translate (https://a-parser.com/docs/parsers/se-google-translate) добавлена опция Device, которая позволяет переключаться между mobile и desktop версиями переводчика
• Улучшена работа с очень большими запросами в DeepL::Translator (https://a-parser.com/docs/parsers/deepl-translator)
  
• Улучшен алгоритм разделения запросов на части в SE::Yandex::Translate (https://a-parser.com/docs/parsers/se-yandex-translate), теперь он максимально приближен к оригиналу
  
• В SE::Google::Cache (https://a-parser.com/docs/parsers/se-google-cache) добавлена переменная $link, содержащая ссылку из тулбара
• В Shop::Amazon (https://a-parser.com/docs/parsers/shop-amazon) добавлена возможность парсить ASIN товаров
• В Rank::MajesticSEO (https://a-parser.com/docs/parsers/rank-majesticseo) добавлена возможность собирать Incoming Languages и Site Languages

Исправления в связи с изменениями в выдаче

• Исправлен парсинг рекламы в SE::Google (https://a-parser.com/docs/parsers/se-google)
• Исправлен парсинг $related в desktop выдаче SE::Yandex (https://a-parser.com/docs/parsers/se-yandex)
  
• Исправлен парсинг сниппетов в desktop выдаче и парсинг mobile выдачи в целом в SE::Bing (https://a-parser.com/docs/parsers/se-bing)
  
• Исправлена работа парсеров Rank::Ahrefs (https://a-parser.com/docs/parsers/rank-ahrefs) и Rank::Ahrefs::KeywordDifficulty (https://a-parser.com/docs/parsers/rank-ahrefs-keyworddifficulty)
• Rank::LinkPad удален из сборки в связи с закрытием доступа к данным
  
• Исправлен парсинг $totalcount в SE::Yahoo (https://a-parser.com/docs/parsers/se-yahoo)

Исправления

• Исправлена ошибка с символом $ в DeepL::Translator (https://a-parser.com/docs/parsers/deepl-translator)
• Исправлена работа прокси при использовании движка Chrome в Net::HTTP (https://a-parser.com/docs/parsers/net-http)
  
• Исправлена проблема стабильности при использовании в некоторых случаях HTML::TextExtractor (https://a-parser.com/docs/parsers/html-textextractor) и HTML::TextExtractor::LangDetect (https://a-parser.com/docs/parsers/html-textextractor-langdetect)
  
• Исправлена проблема из-за которой SE::Youtube (https://a-parser.com/docs/parsers/se-youtube) иногда завершался с ошибкой
• Исправлен вывод исходников страниц в SE::Google::ByImage (https://a-parser.com/docs/parsers/se-google-byimage)

– https://t.me/a_parser - https://a-parser.com/pages/affiliate/

[A-Parser Support]

Сборник статей #14: авторизация на сайтах, скачивание изображений и парсинг Telegram(https://a-parser.com/threads/7198/)

Представляем 14-й сборник статей, в который вошли обзор вариантов авторизации на сайтах, статья о скачивании изображений из сайтов и способ получения сообщений из чатов Telegram.

Варианты авторизации на сайте с помощью A-Parser (https://a-parser.com/resources/434/)
В статье рассмотрено 3 основных варианта авторизации на сайте с использованием различного функционала A-Parser.



Скачивание всех изображений из сайта (https://a-parser.com/resources/432/)
Обзор решения задачи по скачиванию всех изображений из сайта. В статье рассмотрено 2 способа парсинга и показаны преимущества и недостатки каждого.



Способ получения данных с чатов Телеграм используя экспорт сообщений (https://a-parser.com/resources/433/)
Статья, посвященная вопросу парсинга данных из Telegram. В статье описаны и сравниваются между собой встроенный в клиент Telegram экспорт сообщений и парсинг с помощью A-Parser.



Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

- https://t.me/a_parser [/url] - https://a-parser.com/pages/affiliate/

[cryptoexchanger]

Все еще работает? Интересна как так происходит что выходит постоянно ошибка

[A-Parser Support]

Сообщение от cryptoexchanger

Все еще работает? Интересна как так происходит что выходит постоянно ошибка

Программа конечно работает. Если у вас возникли проблемы с программой, то напишите в тех поддержку по одному из контактов с понедельника после НГ.

[A-Parser Support]

Команда A-Parser поздравляет всех с Новым годом 2022!

В преддверии наступающего года, хочется выразить благодарность за проявление доверительного отношения к нам и пожелать всем огромных успехов в новом году. Пусть этот год станет стартовой площадкой для новых взлётов, достижений, открытий, побед! Желаем Вам интересных, успешных новых проектов и надежных партнеров. Пусть осуществится все задуманное и запланированное! С Новым годом!


Релиз стабильной сборки А-Парсера - 1.2.1403

Улучшения

• В парсеры позиций добавлена возможность искать позиции по части ссылки или по вхождению подстроки (Match type - By substring)
  
• В https://a-parser.com/docs/parsers/se-youtube - SE::Youtube добавлена возможность выбирать тип выдачи (Desktop/Mobile)
  
• Добавлен парсинг альтернативных переводов в https://a-parser.com/docs/parsers/deepl-translator - DeepL::Translator
  
• Улучшен алгоритм авторизации по email:password в https://a-parser.com/docs/parsers/se-google-keywordplanner - SE::Google::KeywordPlanner
  
• Реализована корректная обработка редиректа robots.txt в парсере https://a-parser.com/docs/parsers/check-backlink - Check::BackLink
  
• JS парсеры: в this.request добавлена опция follow_common_redirects, работает аналогично соответствующей настройке в https://a-parser.com/docs/parsers/net-http - Net::HTTP
  
• В связи с неактуальностью удалены следующие парсеры: SE::Bing::LangDetect, Rank::Linkpad, Rank::SEMrush. Также удален SE::Google::Modern, вместо него нужно использовать https://a-parser.com/docs/parsers/se-google - SE::Google

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям в верстке Google и Yandex
  
• Исправлен парсинг мобильной верстки в https://a-parser.com/docs/parsers/se-bing - SE::Bing
  
• Исправлен выбор дат в https://a-parser.com/docs/parsers/se-google-keywordplanner - SE::Google::KeywordPlanner
  
• https://a-parser.com/docs/parsers/se-yandex-byimage - SE::Yandex::ByImage, https://a-parser.com/docs/parsers/se-yahoo - SE::Yahoo, https://a-parser.com/docs/parsers/se-yandex-translate - SE::Yandex::Translate, https://a-parser.com/docs/parsers/securitytrails-domain - SecurityTrails:: Domain, https://a-parser.com/docs/parsers/shop-yandex-market - Shop::Yandex::Market

Исправления

• Исправлена работа авторизации в https://a-parser.com/docs/parsers/se-google-keywordplanner - SE::Google::KeywordPlanner
  
• Исправлено использование прокси в https://a-parser.com/docs/parsers/net-http - Net::HTTP при Engine = Chrome
  
• Исправлена проблема в https://a-parser.com/docs/parsers/se-google-translate - SE::Google::Translate, из-за которой не менялись прокси при переборе попыток
• В https://a-parser.com/docs/parsers/net-http - Net::HTTP исправлена ошибка, из-за которой не завершался поток, появилась в одной из предыдущих версий
  
• Исправлена работа функции Bypass CloudFlare на некоторых сайтах
• Исправлен режим работы -foreground

График работы поддержки на праздники: https://a-parser.com/threads/7214/

- https://t.me/a_parser - https://a-parser.com/pages/affiliate/

Курс по заработку на дропах и PBN используя A-Parser (+включает лицензию)



Наш хороший друг Николай Кодий (https://t.me/mypbn) запускает очередной набор на курс по подбору дропов и построению качественных сеток PBN, с применением A-Parser в качестве одного из основных инструментов.

Старт - 17 января.

Что это за обучение?
Николай научит и покажет на реальных кейсах и примерах:

• какой софт нужен для поиска дропов, сколько он стоит, как продлевается и регится.
• как правильно анализировать и выбирать дропы для себя и на продажу, чтобы не получить фуфло,
• как строить PBN, что с ними делать дальше и как на них зарабатывать.
• как с помощью знаний, которые он даёт, стать универсальным и востребованным специалистом по построению PBN под любые страны и тематики.

Для кого это обучение?

• Для владельцев агентств, которые хотят выходить на заказы для буржа и открывать отдел pbn. Для тех, кто хочет нанимать подрядчиков для построения pbn, понимать процесс и контролировать качество работы.
• Для частных и работающих в найме seo-мастеров, которые хотят оказывать услугу по поиску дропов и построению сеток.
• Для тех, кто ищет новые методы линкбилдинга.
• Для тех, кто хочет освоить в новом году новую профессию. И стать специалистом в PBN.

Больше нигде вы не получите такой системной и понятной теории, такого большого практического опыта и возможности смотреть и усваивать информацию на живых вебинарах с преподавателем, отвечающим именно на ваши вопросы.

Каждый из студентов бесплатно получает весь лицензионный софт (в том числе и A-Parser), необходимый для подбора дропов.

Подробнее о курсе читайте на ленде курса - https://kurs.pbn.link
И на FB странице Николая - https://www.facebook.com/nkodiy/

[A-Parser Support]

Успей купить A-Parser по прежней цене до 15 февраля - https://a-parser.com/threads/7265/

Объявляем о первом повышении цен за 10 лет, за этот период времени мы выпустили бесчисленное количество новых версий(https://a-parser.com/forum/news/), создав из простого парсера поисковых систем полноценную платформу по разработке парсеров любых типов данных на современном JavaScript и TypeScript.

И мы не планируем останавливаться, мы стремимся к тому, чтобы A-Parser всегда был для наших клиентов максимально полезен и эффективен, поэтому главным приоритетом для нас *является разработка новых функций, добавление новых парсеров и поддержка работоспособности всех существующих.

В течение месяца вы сможете успеть купить A-Parser по старой цене. Новые тарифы вступят в силу 15 Февраля 2022



Для существующих клиентов мы сохраним цены на обновления, дополнительные IP и повышения лицензий в течении 3 месяцев, новые цены для существующих клиентов вступят в силу с 15 апреля

- https://t.me/a_parser
- https://a-parser.com/pages/affiliate/