[Десктопный софт] A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

[A-Parser Support]

1.2.1432 - многоядерная обработка заданий, парсеры Wildberries, оптимизация производительности(https://a-parser.com/threads/7297/)

В версии 1.2.1432 добавлена долгожданная возможность (https://a-parser.com/threads/4417/#post-23309) обработки разных заданий на нескольких ядрах процессора, что многократно увеличивает производительность заданий, требовательных к CPU. Данная возможность доступна только для лицензии Enterprise, успейте сделать апгрейд до повышения цен

Улучшения​

• Добавлены новые парсеры:
  • 
    Shop::Wildberries:roductsList (https://a-parser.com/docs/parsers/shop-wildberries-productslist) - парсер списка товаров Wildberries по ключу, бренду или категории
  • 
    Shop::Wildberries:roductInfo (https://a-parser.com/docs/parsers/shop-wildberries-productinfo) - парсер данных о товаре на Wildberries
  • 
    Util::hCaptcha (https://a-parser.com/docs/parsers/util-hcaptcha) - парсер для разгадывания hCaptcha с помощью сервисов разгадывания
• Добавлена поддержка обработки заданий на разных ядрах процессора, данная возможность доступна только для лицензии Enterprise и многократно ускоряет обработку нескольких заданий в очереди
  
• Оптимизация скорости начальной загрузки и общей производительности JS парсеров, скорость загрузки A-Parser выросла на 30-50%
  
• В интерфейсе добавлен выбор версии API при создании парсеров
  
• Улучшена работа опции Detect charset on content
  
• В
  
  SE::Google (https://a-parser.com/docs/parsers/se-google) обновлен список доменов
• В
  
  SE::Yandex:irect (https://a-parser.com/docs/parsers/se-yandex-direct) обновлен список регионов
  
• В
  
  Check::BackLink (https://a-parser.com/docs/parsers/check-backlink) добавлена возможность проверки ссылки без указания протокола в режиме поиска по подстроке

Исправления в связи с изменениями в выдаче

• Исправлена работа
  
  SE::Yandex (https://a-parser.com/docs/parsers/se-yandex)
• Исправлено получение $commentscount в
  
  Shop::Amazon (https://a-parser.com/docs/parsers/shop-amazon)
  
• Исправлен сбор $number_sales в
  
  Shop::eBay (https://a-parser.com/docs/parsers/shop-ebay)
  
• Исправлена работа
  
  SE::Yandex:irect (https://a-parser.com/docs/parsers/se-yandex-direct)
  
• Исправлена работа парсеров Bukvarix

Исправления

• Исправлена работа
  
  SE::Google (https://a-parser.com/docs/parsers/se-google) с доменом google.com.bd
• Исправлен сбор ссылок в
  
  HTML::LinkExtractor (https://a-parser.com/docs/parsers/html-linkextractor) в некоторых случаях
• Исправлен баг интерфейса, из-за которого в Планировщике была скрыта кнопка удаления заданий

Напоминаем, вы можете успеть купить A-Parser по старой цене. Новые тарифы (https://a-parser.com/threads/7265/) вступят в силу 15 Февраля 2022

– https://a-parser.com/pages/buy/

 

[A-Parser Support]

Сборник рецептов #49: генерация картинок и текстов, парсер adult ключевых слов(https://a-parser.com/threads/7321/)

49-й сборник рецептов, в котором собраны парсер для генерации картинок, парсер для генерации текстов и парсер ключевых слов адалт тематики.

Генерация картинок ruDALL-E (https://a-parser.com/resources/436/)
Парсер, позволяющий автоматически массово генерировать уникальные изображения по списку ключевых слов с помощью нейросети ruDALL-E.

Яндекс Балабоба - генератор текстов от Яндекс (https://a-parser.com/resources/438/)
Данный парсер использует сервис Яндекс Балабоба для генерации коротких текстов по списку ключевых слов или предложений. Также возможна генерация текстов рекламных объявлений для доменов.

Подсказки NudeVista (https://a-parser.com/resources/435/)
Парсер адалт подсказок из сайта nudevista.com. Может использоваться для парсинга списков ключевых слов adult тематики.

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

(https://t.me/a_parser)

(https://a-parser.com/pages/affiliate/)​

Напоминаем, вы можете успеть купить A-Parser по старой цене. Новые тарифы (https://a-parser.com/threads/7265/) вступят в силу 15 Февраля 2022

– https://a-parser.com/pages/buy/

 

[A-Parser Support]

Сборник статей #15: разработка TypeScript парсеров и массовая индексация в Google(https://a-parser.com/threads/7338/)

Представляем 15-й сборник статей, в который вошли статья о разработке TypeScript парсера для генерации картинок с помощью нейросети и статья об опыте массовой индексации страниц в Google.

Генерация картинок ruDALL-E. Мануал по созданию TS парсера (https://a-parser.com/resources/437/)
В прошлом сборнике рецептов (https://a-parser.com/threads/7321/) мы опубликовали парсер для генерации картинок ruDALL-E (https://a-parser.com/resources/436/). Сегодня же мы представляем вам развернутую статью, где подробно рассказано об общем подходе к написанию таких парсеров и описан процесс разработки.
Ознакомиться с функционалом данного парсера можно в обзорном видео от нашего партнера DIM STUDIO:

https://www.youtube.com/embed/qmN33G-l34U

Как проиндексировать сайт в Google и повысить видимость (https://vc.ru/seo/365542-kak-proindeksirovat-sayt-v-google-i-povysit-vidimost-opyt-ispolzovaniya-google-indexing-api-s-primerami)
Статья на vc.ru о том, как за 10 дней было проиндексировано более чем 30 000 страниц сайта в Google.
Для массовой индексации в Google использовался скрипт на Python и Google Indexing API.
Для проверки индексации использовался A-Parser, в нашем Каталоге есть пример такого пресета: https://a-parser.com/resources/160/ (https://a-parser.com/resources/160/)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки

) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

– https://t.me/a_parser

- https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

1.2.1511 - улучшение работы с Chrome и обхода защит, обновление NodeJS, парсер подсказок Wildberries(https://a-parser.com/threads/7450/)

Улучшения

• Реализован обход защит по TLS отпечаткам, теперь запросы A-Parser на 100% выглядят как Chrome
• NodeJS обновлен до 16.15.0
• В
  
  SE::Google (https://a-parser.com/docs/parsers/se-google) добавлен параметр Narrow results by region, который позволяет сузить поиск до конкретной страны
• В парсере
  
  Maps::Google (https://a-parser.com/docs/parsers/maps-google) добавлен автоматический обход координат в заданном регионе, детальнее здесь (https://a-parser.com/threads/7363/)
• В
  
  Telegram::GroupScraper (https://a-parser.com/docs/parsers/telegram-groupscraper) добавлена опция Start message number, которая позволяет задать с какого номера собирать сообщения в телеграм чате
• В
  
  SE::YouTube (https://a-parser.com/docs/parsers/se-youtube) добавлен сбор количества подписчиков канала
• В
  
  SE::Google::Trends (https://a-parser.com/docs/parsers/se-google-trends) добавлен сбор id тем для related topics
• В парсере
  
  Shop::Wildberries:roductsList (https://a-parser.com/docs/parsers/shop-wildberries-productslist) добавлен сбор ключей из "Еще ищут" и "Возможно вам понравится"
• Добавлен парсер подсказок Wildberries:
  
  Shop::Wildberries::Suggest (https://a-parser.com/docs/parsers/shop-wildberries-suggest)
• В
  
  Shop::Wildberries:roductInfo (https://a-parser.com/docs/parsers/shop-wildberries-productinfo) добавлен сбор дополнительных данных
• В
  
  SE::Google::Images (https://a-parser.com/docs/parsers/se-google-images) добавлены новые типы в Usage rights
• Добавлена возможность выводить исходные данные (raw data) в парсерах Ahrefs
• В
  
  Net::HTTP (https://a-parser.com/docs/parsers/net-http) и JS парсерах добавлена опция Randomize TLS Fingerprint
• Улучшена работа с Chromium из JavaScript парсеров
• В
  
  Net::HTTP (https://a-parser.com/docs/parsers/net-http) и this.request() (https://a-parser.com/docs/javascript-parsers/class-methods-v2/http-requests) теперь по-умолчанию используется user-agent последнего Chrome

Исправления в связи с изменениями в выдаче

• Множество адаптаций к изменениям в верстке Google, Яндекс, Bing
• В парсерах Яндекса исправлен парсинг турбо страниц
• Исправлена работа
  
  SE::Yandex::WordStat (https://a-parser.com/docs/parsers/se-yandex-wordstat), в планах полная переработка данного парсера с добавлением нового функционала
• В
  
  SE::Yandex::ByImage (https://a-parser.com/docs/parsers/se-yandex-byimage) исправлен парсинг выдачи
• Исправлен парсинг имени пользователя в Telegram::GroupScraper (https://a-parser.com/docs/parsers/telegram-groupscraper)
• В SE::Google::ByImage (https://a-parser.com/docs/parsers/se-google-byimage) изменен набор собираемых данных и формат результата по-умолчанию, а также в целом исправлена его работа
• Исправлена работа парсеров Букварикс, но из-за высокой нагрузки на их API данные парсеры могут не работать
• Исправлен парсинг сниппетов в SE::Google::ByImage (https://a-parser.com/docs/parsers/se-google-byimage)
• SE::Google::TrustCheck (https://a-parser.com/docs/parsers/se-google-trustcheck), Check::RosKomNadzor (https://a-parser.com/docs/parsers/check-roskomnadzor), SE:uckDuckGo (https://a-parser.com/docs/parsers/se-duckduckgo), SE::Seznam (https://a-parser.com/docs/parsers/se-seznam), Shop::Wildberries:roductsList (https://a-parser.com/docs/parsers/shop-wildberries-productslist), SE::Baidu (https://a-parser.com/docs/parsers/se-baidu), SE::Google::Images (https://a-parser.com/docs/parsers/se-google-images), Rank::Ahrefs::KeywordGenerator (https://a-parser.com/docs/parsers/rank-ahrefs-keywordgenerator)

Исправления

• Исправлена ошибка в Shop::Wildberries:roductsList (https://a-parser.com/docs/parsers/shop-wildberries-productslist), из-за которой с некоторыми запросами не выводился $totalcount
• Исправлена загрузка каптч в SE::Yandex::Images (https://a-parser.com/docs/parsers/se-yandex-images)
• Устранена утечка памяти в парсере DeepL::Translator (https://a-parser.com/docs/parsers/deepl-translator), а также другие ошибки
• Исправлена работа проксичекера с socks5 IPv6 прокси
• Исправлена работа опции Don't verify TLS certs в некоторых случаях
• Устранена утечка памяти при частом запуске заданий или использовании API, утечка была связана с внутренним багом NodeJS
• Исправлено зависание Тестового парсинга при редактировании кода парсеров
• Исправлен проход по редиректам в HTML::LinkExtractor (https://a-parser.com/docs/parsers/html-linkextractor)
• Исправлен выбор домена в SE::Yahoo (https://a-parser.com/docs/parsers/se-yahoo)
• Исправлена заспамленость лога ошибками при использовании Maps::Yandex (https://a-parser.com/docs/parsers/maps-yandex)
• Исправлен сбор результатов $records в Net:NS (https://a-parser.com/docs/parsers/net-dns)
• Исправлена ошибка когда не находилась следующая страница опцией Check next page

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

XEvil 5.0: лучший в мире софт для решения капч. СКИДКИ!(https://a-parser.com/threads/7475/)

Рады представить вам разработку нашего партнёра:
XEvil 5.0 (http://botmasterru.com/) - известную во всём мире программу для решения большинства существующих капч, самую быструю и точную по сравнению с аналогами.

Программа полностью совместима с A-Parser, прекрасно справляется с капчами Yandex, Rambler, Google, BING и тысячами других.

• Решение свыше 12.000 типов капч, в том числе ReCaptcha v.2 и v.3, Yandex, Google, Microsoft (Bing), SolveMedia, BicoinFaucet, Gosuslugi и множества других.
  Подготавливаемый к релизу XEvil 6.0 также будет поддерживать решение hCaptcha, ReCaptcha Enterprize и FunCaptcha.

• никаких лимитов на число распознаваний и число потоков! можете решать хоть миллионы капч в день, это ничего не будет стоить - достаточно лишь один раз купить лицензию (она пожизненная)

• гибкий API, совместимость с сотнями программ (A-Parser, GSA, XRumer, ZennoPoster, BAS, FaucetCollector, Key Collector и др.),
  в комплекте также идет браузерный плагин XEvil Solver Plugin

• оперативные доработки по пожеланиям клиентов, дообучение новым капчам

• простой и понятный интерфейс, разберется даже школьник!

Всем нашим клиентам мы предлагаем набор купонов,
дающих скидку 60% на покупку любой лицензии XRumer + XEvil:
при покупке лицензии Стандарт вы экономите более 7000 рублей (купоны действуют до 15-го июня):

APXEVIL-60-220616-ga5zoamjuon9jb5y
APXEVIL-60-220616-ga5zoamjuoy8kx4k
APXEVIL-60-220616-ga5zoamjuoun97t4

За дополнительными купонами вы можете обратиться в техническую поддержку A-Parser (https://a-parser.com/pages/support/)

Официальный сайт программы:
http://botmasterru.com/ (http://botmasterru.com/)

Спасибо за внимание!

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Сборник рецептов #50: скриншоты выдачи Google и подсказки Авито(https://a-parser.com/threads/7490/)

50-й сборник рецептов, в который вошли парсер для создания скриншотов выдачи встроенного парсера (на примере Google) и парсер подсказок Avito.

Скриншоты выдачи Google (https://a-parser.com/resources/439/)
Демонстрация способа создания скриншотов страниц, получаемых другими парсерами.
Для примера используется парсер Google. В результате формируется файл со списком спаршенных ссылок и файл со списком созданных скриншотов. Скриншоты складываются в отдельную папку. По аналогии можно делать скриншоты выдачи, получаемой другими парсерами.

Подсказки Авито (https://a-parser.com/resources/440/)
Парсер для сбора подсказок на Авито с возможностью указать локацию и парсингом в глубину.

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Курс «Специалист по дропам и PBN», используя A-Parser (+включает лицензию) (https://a-parser.com/threads/7515/)

Наш хороший друг Николай Кодий (https://t.me/mypbn) запускает очередной набор на курс по подбору дропов и построению качественных сеток PBN, с применением A-Parser в качестве одного из основных инструментов.

Старт - 27 июня.

Что это за обучение?
Николай научит и покажет на реальных кейсах и примерах:

• какой софт нужен для поиска дропов, сколько он стоит, как продлевается и регится
• как правильно анализировать и выбирать дропы для себя и на продажу, чтобы не получить фуфло
• как строить PBN, что с ними делать дальше и как на них зарабатывать
• как с помощью знаний, которые он даёт, стать универсальным и востребованным специалистом по построению PBN под любые страны и тематики

Для кого это обучение?

• Для владельцев агентств, которые хотят выходить на заказы для буржа и открывать отдел pbn. Для тех, кто хочет нанимать подрядчиков для построения PBN, понимать процесс и контролировать качество работы.
• Для частных и работающих в найме seo-мастеров, которые хотят оказывать услугу по поиску дропов и построению сеток. Или кто хочет строить сетки под свои проекты. Для тех, кто ищет новые методы линкбилдинга.
• Для тех, кто хочет с нуля освоить в новом году новую профессию. И стать специалистом в денежной сфере — PBN.

Больше нигде вы не получите такой системной и понятной теории, такого большого практического опыта и возможности смотреть и усваивать информацию на живых вебинарах с преподавателем, отвечающим именно на ваши вопросы.

Каждый из студентов бесплатно получает весь лицензионный софт (в том числе и https://a-parser.com/), необходимый для подбора дропов.

Подробнее о курсе читайте на ленде курса - https://kurs.pbn.link
И на FB странице Николая - https://www.facebook.com/nkodiy/posts/5108189575965210

 

[A-Parser Support]

1.2.1549 - новый парсер CoinMarketCap, полностью переписаны 9 парсеров и новые опции в существующих (https://a-parser.com/threads/7536/)

Улучшения

• Добавлен новый парсер
  
  CoinMarketCap::LastPrice (https://a-parser.com/docs/parsers/coinmarketcap-lastprice)
• Парсер
  
  SE::Yandex::Register (https://a-parser.com/docs/parsers/se-yandex-register) полностью переписан, восстановлена возможность регистрировать аккаунты
• Парсеры
  
  SE::Yandex::WordStat (https://a-parser.com/docs/parsers/se-yandex-wordstat),
  
  SE::Yandex::WordStat::ByDate (https://a-parser.com/docs/parsers/se-yandex-wordstat-bydate) и
  
  SE::Yandex::WordStat::ByRegion (https://a-parser.com/docs/parsers/se-yandex-wordstat-byregion) полностью переписаны, добавлен новый функционал (выбор способа авторизации, регистрация аккаунтов "на лету", сессии...), полный список изменений здесь (https://a-parser.com/threads/7511/)
• 
  HTML::EmailExtractor (https://a-parser.com/docs/parsers/html-emailextractor) полностью переписан, благодаря использованию в качестве основы
  
  HTML::LinkExtractor (https://a-parser.com/docs/parsers/html-linkextractor) кроме собственно парсинга почт, стали доступными множество возможностей: сбор ссылок, парсинг в глубину, использование Chrome и т.д.
• Все парсеры Instagram переписаны на JS APIv2, а также адаптированы к изменениям на источнике, больше информации здесь (https://a-parser.com/threads/7502/#post-24245)
• Увеличено максимальное кол-во страниц в
  
  SE::Google (https://a-parser.com/docs/parsers/se-google) до 100
• Добавлен сбор даты со сниппета в парсерах Google
• В парсере
  
  SE::Bing (https://a-parser.com/docs/parsers/se-bing) добавлена опция Fix pagination bug, устраняющая баг в поиске Bing, из-за которого отдаются пустые 2-я и последующие страницы
• В парсере
  
  Shop::Wildberries:roductInfo (https://a-parser.com/docs/parsers/shop-wildberries-productinfo) добавлен сбор данных о продавце и возможность определять наличие товара
• В парсере
  
  SE::Startpage (https://a-parser.com/docs/parsers/se-startpage) добавлена опция Links per page и обновлен список доступных вариантов в существующих опциях
• В
  
  SE:uckDuckGo (https://a-parser.com/docs/parsers/se-duckduckgo) добавлено опцию Use HTTP/2
• 
  Net::HTTP (https://a-parser.com/docs/parsers/net-http): добавлена опция Ban Proxy Code RegEx
• Добавлена возможность задавать произвольный уровень для подзапросов (query.add)
• Добавлена опция needResults для this.parser.request

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям в верстке Google и Yandex
• Восстановлена работа с рекаптчами в SE::Google (https://a-parser.com/docs/parsers/se-google), детальная информация об изменениях здесь (https://a-parser.com/threads/7489/#post-24129)
• Исправлен парсинг $title в Shop::Wildberries:roductInfo (https://a-parser.com/docs/parsers/shop-wildberries-productinfo)
• SE::Google::TrustCheck (https://a-parser.com/docs/parsers/se-google-trustcheck), SE::Google::Images (https://a-parser.com/docs/parsers/se-google-images), Shop::Yandex::Market (https://a-parser.com/docs/parsers/shop-yandex-market), Shop::Wildberries:roductsList (https://a-parser.com/docs/parsers/shop-wildberries-productslist), SE:ogpile (https://a-parser.com/docs/parsers/se-dogpile), SE::Startpage (https://a-parser.com/docs/parsers/se-startpage)

Исправления

• Исправлена работа HTTP keep-alive, в некоторых случаях сокет закрывался раньше времени
• Исправлена ошибка в опции Follow common redirects
• Redis API: исправлена работа некоторых парсеров, проблема возникала с парсерами, использующими оптимизацию результатов

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Сборник рецептов #51: история IP-адресов и парсинг страниц контактов(https://a-parser.com/threads/7560/)

51-й сборник рецептов, в котором мы делимся парсером сервиса builtwith.com и пресетом для сбора страниц контактов и контактных данных.

Парсер BuiltWith.com. История IP-адресов и взаимосвязи (https://a-parser.com/resources/442/)
Сервис builtwith.com предоставляет пользователям различные данные которые помогают в лидогенерации, аналитике продаж и информации о доле ранка передовых технологи.
Для демонстрации возможностей А-Парсера по созданию JavaScript парсеров и обхода капчи в кастомных парсерах был создан данный пример, который реализует сбор малой части возможностей сервиса builtwith.com, а именно: сбор истории IP-адресов по нужному домену и другие веб-сайты, которые имеют общие IP-адреса с введенным доменом. Полезен SEO-специалистам для поиска сайтов конкурентов, сеток конкурентов, айпи адресов в временном промежутке.

Парсинг страниц контактов, страниц Privacy Policy и Terms of use, email, соц. сети (https://a-parser.com/resources/443/)
При помощи данного парсера можно собрать контактные данные со страниц контактов и страниц о компании. Страницы контактов часто содержат контактную форму, поэтому ссылку на нее тоже выводим в результат. Так же парсер собирает страницы Privacy Policy и Terms of use, на страницах которых иногда есть email. Дополнительно происходит сбор соц. сетей (фейсбук и твиттер). Все это необходимо для того чтобы можно было связаться по различным каналам с владельцами или администрацией сайтов для взаимодействия и сотрудничества.

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

1.2.1604 - парсинг Google People also ask, новые методы в JS парсерах, адаптация к изменениям(https://a-parser.com/threads/7594/)

Улучшения

• В
  
  SE::Google (https://a-parser.com/docs/parsers/se-google) добавлен парсинг People also ask
  
• В
  
  Rank::Ahrefs (https://a-parser.com/docs/parsers/rank-ahrefs) добавлен новый метод парсинга, данные, получаемые старым способом немного отличались от таковых в браузере
  
• Реализована защита от gzip bomb
• В
  
  SE::Yandex::Register (https://a-parser.com/docs/parsers/se-yandex-register) улучшена работа с номерами и оптимизирован процесс регистрации
• Улучшена работа с сессиями в
  
  SE::Yandex::WordStat (https://a-parser.com/docs/parsers/se-yandex-wordstat)
• Для парсеров Яндекс добавлена возможность использовать аккаунты на своих доменах
  
• Во всех парсерах Яндекса работа со smart captcha адаптирована к изменениям на источниках
  
• JS парсеры: добавлен метод this.puppeteer.logScreenshot(), он позволяет логировать скриншот текущей страницы
• JS парсеры: добавлены методы this.isContextAlive(), this.console.log, this.console.setPrefix и .setGlobalConsolePrefix, подробнее здесь (https://a-parser.com/threads/7551/) и здесь (https://a-parser.com/threads/7550/)
• В
  
  SE::Yandex::WordStat::ByDate (https://a-parser.com/docs/parsers/se-yandex-wordstat-bydate) добавлена корректная обработка ситуаций, когда по запросу нет результатов
• 
  HTML::TextExtractor (https://a-parser.com/docs/parsers/html-textextractor) - оптимизирована скорость обработки

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям в верстке Google и Яндекс
  
• 
  SE::Yandex::Register (https://a-parser.com/docs/parsers/se-yandex-register) адаптирован к изменениям на источнике
• Исправлена авторизация по логин/паролю в
  
  SE::Google::KeywordPlanner (https://a-parser.com/docs/parsers/se-google-keywordplanner)
  
• 
  SE::Google::SafeBrowsing (https://a-parser.com/docs/parsers/se-google-safebrowsing),
  
  Telegram::GroupScraper (https://a-parser.com/docs/parsers/telegram-groupscraper),
  
  SE::Baidu (https://a-parser.com/docs/parsers/se-baidu),
  
  Rank::MajesticSEO (https://a-parser.com/docs/parsers/rank-majesticseo),
  
  Shop::Wildberries::Suggest (https://a-parser.com/docs/parsers/shop-wildberries-suggest), Social::Instagram::Tag (https://a-parser.com/docs/parsers/social-instagram-tag), Social::Instagram:rofile (https://a-parser.com/docs/parsers/social-instagram-profile)

Исправления

• Исправлена проблема с зависанием HTML::TextExtractor::LangDetect (https://a-parser.com/docs/parsers/html-textextractor-langdetect) на некоторых запросах
• Исправлена работа методов tools.task.* в JS API v2
  
• Исправлена ошибка кодировки в Net::HTTP (https://a-parser.com/docs/parsers/net-http)
• Исправлена работа с прокси в Puppeteer, проблема появилась в одной из предыдущих версий
  
• Исправлена ошибка со сбором title в Shop::Wildberries:roductInfo (https://a-parser.com/docs/parsers/shop-wildberries-productinfo) в некоторых случаях
• В Shop::Wildberries:roductsList (https://a-parser.com/docs/parsers/shop-wildberries-productslist) исправлен парсинг тегов
  
• Исправлена работа SE::Bing::Translator (https://a-parser.com/docs/parsers/se-bing-translator) в некоторых случаях
  
• Исправлена некорректная инициализация Node на лицензии Enterprise
  
• В SE::Bing (https://a-parser.com/docs/parsers/se-bing) - исправлена ошибка с выводом $pages

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Как использовать A-Parser для крауд-маркетинга - (https://a-parser.com/threads/7613/#post-24406)

youtube.com/watch ? v=X6Gp5VBp_Ig

Наши друзья из Ant-Team.ru сняли полезное видео о том, как использовать A-Parser для крауд-маркетинга.

Крауд-маркетинг использует отзывы и комментарии на сторонних ресурсах для продвижения компании.

В видео показано, как выставить настройки в A-Parser, чтобы парсить поисковую выдачу Яндекс по информационным запросам, и какие переменные нужны для парсинга. Дана подробная инструкция, как добавлять в A-Parser прокси и сервисы разгадывания капчи.

Также вы узнаете, как проверять качество ссылочной массы, рейтинг домена, беклинки и т.д.


Подписывайтесь на их телеграм-канал, там много полезной информации по SEO: (https://t.me/seoantteam)

 

[A-Parser Support]

Автоматизация в SEO: как заменить отдел джунов парсером? - (https://a-parser.com/threads/7627/)

Совсем недавно прошла юбилейная десятая онлайн-конференция по интернет-маркетингу Baltic Digital Days. Специалист по SEO Георгий Шилов выступил с докладом на тему "Автоматизация в SEO: как заменить отдел джунов парсером?"

В докладе содержится много полезной информации по использованию A-Parser. Вы узнаете:

• Что такое парсер
• Сколько стоит джун в SEO
• Проблемы в SEO
• Автоматизация рутинных задач
• Кластеризация
• Мониторинг позиций
• Комбинируем пресеты для решения любых задач
• Тех. анализ и мониторинг

и другие решения с помощью A-Parser

Смотреть видео на YouTube - (https://youtu.be/tmRtSdcuqss?t=24822)

 

[A-Parser Support]

Сборник рецептов #52: чекер e-mail, отзывы Wildberries и двойные ссылки в выдаче Google(https://a-parser.com/threads/7648/)

52-й сборник рецептов, в котором опубликованы парсер для универсальной проверки e-mail, парсер отзывов из Wildberries и пресет для сбора двойных ссылок одного сайта из выдачи Google.

Универсальный чекер e-mail (https://a-parser.com/resources/444/)
Парсер для универсальной проверки почт. Делается проверка на валидность, на наличие MX записей и на существование почты.

Парсер отзывов Wildberries Reviews (https://a-parser.com/resources/445/)
Парсинг отзывов из Wildberries в CSV таблицу с возможностью задать локацию и необходимое кол-во отзывов.

Сбор двойных ссылок одного сайта из Google выдачи (https://a-parser.com/resources/446/)
Парсинг двойных ссылок одного сайта с первой страницы выдачи Google в CSV таблицу.

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

– https://t.me/a_parser

- https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Курс "Специалист по дропам и PBN с нуля до профи" используя A-Parser (+включает лицензию) - https://a-parser.com/threads/7663/

Наш хороший друг Николай Кодий (https://t.me/mypbn) запускает очередной набор на курс по подбору дропов и построению качественных сеток PBN, с применением A-Parser в качестве одного из основных инструментов.

Старт - 26 сентября.

Что это за обучение?
Практический курс, после которого вы научитесь и узнаете:

— какой софт нужен для поиска дропов, сколько он стоит, как продлевается и регится
— как правильно анализировать и выбирать дропы для себя и на продажу, чтобы не получить фуфло
— как строить PBN, что с ними делать дальше и как на них зарабатывать
— как с помощью знаний, которые он даёт, стать универсальным и востребованным специалистом по построению PBN под любые страны и тематики

Для кого это обучение?
— Для seo-мастеров, которые хотят продвигать сложные ниши в различных гео. Для тех, кто ищет новые методы линкбилдинга. Для тех, кто хочет в текущей компании повысить компетенции и доход
— Для тех, кто хочет освоить в новом году новую профессию. И стать специалистом в PBN

Больше нигде вы не получите такой системной и понятной теории, такого большого практического опыта и возможности смотреть и усваивать информацию на живых вебинарах с преподавателем, отвечающим именно на ваши вопросы.

Каждый из студентов бесплатно получает весь лицензионный софт (в том числе и A-Parser), необходимый для подбора дропов.

Подробнее о курсе читайте на ленде курса - https://kurs.pbn.link
И на FB странице Николая - https://www.facebook.com/nkodiy/posts/5305252276258938

 

[A-Parser Support]

1.2.1661 - новые парсеры: Яндекс Балабоба и позиции в DuckDuckGo, улучшения во встроенных парсерах(https://a-parser.com/threads/7696/)

Улучшения

• Добавлен парсер позиций DuckDuckGo:
  
  SE:uckDuckGo:osition (https://a-parser.com/docs/parsers/se-duckduckgo-position)
• Добавлен парсер Яндекс Балабоба:
  
  SE::Yandex::Balaboba (https://a-parser.com/docs/parsers/se-yandex-balaboba)
• Реализована работа с XEvil через API Antigate v2
• Добавлена передача кук Google при включении опции ReCaptcha2 pass proxy в
  
  SE::Google (https://a-parser.com/docs/parsers/se-google)
• Обновлен список доменов в
  
  SE::Yandex (https://a-parser.com/docs/parsers/se-yandex)
• В связи с тем, что Яндекс теперь всегда выдает по 10 результатов на страницу, в
  
  SE::Yandex (https://a-parser.com/docs/parsers/se-yandex) убран параметр Links per page
• В
  
  HTML::LinkExtractor (https://a-parser.com/docs/parsers/html-linkextractor) и
  
  Check::BackLink (https://a-parser.com/docs/parsers/check-backlink) добавлен сбор <a> тега
• В
  
  Shop::AliExpress (https://a-parser.com/docs/parsers/shop-aliexpress) добавлена поддержка сессий
• В
  
  HTML::EmailExtractor (https://a-parser.com/docs/parsers/html-emailextractor) добавлена опция Skip meta tags, при ее включении указывает парсеру не собирать почты в meta тегах
• В парсере
  
  DeepL::Translator (https://a-parser.com/docs/parsers/deepl-translator) актуализирован список языков

Исправления в связи с изменениями в выдаче

• Исправлено определение опечатки по запросу в
  
  SE::Yandex (https://a-parser.com/docs/parsers/se-yandex)
• 
  SE::Yandex::WordStat (https://a-parser.com/docs/parsers/se-yandex-wordstat) - исправлена авторизация в режиме HTTP
• Исправлено определение рекламы в SE::Yandex:irect (https://a-parser.com/docs/parsers/se-yandex-direct)
• Исправлен Shop::Wildberries:roductsList (https://a-parser.com/docs/parsers/shop-wildberries-productslist) при парсинге по ключевым словам
• SE::Baidu (https://a-parser.com/docs/parsers/se-baidu) - исправлена работа в тех случаях, когда по запросу нет результатов
• SE::Google (https://a-parser.com/docs/parsers/se-google), SE::Yandex (https://a-parser.com/docs/parsers/se-yandex), SE::Bing (https://a-parser.com/docs/parsers/se-bing), SE::Google::Images (https://a-parser.com/docs/parsers/se-google-images), Rank::MajesticSEO (https://a-parser.com/docs/parsers/rank-majesticseo), Rank::MOZ (https://a-parser.com/docs/parsers/rank-moz), Shop::AliExpress (https://a-parser.com/docs/parsers/shop-aliexpress), Shop::Amazon (https://a-parser.com/docs/parsers/shop-amazon), SE:interest (https://a-parser.com/docs/parsers/se-pinterest)

Исправления

• Исправлен выбор региона в SE::Yandex (https://a-parser.com/docs/parsers/se-yandex)
• Исправлена обработка url с кириллицей в PAA SE::Google (https://a-parser.com/docs/parsers/se-google)
• Исправлена работа SE::Google::KeywordPlanner (https://a-parser.com/docs/parsers/se-google-keywordplanner), в некоторых случаях парсер не видел ответ и ошибочно повторял попытки
• Исправлена ошибка логина в парсере SE::Yandex:irect (https://a-parser.com/docs/parsers/se-yandex-direct)
• В SE::Yandex::Register (https://a-parser.com/docs/parsers/se-yandex-register) исправлен баг при отображении Яндексом ошибки о некорректном номере телефона или о других проблемах
• SE::Google::Translate (https://a-parser.com/docs/parsers/se-google-translate) - в некоторых случаях парсинг завершался с ошибкой
• Исправлен баг с ошибочным выводом результатов в Net::HTTP (https://a-parser.com/docs/parsers/net-http) при сборе через регулярку, в случаях когда один запрос отработал успешно, а другой нет, и второй вывел результаты первого
• Исправлена ошибка с висящими процессами Chrome после завершения задания на Windows 11
• Исправлена доступность fs.constants

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Сборник статей #16: вывод результатов в JSON, синхронизации файлов и SEO кейс продвижения сайта(https://a-parser.com/threads/7712/)

Представляем 16-й сборник статей, в который вошли статья о вариантах вывода результатов в JSON виде, статья о синхронизации А-Парсеров на разных ПК с помощью Google Диск и SEO кейс продвижения сайта с выходом на иностранный рынок.

Обзор вариантов вывода результатов в JSON виде (https://a-parser.com/resources/448/)

Полный обзор всех возможных способов вывода результатов в JSON виде с примерами: вывод в JSON для одиночных запросов, формирование JSON построчно, формирование объекта в памяти и вывод результатов в JSON в конце работы задания.

Синхронизация А-Парсеров на разных ПК с помощью Google Диск (Google Drive) (https://a-parser.com/resources/449/)

В этой статье описывается как синхронизировать файлы А-Парсера, конфиги, все настройки которые вы сделали на одном ПК, с другим ПК.
В качестве инструмента будет использоваться простой и бесплатный Google Диск (Google Drive) с помощью которого вы можете хранить и передавать коллегам файлы и папки, а также работать над ними вместе с другими пользователями на компьютере или мобильном устройстве.

Как мы потратили 1 млн рублей для выхода на иностранный рынок SEO: кейс с расходами и результатами (https://vc.ru/seo/508763-kak-my-potratili-1-mln-rubley-dlya-vyhoda-na-inostrannyy-rynok-seo-keys-s-rashodami-i-rezultatami)

Статья на vc.ru о том, как мы за 3 месяца вывели сайт с нуля в топ по Южной Африке. Делимся готовой пошаговой схемой быстрого вывода сайта на иностранный рынок, с данными по нагрузке сотрудников, расходами, таблицами и примерами ТЗ.
Для массовой проверки выдачи Google использовался Python и парсер A-Parser (https://a-parser.com/).
Кейсы по применению нашего парсера Google и его описание:
https://a-parser.com/docs/parsers/se-google (https://a-parser.com/docs/parsers/se-google)

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь (https://a-parser.com/threads/3464/).

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/c/AParser_channel) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Сборник рецептов #53: популярные запросы Google Trends, парсер yep.com и проверка домена в выдаче(https://a-parser.com/threads/7728/)

53-й сборник рецептов, в котором собраны парсер популярных запросов за сутки на Google Trends, парсер yep.com и пресет для проверки на содержание доменов в выдаче.

Парсинг популярных запросов за сутки Google Trends (https://a-parser.com/resources/450/)
Парсер для сбора поисковых трендов за сутки с Гугл Трендс (https://trends.google.com/trends/trendingsearches/daily). Собираются дата, название запроса, трафик, похожие запросы и ссылка на позицию.

Парсер yep.com (https://a-parser.com/resources/441/)
Простой пресет для парсинга поисковой системы yep.com.

Yandex - проверка на содержание доменов в выдаче (https://a-parser.com/resources/447/)
Пресет для проверки на содержание доменов в выдаче с записью в разные файлы результатов по условию.

Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)!
Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser).

– https://t.me/a_parser

– https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

1.2.1683 - новый парсер Cloudflare::Radar, поддержка сервиса CaptchaAI, исправления ошибок - https://a-parser.com/threads/7743/

Улучшения

• Добавлен новый парсер
  
  Cloudflare::Radar, определяет категории доменов
• В парсеры
  
  Util::ReCaptcha2,
  
  Util::ReCaptcha3,
  
  Util::hCaptcha добавлена поддержка сервиса CaptchaAI
• В
  
  Rank::Ahrefs добавлен сбор рейтинга страницы (URL rating)
• Обновлен список языков в
  
  DeepL::Translator

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям в верстке Google и Яндекс
• Исправлен сбор totalcount в
  
  SE::Yandex для некоторых запросов
• Исправлен выбор региона в
  
  SE::Yandex:irect
• Исправлена работа
  
  Rank::Ahrefs::KeywordGenerator c Country - United Kingdom
• В
  
  Shop::Yandex::Market по некоторым запросам не было результатов
• 
  SE::Google::Images,
  
  Rank::Ahrefs::KeywordGenerator, Shop::Yandex::Market

Исправления

• Исправлено лишнее использование сессии на последней попытке в SE::Google
• Исправлен парсинг поисковой выдачи Яндекс, когда в выдаче только 1 результат
• Исправлена ошибка в Telegram::GroupScraper, из-за которой парсились не все имена и ссылки на логины
• Исправлен баг в SE::Yandex:osition, из-за которого ошибочно осуществлялся поиск по запросу вместе с искомым доменом
• Исправлена проблема в Check::RosKomNadzor, из-за которой при массовом парсинге иногда не менялась прокси
• В HTML::LinkExtractor исправлен сбор внутренних ссылок после редиректа
• Puppeteer: улучшена работа с сайтами, запрашивающими доступ в модальном диалоге

 

[A-Parser Support]

Обновленные пресеты в каталоге A-Parser - https://a-parser.com/threads/7758/

Обновление пресетов в Каталоге примеров A-Parser

Парсинг базы фильмов из IMDB
Парсер получает данные о каждом фильме и записывает их в результат: название, дата выхода, рейтинг, рекомендаций к ним и другое

Получение показателей скорости загрузки сайтов с помощью Chrome UX Report Compare Tool
Получение показателей скорости загрузки сайтов с помощью Chrome UX Report Compare Tool. Используется технология Chrome User Experience Report (CrUX) - это набор данных, отражающий, как реальные пользователи Chrome взаимодействуют с популярными сайтами в Интернете.

Парсер профиля YouTube
Парсинг данных о Youtube канале: дата регистрации, количество просмотров, страна, email из описания (если есть), описание, ссылки

Парсинг istio.com
Парсер для анализа текстов на сервисе istio.com. С его помощью можно определить такие показатели как тошнота, водность, словари, тематика, статистика и т.п. В качестве запросов можно подавать как тексты, так и ссылки на страницы.

Оценка страниц с использованием Lighthouse
Парсер для оценки производительности, доступности и оптимизации веб-страниц с использованием технологии Lighthouse. Lighthouse - это автоматизированный инструмент с открытым исходным кодом для улучшения качества веб-страниц. С помощью данной технологии осуществляется аудит сайта и можно получить такие показатели как производительность, доступность, оценку доступности для поисковых систем и т.д.

Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда - https://a-parser.com/threads/3464/ , самые интересные и востребованные мы обязательно реализуем!

- https://t.me/a_parser

- https://a-parser.com/pages/affiliate/

 

[A-Parser Support]

Видео урок: Сбор форм комментариев с помощью A-Parser(https://a-parser.com/threads/7790/)

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан сбор форм комментариев.

Данный видео урок показывает, как собрать сайты, где можно оставить свой комментарий в форму комментирования статей.

Плейлист со всеми видео уроками от DIM STUDIO (https://www.youtube.com/playlist?list=PLbbGw_gNNUTtMuALSjqUXcrgGQaSV1thm)

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser (https://www.youtube.com/c/AParser_channel) и DIM STUDIO (https://www.youtube.com/channel/UCzTUeWXwm4YApVVXTWwySrw)! (https://www.youtube.com/c/AParser_channel)

- https://t.me/a_parser

- https://a-parser.com/pages/affiliate/