[Десктопный софт] A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

gptvspp-short.webp


Какие сайты получают видимость в ChatGPT и Perplexity — и можно ли судить об этом по одному ручному запросу?

Мы закончили большое исследование источников в ответах ChatGPT и Perplexity. Нас интересовали не отдельные удачные скриншоты, а системная картина: какие домены появляются в ответах ИИ, насколько различаются две системы и что происходит со списком источников при смене страны и прокси.

Для эксперимента собрали и проанализировали 17 873 источника по 12 слот-играм, 6 коммерческим интентам и 4 странам. Запросы запускались через резидентские прокси целевых стран и смешанный прокси-пул, а ссылки нормализовались и дедуплицировались по паре query + URL.

Уже на первом сравнении стало понятно, почему единичной ручной проверки недостаточно. После нормализации у ChatGPT было 1 223 домена, у Perplexity — 2 019, а общими оказались только 450 доменов. Коэффициент сходства между системами составил всего 16,12%. ChatGPT чаще выводил официальных провайдеров и Reddit, а Perplexity — классические аффилейт-обзорники.

Но количество цитирований оказалось только половиной картины.

  • В ChatGPT сайт Pragmatic Play лидировал по общей частоте — 303 цитирования. При этом только 23,1% его ссылок вошли в Top-3.
  • У Reddit было меньше цитирований — 182, зато 68,7% ссылок оказались в первой тройке сохранённого списка источников.
  • Получается, лидер по числу ссылок и лидер по заметности — не обязательно один и тот же домен.


Отдельно проверили влияние IP. В контрольном тесте из запросов убрали название страны и отправляли одинаковые англоязычные вопросы через резидентские прокси Новой Зеландии, Бразилии, Мексики и Казахстана.
Даже без географических подсказок в тексте пересечение доменов у ChatGPT составило только 16,28%. То есть один запрос с одного IP показывает лишь конкретный срез, а не устойчивую картину видимости.

Именно здесь разовая выгрузка превращается в задачу для регулярного мониторинга: кто удерживается в источниках, кто появляется впервые, кто выпадает и как меняется доля Top-3 по странам и режимам прокси.
A-Parser позволяет поставить такой сбор по расписанию и получать данные в одинаковом формате без ручного копирования ответов.

В полной теме:

  • методика эксперимента и формула запросов;
  • сравнение ChatGPT и Perplexity;
  • страновые срезы и влияние разных режимов прокси;
  • анализ числа цитирований, средней позиции в массиве источников и доли Top-3;
  • открытый датасет основного сбора и контрольного теста;
  • готовые пресеты для ChatGPT и Perplexity, чтобы повторить сбор на своей нише.


Открыть исследование, посмотреть результаты и скачать материалы

Если уже проверяли видимость своих сайтов или конкурентов в ответах ИИ, интересно сравнить опыт: насколько сильно у вас меняется набор источников между ChatGPT, Perplexity и разными GEO?
 
hero_light_2_800px.jpg

В каких нишах небольшие каналы выигрывают в выдаче YouTube — и почему высокий ранг не гарантирует просмотры?
Представьте парадокс: видео автора с 700 подписчиками забирает 2,7 миллиона просмотров и 3-е место в поисковой выдаче YouTube по iPhone, а в финансовых темах — крипте и дропшиппинге — ни одно из 59 видео небольших каналов не преодолевает планку в 20 000 просмотров. При этом в обзорах криптобирж авторы небольших каналов занимают каждый третий ролик в ТОП-10: 45 из 136, или 33,09%.
Чтобы выяснить, где алгоритмы дают реальный охват, а где ранжирование оказывается «холостым», мы провели исследование выдачи с помощью A-Parser. Для эксперимента собрали 34 070 строк поисковой выдачи YouTube по 28 темам и 343 подсказкам, сведя датасет к 21 537 уникальным видео.
Главное открытие: высокий ранг в поиске и реальные просмотры — это две разные задачи.
  • Визуальные ниши дают шанс малым авторам: В распаковках гаджетов, фитнесе, DIY и коротких роликах с демонстрацией AI-инструментов доля прорывных видео от небольших каналов (от 100 до 10 000 подписчиков, набравших от 20 000 просмотров и превысивших число подписчиков в 10+ раз) достигала 23,15% от уникальных видео в ТОП-10.
  • Коммерческие ниши дают позиции, но не дают просмотров: В темах криптобирж, ботов и дропшиппинга малые каналы формировали 33–35% результатов в ТОП-10, но ни один из 59 роликов не достиг 20 000 просмотров. Позиция в поиске есть, а просмотров нет.
  • Один ролик закрывает сразу кластер подсказок: 22,38% видео появлялись минимум по двум поисковым подсказкам, а отдельные ролики-лидеры ранжировались сразу по 21 подсказке.
A-Parser позволяет превратить этот процесс из ручного просмотра сотен запросов в регулярный автоматизированный мониторинг ниши с помощью 3-шаговой цепочки: SE::YouTube::Suggest ➔ SE::YouTube ➔ SE::YouTube::Video.
В полной теме:
  • подробная методика эксперимента и структура датасета на 34 070 строк;
  • 4 фильтра для поиска прорывных видео небольших авторов;
  • разбор 3 групп тем (визуальные, коммерческие, с ограничениями фильтрации);
  • анализ тегов и модификаторов заголовков для составления ТЗ на контент;
  • открытый CSV-датасет и готовый пресет A-Parser для повторения исследования.
Открыть исследование, посмотреть результаты и скачать материалы
Если вы уже анализировали выдачу YouTube в своих нишах — поделитесь опытом: в каких тематиках вам чаще попадаются выстрелившие микро-каналы, а где первые места намертво закрепились за гигантами?
 
hero.png

Как выгрузить архив сайта из Wayback Machine: CDX API, чистый HTML и Markdown
Старые статьи, цены и описания исчезают из живого веба вместе с редизайнами и удалёнными разделами. По данным Pew Research Center, 38% страниц из выборки 2013 года были недоступны к октябрю 2023 года. Снимки Wayback Machine помогают вернуть этот исторический слой, но обычный обход архива медленный и приносит в данные панели Wayback и служебные скрипты.
В A-Parser для этой задачи есть два практических сценария:
  • No-Code-конвейер: Net::HTTP ➔ HTML::ArticleExtractor получает URL через CDX API, скачивает чистые снимки и сохраняет результат в JSONL.
  • Готовый TypeScript-парсер JS::WaybackCDX: находит снимки, нормализует и дедуплицирует URL, очищает текст через Mozilla Readability и сохраняет отдельные Markdown-файлы с YAML Frontmatter.
  • Режим id_: в ссылке на снимок убирает тулбар и внедрённые скрипты Wayback, чтобы в выгрузку попал исходный HTML страницы.
Открыть руководство, скачать готовый парсер и пресеты
 
aplogo_1788174938523.png


A-Parser 1.2.3593: обход защиты Google /goto, восстановлен SE::Yandex в HTTP и переписан Google Trends

Вышло свежее обновление A-Parser 1.2.3593. Коротко о ключевых изменениях:

  • Обход новой защиты Google: поддержан обход редиректов /goto (когда Google скрывает реальные ссылки из выдачи) и обновлен обход защиты.
  • SE::Yandex: восстановлена стабильная работа в режиме HTTP.
  • SE::Google::Trends с нуля: парсер полностью переписан, возвращен стабильный сбор и добавлена опция Parse to level для глубокого парсинга связанных трендов.
  • Стабильность FreeAI::ChatGPT: устранены утечки памяти при длительном сборе, ошибки селекторов и обрезание текста ответов.
  • Яндекс Карты и Whois: исправлены просадки скорости в Maps::Yandex и добавлено 12 новых доменных зон в Net::Whois.
  • А также другие улучшения и исправления.


Подробный список изменений, инструкции по настройке и обсуждение релиза:
Читать подробнее на форуме A-Parser
 
hero_1200px.jpg


Как собрать B2B-базу компаний с e-mail из Google Maps на полном автопилоте?

Ручной сбор контактов для B2B-продаж и холодных рассылок отнимает кучу времени: найти организацию на картах, скопировать телефон и адрес, перейти на сайт и вручную искать раздел с контактами. На сотнях и тысячах организаций это превращается в бесконечную рутину.

В A-Parser эту цепочку можно автоматизировать в один сквозной запуск: связка Maps::Google и HTML::EmailExtractor выгружает карточки организаций (название, телефон, адрес, рейтинг, отзывы, сайт) и сразу находит опубликованные публичные e-mail на их сайтах. Вместо «голого» списка почт получается готовая таблица с полным контекстом для персонализации.

В статье разобрали пошаговую настройку связки, частые ошибки и приложили готовый пресет для импорта в один клик.

Читать статью, посмотреть пример таблицы и скачать готовый пресет

 
email_header_1200x600_pure_white.png


Новый личный кабинет A-Parser и бонус до 15%

Мы обновили личный кабинет A-Parser. Теперь всё необходимое для работы собрано в одном месте:

  • информация о лицензии;
  • управление прокси;
  • пополнение баланса;
  • история платежей и доступных средств.


В честь обновления действует специальное предложение на пополнение баланса:

  • при пополнении от $500 — дополнительно 10%;
  • при пополнении от $1,000 — дополнительно 15%.


Максимальный размер бонуса не ограничен.

Как это работает:

  • пополняете баланс на $500 — получаете $550;
  • пополняете баланс на $1,000 — получаете $1,150.


Бонус можно использовать для оплаты продуктов и сервисов A-Parser. Акция действует при любом доступном способе оплаты.

 
aparser-ru.png


Поддержка Google /goto, несколько Unlimited-подписок и бонус до 15%

В A-Parser 1.2.3614 модуль SE::Google получил нативную поддержку нового формата ссылок Google /goto. Он декодирует ссылки на лету и возвращает прямые URL без дополнительных запросов по редиректам.

Обновлено управление Unlimited-прокси:

  • несколько подписок в одном аккаунте для разных компьютеров и серверов;
  • отдельные тариф, количество потоков, период и IP-адрес доступа для каждой подписки;
  • автопродление с баланса и уведомления об окончании подписки.


До 15 сентября действует бонус при пополнении баланса:

  • от $500 — 10%, на баланс поступит $550;
  • от $1 000 — 15%, на баланс поступит $1 150.


Бонус действует при любом доступном способе оплаты и подходит для оплаты любых продуктов и сервисов A-Parser.

Читать новость

 
aplogo_1789387511731.png


Обход /goto в SE::Google, восстановление GoogleAI, eBay, Wildberries и последний день бонуса до 15%

🎁 15 сентября — последний день акции на пополнение баланса

Напоминаем, что 15 сентября заканчивается специальное предложение на пополнение баланса в личном кабинете A-Parser:
  • при пополнении от $500 — бонус 10% (на баланс поступит $550);
  • при пополнении от $1 000 — бонус 15% (на баланс поступит $1 150).

Количество пополнений не ограничено, акция действует на все способы оплаты.

👉 🎁 Пополнить баланс и получить бонус 🎁

Вышло обновление A-Parser 1.2.3628

В этом релизе мы добавили решение проблемы с новой защитой Google, расширили возможности работы с нейросетями и восстановили работу популярных парсеров интернет-магазинов.

Ключевые изменения релиза:

  • Обход /goto в SE::Google: Google начал скрывать реальные ссылки в выдаче за редиректами /goto. В парсере реализован новый нативный обход, а в переменную $serp добавлено поле $gotolink для точного сопоставления ссылок с исходным кодом страницы. Также обновлена работа парсера под Windows и Linux.
  • Выбор моделей в FreeAI::DeepAI: теперь можно выбирать нужную модель для генерации и анализа (доступны Standard, GPT-4o mini, GPT-5 Nano, Llama 3.3 70B, Gemini 2.5 Flash Lite, DeepSeek V4 Flash и др.).
  • Восстановление парсеров: полностью восстановлена работа Shop::eBay (включая сбор $old_price для Испании) и Shop::Wildberries::ProductInfo. Парсер FreeAI::GoogleAI переписан на Playwright.
  • Исправления в выдаче: в SE::DuckDuckGo добавлен сбор рекламных результатов; в SE::Yandex исправлен сбор доменов рекламы в мобайле и исключены популярные товары из результатов; в FreeAI::ChatGPT восстановлен вывод всех полей; в Net::HTTP исправлен Pages Count; в SE::Google::Images исправлена работа с каптчей.


👉 Читать полный релиз и обсуждение на форуме 👈

 
new2_1200px.png


Без слов «вред» и «развод»: как искать в Google Suggest вопросы для проверки

Цена, характеристики и преимущества не всегда отвечают на вопросы, которые возникают у человека перед действием. В новом исследовании показали, как собрать такие вопросы из нейтральных поисковых подсказок.

A-Parser собирает и дедуплицирует фразы Google Suggest на двух уровнях. Gemini через OpenRouter получает полный список по каждому исходному запросу и возвращает короткий перечень возможных вопросов, сомнений и ограничений для проверки редактором. Это не частотность и не готовый диагноз аудитории.

В теме — методика сбора, результаты и практический сценарий для FAQ, интервью и посадочных страниц.

Читать исследование на форуме
 
hero_1000px.png


🍺 Мониторинг Reddit с AI-фильтрацией и алертами в Telegram — на примере r/Oktoberfest

Новый практический кейс о том, как с помощью A-Parser отслеживать новые публикации на Reddit и получать в Telegram только действительно важные события.

В качестве примера используется r/Oktoberfest: система ищет предложения и запросы на свободные места за столами, билеты и компанию, отсекая посты про погоду, одежду, транспорт и другие общие обсуждения.

Цепочка работает полностью автоматически:
Reddit::Posts → FreeAI::DeepAI → Net::HTTP

  • Сбор без дублей: встроенная база уникализации redditArticleSeen отсекает уже просмотренные записи, исключая повторные запросы к ИИ и дубликаты сообщений.
  • Смысловой фильтр: DeepAI извлекает категорию (SELL, BUY, COMPANY, ALERT) и отделяет целевой сигнал от обычного информационного шума сообщества.
  • Мгновенные алерты: Net::HTTP отправляет форматированное уведомление прямо в Telegram-чат или канал.


Во время теста монитор обработал ~100 свежих постов и отобрал ровно 18 целевых событий. В статье подробно разобрана архитектура связки, нюансы классификации и приложен готовый пресет для импорта в один клик.

👉 Читать практический кейс на форуме 👈


🌐 Новые тарифы Premium Mix Proxy и бесплатный тест на 3 дня

Мы также расширили линейку Premium Mix Proxy в личном кабинете и добавили 4 новых тарифа под разные сценарии:

На неделю (под разовые проекты, тесты и небольшие объемы):
  • 20 ГБ на неделю — $19 → $0.95/ГБ (удобно зайти под конкретную задачу)
  • 400 ГБ на неделю — $200 → $0.50/ГБ (всего $0.50 за 1 ГБ для плотной работы)


На месяц (под постоянные задачи и регулярный поток):
  • 100 ГБ на месяц — $85 → $0.85/ГБ
  • 200 ГБ на месяц — $140 → $0.70/ГБ


Новые пробные тарифы:
  • Premium Mix Proxy — 3 ГБ на 3 дня БЕСПЛАТНО
  • Premium Proxy — 1 ГБ на 3 дня за $3 для новых пользователей


Прокси подходят под любой софт, антидетект-браузеры (AdsPower, Dolphin, Octo), парсеры и скрипты (поддержка HTTP и SOCKS5, безлимитные потоки).

👉 🎁 Подключить триал или выбрать тариф в личном кабинете 🎁

 
Войдите или зарегистрируйтесь для ответа.
Назад
Сверху