A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

Дайджест новостей A-Parser

Парсер yep.com
Обновление парсера поисковой системы yep.com

• Адаптация к изменениям на источнике
• Улучшена проверка получаемого ответа
• В вывод добавлены анкоры и сниппеты
• Результат по-умолчанию теперь выводится в CSV

Аукцион доменов REG.RU
Обновление парсера аукциона освобождающихся доменов с возможностью фильтрации

• Парсер переписан на JS и адаптирован к изменениям на источнике
• Реализован обход защиты
• Изменен набор собираемых данных

AI content detector
Обновление парсера для проверки текстов на предмет их генерации сервисами ИИ

• Адаптация к изменениям на источнике

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 

1.2.2712 - исправления в связи с ужесточением парсинга со стороны Google(https://a-parser.com/threads/9130/)

Внеочередной релиз, в котором доступны все последние наработки для решения проблем, связанных с ужесточением парсинга со стороны Google.

Также в релиз вошли следующие изменения:
В SE::Yandex::Register(https://a-parser.com/docs/parsers/se-yandex-register) исправлен ряд проблем и добавлена поддержка кук

В Net::HTTP(https://a-parser.com/docs/parsers/net-http) улучшена обработка cookies, добавлена опция Follow meta refresh

Maps::Google(https://a-parser.com/docs/parsers/maps-google) адаптирован к изменениям в выдаче
Добавлена поддержка POST запросов при обходе Cloudflare

В парсерах Instagram добавлена возможность указания списка кук
Добавлен автоматический переход на http/1.1 если сервер не поддерживает http2

В Browser::ScreenshotsMaker(https://a-parser.com/docs/parsers/browser-screenshotsmaker) добавлено открытие/закрытие страницы при каждом запросе вместо открытия/закрытия один раз на поток

Улучшена работа SE::Bing(https://a-parser.com/docs/parsers/se-bing)

(https://t.me/a_parser)

(https://a-parser.com/pages/affiliate/)

 

Видео урок: Пробив доменов конкурентов с помощью Net::Whois

Новое видео по работе с A-Parser от DIM STUDIO в котором показано как пробить список доменов на сроки регистрации.



Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

 

Обновление цен на Proxies Premium(https://a-parser.com/threads/9150/)

Сравните старые и новые цены: чем больше объём — тем ниже цена за гигабайт.
Proxies Premium Тарифы на 1 неделю:
50 ГБ Было: $75 ($1.5 / Gb) → Стало: $65 ($1.3 / Gb)
100 ГБ Было: $140 ($1.4 / Gb) → Стало: $120 ($1.2 / Gb)
200 ГБ Было: $260 ($1.3 / Gb) → Стало: $220 ($1.1 / Gb)
500 ГБ Было: $600 ($1.2 / Gb) → Стало: $500 ($1 / Gb)
Proxies Premium Тарифы на 1 месяц:
50 ГБ Было: $95 ($1.9 / Gb) → Стало: $85 ($1.7 / Gb)
100 ГБ Было: $170 ($1.7 / Gb) → Стало: $140 ($1.4 / Gb)
300 ГБ Было: $450 ($1.5 / Gb) → Стало: $390 ($1.3 / Gb)
500 ГБ Было: $650 ($1.3 / Gb) → Стало: $550 ($1.1 / Gb)
1000 ГБ Было: $1200 ($1.2 / Gb) → Стало: $1000 ($1 / Gb)
3000 ГБ Было: $3300 ($1.1 / Gb) → Стало: $3000 ($1 / Gb)
5000 ГБ Было: $5000 ($1 / Gb) → Стало: $4500 ($0.9 / Gb)
PremiumMix (No geo targeting) на 1 неделю:
50 ГБ Было: $45 ($0.9 / Gb) → Стало: $40 ($0.8 / Gb)
100 ГБ Было: $80 ($0.8 / Gb) → Стало: $70 ($0.7 / Gb)
200 ГБ Было: $140 ($0.7 / Gb) → Стало: $120 ($0.6 / Gb)
PremiumMix (No geo targeting) на 1 месяц:
500 ГБ Было: $300 ($0.6 / Gb) → Стало: $250 ($0.5 / Gb)
1000 ГБ Было: $500 ($0.5 / Gb) → Стало: $400 ($0.4 / Gb)
3000 ГБ Было: $1200 ($0.4 / Gb) → Стало: $900 ($0.3 / Gb)

(https://t.me/a_parser)

(https://a-parser.com/pages/affiliate/)

 

Дайджест новостей A-Parser

Очистка текстов, сгенерированных ИИ

Новый парсер для удаления из текстов признаков их генерации системами ИИ

• Поддерживает запросы в виде текстов, файлов и папок с файлами
  
• Позволяет настраивать опции очистки
  
• Работает без http запросов и прокси

Парсинг Авито

Обновление парсера Avito

• Сбор телефонов теперь происходит через браузер
  
• Добавлена функция Parse phone max pages, которая задает максимальное количество окон браузера для сбора телефонов.
  
• Также исправлены другие проблемы, которые были со сбором: фото, просмотров и локации

Парсер Google Places

Обновление парсера Google Places

• Добавлено получение cid компании для формирования ссылки на нее в гугл-картах

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 

1.2.2840 - обновление NodeJS, многостраничный парсинг Гугл карт, изменение таймаута в Util парсерах

Улучшения

• NodeJS обновлен до версии 22.15.1
• Во всех парсерах Яндекс теперь используется общий модуль авторизации (где это необходимо)
• SE::Yandex - добавлена возможность отключать сессии
• Maps::Google - реализована возможность многостраничного парсинга, добавлен сбор одиночного результата
• OpenAI::ChatGPT - обновлены модели, добавлена опция Additional options для указания дополнительных параметров
• Check::BackLink - проверка robots.txt теперь учитывает параметр Don't verify TLS certs
• В Util::AntiGate добавлена поддержка Botlab для текстовых каптч
• В Util::* парсерах изменено значение таймаута по-умолчанию:
  • для AntiCaptcha - 5 сек
  • для других провайдеров - 15 сек
  • это обновление важно для всех, кто сталкивался с блокировкой от сервисов разгадывания за слишком большое количество запросов с ошибками

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям на источнике в SE::Google
• Исправлена проверка типа выдачи в SE::Yandex
• Исправлено разгадывание smart captcha в SE::Yandex
• Исправлена проблема со сбором сниппетов в SE::Yahoo
• OpenAI::ChatGPT - исправлена ошибка с моделями o-серии
• Исправлена работа Shop::AliExpress, SE:uckDuckGo, DeepL::Translator, SE::Yandex::SQI

Исправления

• SE::Google - исправлен обход редиректа на Linux

 

Дайджест новостей A-Parser
Парсинг популярных запросов за сутки Google Trends
Обновление парсера для сбора поисковых трендов за сутки с Google Trends.

• Теперь в качестве запросов нужно указывать код региона, для которого нужно собрать тренды. Тем самым можно сразу парсить данные со всех необходимых регионов.

Rozetka - получение данных по API
Обновление парсера для сбора данных о товарах на торговой площадке Rozetka.

• Парсер полностью переписан и адаптирован к актуальному API Rozetka
• Изменен набор собираемых данных

[bПарсер постов из X (Twitter)[/b]
Обновление парсера постов из социальной сети X (Twitter).

• Парсер переписан на TypeScript(API v2)
• Улучшена работа с браузером
• Полностью изменены собираемые данные
• Вывод всех результатов в CSV таблицу
• Убраны опции Posts count и Pages count, т.к. больше нет возможности их использовать

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 

1.2.2875 - 6 новых FreeAI парсеров, парсинг ИИ ответов в Google и Яндекс, исправление ошибок

Улучшения

• Добавлено 6 новых FreeAI парсеров, каждый из которых предоставляет возможность парсить ИИ ответы с соответствующих сервисов без необходимости регистрации и использования API:
  • FreeAI::Copilot
  • FreeAI:eepAI
  • FreeAI:erplexity
  • FreeAI::GoogleAI
  • FreeAI::ChatGPT
  • FreeAI::Kimi
• В SE::Google добавлена возможность парсить AI Overview (ИИ ответ) вместе с массивом источников
• В SE::Yandex добавлена возможность парсить ответ от Алисы (ИИ ответ) вместе с массивом источников
• В SE::Yandex::WordCraft добавлена опция Parse queries for Rivals pages, при включении которой собираются популярные запросы для каждой из ссылок в Rivals pages
• В SE::Google улучшен сбор totalcount
• В Net::Whois обновлен whois сервер для зоны .in

Исправления в связи с изменениями в выдаче

• В SE::Google исправлен парсинг ссылок и парсинг дат в сниппетах, а также исправлен парсинг выдачи при Serp type=Videos
• В SE::Yandex исправлено определение десктоп/мобильной выдачи
• В SE::Bing исправлен парсинг анкоров и сниппетов в некоторых случаях
• Адаптация к изменениям на источнике в SE::Yandex::ByImage

Исправления

• Множество исправлений в браузерном режиме парсера SE::Yandex
• Исправлено декодирование некоторых ссылок в SE::Bing
• В Maps::Yandex исправлена проблема утечки памяти

 

1.2.2875 - 6 новых FreeAI парсеров, парсинг ИИ ответов в Google и Яндекс, исправление ошибок

Улучшения

• Добавлено 6 новых FreeAI парсеров, каждый из которых предоставляет возможность парсить ИИ ответы с соответствующих сервисов без необходимости регистрации и использования API:
  • /img/parsers/freeai-copilot.png FreeAI::Copilot
  • /img/parsers/freeai-deepai.png FreeAI:eepAI
  • /img/parsers/freeai-perplexity.png FreeAI:erplexity
  • /img/parsers/freeai-googleai.png FreeAI::GoogleAI
  • /img/parsers/freeai-chatgpt.png FreeAI::ChatGPT
  • /img/parsers/freeai-kimi.png FreeAI::Kimi
• В /img/parsers/se-google.png SE::Google добавлена возможность парсить AI Overview (ИИ ответ) вместе с массивом источников
• В /img/parsers/se-yandex.png SE::Yandex добавлена возможность парсить ответ от Алисы (ИИ ответ) вместе с массивом источников
• В /img/parsers/se-yandex-wordcraft.png SE::Yandex::WordCraft добавлена опция Parse queries for Rivals pages, при включении которой собираются популярные запросы для каждой из ссылок в Rivals pages
• В /img/parsers/se-google.png SE::Google улучшен сбор totalcount
• В /img/parsers/net-whois.png Net::Whois обновлен whois сервер для зоны .in

Исправления в связи с изменениями в выдаче

• В /img/parsers/se-google.png SE::Google исправлен парсинг ссылок и парсинг дат в сниппетах, а также исправлен парсинг выдачи при Serp type=Videos
• В /img/parsers/se-yandex.png SE::Yandex исправлено определение десктоп/мобильной выдачи
• В /img/parsers/se-bing.png SE::Bing исправлен парсинг анкоров и сниппетов в некоторых случаях
• Адаптация к изменениям на источнике в /img/parsers/se-yandex-byimage.png SE::Yandex::ByImage

Исправления

• Множество исправлений в браузерном режиме парсера /img/parsers/se-yandex.png SE::Yandex
• Исправлено декодирование некоторых ссылок в /img/parsers/se-bing.png SE::Bing
• В /img/parsers/maps-yandex.png Maps::Yandex исправлена проблема утечки памяти

 

Важное обновление: пул unlim прокси расширен до 100 000+ IP с ротацией каждые 5 минут

Мы расширили возможности: теперь в вашем распоряжении более 100 000 резидентных прокси с автоматической ротацией IP каждые 5 минут, до 2000 потоков одновременно и безлимитный трафик - идеально для стабильной и быстрой работы с A-Parser.
Оптимальны для:

• Масштабного парсинга поисковых систем (Google, Bing, Yahoo, DuckDuckGo)
• Сбора данных с маркетплейсов: Amazon, eBay, Aliexpress и др.
• Парсинга каталогов, агрегаторов, отзывов и локальных бизнесов
• Мониторинга цен, позиций и наличия товаров
• Многопоточной работы через A-Parser и API
• Безопасного обхода блокировок и антибот-систем

Актуальные тарифы (безлимитный трафик, IP-ротация, поддержка 7/7):
На 7 дней:

• 20 потоков — $10
• 50 потоков — $17
• 100 потоков — $25
• 200 потоков — $39
• 500 потоков — $95
• 1000 потоков — $189
• 2000 потоков — $379

На 31 день:

• 20 потоков — $29
• 50 потоков — $49
• 100 потоков — $79
• 200 потоков — $129
• 300 потоков — $169
• 500 потоков — $249
• 1000 потоков — $499
• 1500 потоков — $749
• 2000 потоков — $999

Нужны стабильные прокси с ротацией и высоким лимитом потоков? Подключайтесь:
Перейти в кабинет A-Parser