A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

Дайджест новостей A-Parser

Парсер yep.com
Обновление парсера поисковой системы yep.com

• Адаптация к изменениям на источнике
• Улучшена проверка получаемого ответа
• В вывод добавлены анкоры и сниппеты
• Результат по-умолчанию теперь выводится в CSV

Аукцион доменов REG.RU
Обновление парсера аукциона освобождающихся доменов с возможностью фильтрации

• Парсер переписан на JS и адаптирован к изменениям на источнике
• Реализован обход защиты
• Изменен набор собираемых данных

AI content detector
Обновление парсера для проверки текстов на предмет их генерации сервисами ИИ

• Адаптация к изменениям на источнике

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 

1.2.2712 - исправления в связи с ужесточением парсинга со стороны Google(https://a-parser.com/threads/9130/)

Внеочередной релиз, в котором доступны все последние наработки для решения проблем, связанных с ужесточением парсинга со стороны Google.

Также в релиз вошли следующие изменения:
В SE::Yandex::Register(https://a-parser.com/docs/parsers/se-yandex-register) исправлен ряд проблем и добавлена поддержка кук

В Net::HTTP(https://a-parser.com/docs/parsers/net-http) улучшена обработка cookies, добавлена опция Follow meta refresh

Maps::Google(https://a-parser.com/docs/parsers/maps-google) адаптирован к изменениям в выдаче
Добавлена поддержка POST запросов при обходе Cloudflare

В парсерах Instagram добавлена возможность указания списка кук
Добавлен автоматический переход на http/1.1 если сервер не поддерживает http2

В Browser::ScreenshotsMaker(https://a-parser.com/docs/parsers/browser-screenshotsmaker) добавлено открытие/закрытие страницы при каждом запросе вместо открытия/закрытия один раз на поток

Улучшена работа SE::Bing(https://a-parser.com/docs/parsers/se-bing)

(https://t.me/a_parser)

(https://a-parser.com/pages/affiliate/)

 

Видео урок: Пробив доменов конкурентов с помощью Net::Whois

Новое видео по работе с A-Parser от DIM STUDIO в котором показано как пробить список доменов на сроки регистрации.



Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

 

Обновление цен на Proxies Premium(https://a-parser.com/threads/9150/)

Сравните старые и новые цены: чем больше объём — тем ниже цена за гигабайт.
Proxies Premium Тарифы на 1 неделю:
50 ГБ Было: $75 ($1.5 / Gb) → Стало: $65 ($1.3 / Gb)
100 ГБ Было: $140 ($1.4 / Gb) → Стало: $120 ($1.2 / Gb)
200 ГБ Было: $260 ($1.3 / Gb) → Стало: $220 ($1.1 / Gb)
500 ГБ Было: $600 ($1.2 / Gb) → Стало: $500 ($1 / Gb)
Proxies Premium Тарифы на 1 месяц:
50 ГБ Было: $95 ($1.9 / Gb) → Стало: $85 ($1.7 / Gb)
100 ГБ Было: $170 ($1.7 / Gb) → Стало: $140 ($1.4 / Gb)
300 ГБ Было: $450 ($1.5 / Gb) → Стало: $390 ($1.3 / Gb)
500 ГБ Было: $650 ($1.3 / Gb) → Стало: $550 ($1.1 / Gb)
1000 ГБ Было: $1200 ($1.2 / Gb) → Стало: $1000 ($1 / Gb)
3000 ГБ Было: $3300 ($1.1 / Gb) → Стало: $3000 ($1 / Gb)
5000 ГБ Было: $5000 ($1 / Gb) → Стало: $4500 ($0.9 / Gb)
PremiumMix (No geo targeting) на 1 неделю:
50 ГБ Было: $45 ($0.9 / Gb) → Стало: $40 ($0.8 / Gb)
100 ГБ Было: $80 ($0.8 / Gb) → Стало: $70 ($0.7 / Gb)
200 ГБ Было: $140 ($0.7 / Gb) → Стало: $120 ($0.6 / Gb)
PremiumMix (No geo targeting) на 1 месяц:
500 ГБ Было: $300 ($0.6 / Gb) → Стало: $250 ($0.5 / Gb)
1000 ГБ Было: $500 ($0.5 / Gb) → Стало: $400 ($0.4 / Gb)
3000 ГБ Было: $1200 ($0.4 / Gb) → Стало: $900 ($0.3 / Gb)

(https://t.me/a_parser)

(https://a-parser.com/pages/affiliate/)

 

Дайджест новостей A-Parser

Очистка текстов, сгенерированных ИИ

Новый парсер для удаления из текстов признаков их генерации системами ИИ

• Поддерживает запросы в виде текстов, файлов и папок с файлами
  
• Позволяет настраивать опции очистки
  
• Работает без http запросов и прокси

Парсинг Авито

Обновление парсера Avito

• Сбор телефонов теперь происходит через браузер
  
• Добавлена функция Parse phone max pages, которая задает максимальное количество окон браузера для сбора телефонов.
  
• Также исправлены другие проблемы, которые были со сбором: фото, просмотров и локации

Парсер Google Places

Обновление парсера Google Places

• Добавлено получение cid компании для формирования ссылки на нее в гугл-картах

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 

1.2.2840 - обновление NodeJS, многостраничный парсинг Гугл карт, изменение таймаута в Util парсерах

Улучшения

• NodeJS обновлен до версии 22.15.1
• Во всех парсерах Яндекс теперь используется общий модуль авторизации (где это необходимо)
• SE::Yandex - добавлена возможность отключать сессии
• Maps::Google - реализована возможность многостраничного парсинга, добавлен сбор одиночного результата
• OpenAI::ChatGPT - обновлены модели, добавлена опция Additional options для указания дополнительных параметров
• Check::BackLink - проверка robots.txt теперь учитывает параметр Don't verify TLS certs
• В Util::AntiGate добавлена поддержка Botlab для текстовых каптч
• В Util::* парсерах изменено значение таймаута по-умолчанию:
  • для AntiCaptcha - 5 сек
  • для других провайдеров - 15 сек
  • это обновление важно для всех, кто сталкивался с блокировкой от сервисов разгадывания за слишком большое количество запросов с ошибками

Исправления в связи с изменениями в выдаче

• Адаптация к изменениям на источнике в SE::Google
• Исправлена проверка типа выдачи в SE::Yandex
• Исправлено разгадывание smart captcha в SE::Yandex
• Исправлена проблема со сбором сниппетов в SE::Yahoo
• OpenAI::ChatGPT - исправлена ошибка с моделями o-серии
• Исправлена работа Shop::AliExpress, SE:uckDuckGo, DeepL::Translator, SE::Yandex::SQI

Исправления

• SE::Google - исправлен обход редиректа на Linux