lenarsaitov/cianparser

Не получается спарсить, с впн тоже. наверное проблема в заглушке, что есть на 5 секунд на сайте.

kargintima opened this issue · 4 comments

Start collecting information from pages..
503 Server Error: Service Temporarily Unavailable for url: https://cian.ru/cat.php?deal_type=rent&engine_version=2&p=1&region=4588&offer_type=flat&type=4
Dont exist this 1 page.. Ending parse

Есть идеи у кого?

Постараюсь посмотреть на днях

Аналогичная ошибка, есть обновления по этому вопросу?

Аналогично

Проблема была связана с Cloudflare anti-bot page

При помощи библиотеки cloudscraper удалось обойти данное ограничение
https://github.com/VeNoMouS/cloudscraper

Выпустил соответствующее обновление