Данные с сайта Реформа ЖКХ (http://www.reformagkh.ru) по многоквартирным жилым домам всех регионов РФ и инструмент для их получения/обновления.
- Скрипт-граббер, сохраняет данные в формате CSV и оригиналы страниц.
- Данные выкачанные для Москвы, Омска, Санкт-Петербурга, Екатеринбурга, Владивостока (32, 31, 25, 10, 4 тыс. домов).
- Находим идентификатор региона, который нужно скачать. Это может быть любой из уровней, скачиваться будут в т.ч. все подуровни. Идентификатор можно взять или в или непосредственно из ссылки (tid) вида
https://www.reformagkh.ru/myhouse?tid=2208192
. - Убеждаемся, что рядом со скриптом присутствует файл atd.csv (его можно либо скачать тут же, либо сделать самому запустив другой скрипт
get_reformagkh_atd-v2.py
) - Выполняем шаги 1-4 отсюда
- Запускаем скрипт.
ND: Для работы скрипта, кроме Python 2.7.x нужен модуль
pip install progressbar
python get_reformagkh_data-v3.py 2280999 data/housedata.csv -of html
Демо: http://maxim.nextgis.com/resource/644/display
- Поддерживаются не все параметры представленные на основном сайте
- Code - GNU GPL v2 or any later version
- Data - unknown, possibly Public Domain
Нужны исправления или улучшения для парсера РеформыЖКХ? Мы можем его доработать, свяжитесь с нами!