Скрипты для загрузки и обновления данных ФИАС в формате ГАР

Если вы решитесь использовать эти скрипты, то имейте в виду, что автор - НЕ программист. Скрипты написаны методом велосипеда и костыля. Они подходят для меня и работают так, как нужно мне на моей рабочей системе. Используйте их на свой страх и риск. Если вы найдёте их полезными, я буду рад. Если знаете, как улучшить, или обнаружите косяки, не стесняйтесь написать мне или даже сделать Pull Request.

1. Скрипт создавался и тестировался на Ubuntu. На Windows тестов не проводилось.
2. Python 3.^8
3. Pip sudo apt install python3-pip
4. Psycopg2 pip3 install psycopg2
5. XmlSchema pip3 install xmlschema
6. PostgreSQL ^10, в котором уже должна быть создана целевая БД

1. архив с актуальной версией ГАР (прямая ссылка).
2. XSD схемы выгрузки БД (прямая ссылка).

XSD схемы и XML файлы должны быть распакованы в разные директории. Для удобства таблицы в архиве разбиты на директории по субъектам РФ. Скрипт импортирует в БД таблицы, относящиеся только к одному субъекту, поэтому в директорию для XML файлов должны быть извлечены:

1. папка, соответствующая номеру импортируемого субъекта РФ
2. все файлы, находящиеся в архиве без директорий, "сверху"

• DB_HOST - адрес БД
• DB_PORT - порт
• DB_USER - имя пользователя БД
• DB_PASSWORD - пароль
• DB_NAME - название БД
• DB_SCHEMA - название схемы БД
• XSD_DIRECTORY - папка с XSD схемами
• XML_DIRECTORY - папка с XML таблицами
• UPDATE_DIRECTORY - папка, куда скрипт будет скачивать обновления
• REGION_CODE - код региона
• UPDATE_SERVICE_URL = http://fias.nalog.ru/WebServices/Public/GetAllDownloadFileInfo - URL службы получения обновлений

в котором прописать дату скачанного архива в формате dd.mm.yyyy

crontab -e

mm hh * * * /path/to/python/interpreter /path/to/updateGAR.py

Скрипт сравнивает дату в файле currentVersion.txt с датой новейшего доступного обновления на сайте ФНС и, если появилось обновление, скачивает и импортирует его.