bigboiii300/goszakupki_parser

Script for parsing zakupki.gov.ru

Установка

Шаг 1

1. Скачиваем python, если у вас его нет.
2. Запускаем инсталятор и ставим все галочки как на скрине
3. Открываем командну строку (заходим в поиск и вводим 'командная строка', либо используем миллион других способов, которые легко загуглить)
4. Вводим в командную каждую строку из тех, что можно увидеть ниже (ВАЖНО: Вводим построчно и после каждого ввода нажимаем Enter и ожидаем загрузки пакета. Затем повторяем действие еще 8 раз)

pip3 install requests
pip3 install python-docx
pip3 install aspose.words 
pip3 install bs4
pip3 install docx
pip3 install py7zr
pip3 install pyunpack
pip3 install pandas
pip3 install openpyxl

5. После того как у нас все установилось можно переходить к шагу 2

Шаг 2

1. Копируем файлы в любую папку (наличие файла urls.txt обязательно, как и его название)
2. Открываем файл и ждем некоторое количество времени. Зависит от количества ссылок, которые нужно обработать, а также от степени нагруженности на госзакупки
3. После запуска появится файл logs.txt, в котором указаны некорректные ссылки(ссылки другого формата или отсутствие документов для загрузки), а также папка content, в которую скачиваются документы для дальнейшей обработки. Папку не нужно трогать и обижать потому что может что-то пойти не так.
4. После завершения обработки content удаляется вместе со всеми скачанными файлами и появляется файл data.xlsx, в котором находится итоговая информация

To do

1. Обработка сканов фотографий