igorgakhov/metro-shop-parser

Метро Кофе Парсер

Этот парсер предназначен для сбора информации о продуктах категории кофе на сайте магазина Метро. Он извлекает информацию о продуктах, включая их идентификатор, название, ссылку, обычную цену, промо-цену и бренд (если доступен). Парсер реализован с использованием библиотеки Python requests для HTTP-запросов, bs4 для парсинга HTML и pandas для создания и сохранения данных в файл Excel

Инструкции по использованию

1. Убедитесь, что у вас установлены все необходимые библиотеки, перечисленные в файле requirements.txt. Установите их, выполнив команду:

pip install -r requirements.txt

2. Запустите файл main.py:

python main.py

3. Парсер начнет сбор данных о продуктах категории кофе на сайте "Метро". Информация будет выводиться в консоль, а также сохраняется в файл Excel с именем coffee_metro.xlsx

4. По завершении работы парсера в консоли вы увидите сообщение о времени выполнения

Настройки

Измените переменную link_to_coffee в файле main.py, чтобы указать другую категорию продуктов

link_to_coffee = 'https://online.metro-cc.ru/category/chaj-kofe-kakao/kofe?from=under_search&in_stock=1'

Вы также можете настроить другие параметры, такие как классы элементов HTML для поиска продуктов и кнопки "Показать еще" в коде main.py, если сайт "Метро" изменится

Дополнения

Для ускорения работы парсера можно использовать асинхронный подход (asyncio, aiohttp). Буду рада ✨ pull-request ✨ c предложениями по оптимизацией работы кода