Рабочий ETL-контур
Автоматизация сбора поискового спроса Yandex Wordstat
ETL-контур для регулярного сбора, хранения и анализа поискового спроса по фразам, кластерам, брендам и конкурентам.
ETL-контур для регулярного обновления поискового спроса и подготовки данных к BI-аналитике.
- Yandex Cloud
- Cloud Functions
- Python 3.12
- YDB
- Wordstat API
- Object Storage
- DataLens
- Telegram Bot
- ETL
Контекст
Маркетинговой команде нужно регулярно видеть, как меняется поисковый спрос по брендам, конкурентам, категориям и периодам.
Система превращает ручной research в воспроизводимый ETL-контур: семантика хранится в YDB, данные собираются через Wordstat API, а витрина готовится для DataLens.
Результат
Фразы и кластеры загружаются из XLSX, обработка идет батчами с логированием запусков и ошибок, weekly-динамика сохраняется в YDB.
Это основа для внутреннего marketing intelligence-инструмента, а не разовый парсер.