Разрабатывал и поддерживал пайплайны данных (ETL/ELT) с использованием Airflow и Python.

Оптимизировал загрузку и трансформацию данных в, обеспечив стабильность и актуальность витрин.

Решал проблемы качества данных: дубли, изменяющиеся значения, неполные данные — настроил логику обновления и контроль консистентности.

Оптимизировал хранение и обработку большого количества мелких файлов, сократив время выполнения задач и повысив производительность.

Настроил мониторинг и логирование процессов, что позволило вовремя реагировать на сбои и анализировать нагрузку.

Взаимодействовал с аналитиками и бизнесом для подготовки данных под отчётность и BI-системы.

Собственные проекты

1. ELT из Telegram-групп (Python + Telethon + PostgreSQL)

Автоматизированное извлечение сообщений, сохранение в сырой слой, защита от повторной загрузки.

Разработал DAG-и в Airflow: фильтрация и загрузка данных в рабочий слой, рассылка рекламных сообщений «тёплым» клиентам, подготовка витрины для аналитики, автоматическая очистка и оптимизация БД.

Реализовал сбор статистики ETL-процессов в PostgreSQL для мониторинга нагрузки и качества данных.

2. Аналитика рынка IT (пример: hh.ru)

Парсинг вакансий → PostgreSQL (raw), нормализация и очистка.

Построение витрин данных и интерактивных дашбордов в Power BI.

Сбор аналитики и отслеживание трендов рынка IT в России (подготовка статьи на Habr).

3. @Phuket_transport_bot — Telegram-бот по аренде транспорта

Стек: Python, PostgreSQL, Telegram API, Django Admin.

Реализовал обработку заказов, аналитику запросов клиентов.

Создал инструменты для поиска «тёплых» клиентов: анализ 20–30 тыс. сообщений в тематических Telegram-группах и автоматическая рассылка рекламных сообщений.

Freelance

Разрабатываю Telegram-ботов полного цикла: БД, админка, WebApp, интеграция оплаты.

Выполнял проекты на Django / FastAPI с использованием PostgreSQL и Docker.

Технологический стек

Языки: Python, SQL, JS (база)

Фреймворки: Django, FastAPI, DRF, Scrapy, BS4

Data stack: Airflow, Hadoop, Spark, Kafka

Базы данных: PostgreSQL, SQLite, Redis, GreenPlum, ClickHouse

DevOps: Docker, Git, GitLab, Bash

Web: HTML, CSS