Разрабатывал и поддерживал пайплайны данных (ETL/ELT) с использованием Airflow и Python.
Оптимизировал загрузку и трансформацию данных в, обеспечив стабильность и актуальность витрин.
Решал проблемы качества данных: дубли, изменяющиеся значения, неполные данные — настроил логику обновления и контроль консистентности.
Оптимизировал хранение и обработку большого количества мелких файлов, сократив время выполнения задач и повысив производительность.
Настроил мониторинг и логирование процессов, что позволило вовремя реагировать на сбои и анализировать нагрузку.
Взаимодействовал с аналитиками и бизнесом для подготовки данных под отчётность и BI-системы.
Собственные проекты
1. ELT из Telegram-групп (Python + Telethon + PostgreSQL)
Автоматизированное извлечение сообщений, сохранение в сырой слой, защита от повторной загрузки.
Разработал DAG-и в Airflow: фильтрация и загрузка данных в рабочий слой, рассылка рекламных сообщений «тёплым» клиентам, подготовка витрины для аналитики, автоматическая очистка и оптимизация БД.
Реализовал сбор статистики ETL-процессов в PostgreSQL для мониторинга нагрузки и качества данных.
2. Аналитика рынка IT (пример: hh.ru)
Парсинг вакансий → PostgreSQL (raw), нормализация и очистка.
Построение витрин данных и интерактивных дашбордов в Power BI.
Сбор аналитики и отслеживание трендов рынка IT в России (подготовка статьи на Habr).
3. @Phuket_transport_bot — Telegram-бот по аренде транспорта
Стек: Python, PostgreSQL, Telegram API, Django Admin.
Реализовал обработку заказов, аналитику запросов клиентов.
Создал инструменты для поиска «тёплых» клиентов: анализ 20–30 тыс. сообщений в тематических Telegram-группах и автоматическая рассылка рекламных сообщений.
Freelance
Разрабатываю Telegram-ботов полного цикла: БД, админка, WebApp, интеграция оплаты.
Выполнял проекты на Django / FastAPI с использованием PostgreSQL и Docker.
Технологический стек
Языки: Python, SQL, JS (база)
Фреймворки: Django, FastAPI, DRF, Scrapy, BS4
Data stack: Airflow, Hadoop, Spark, Kafka
Базы данных: PostgreSQL, SQLite, Redis, GreenPlum, ClickHouse
DevOps: Docker, Git, GitLab, Bash
Web: HTML, CSS
AvitoTechУ нас живут ваши объявления
Битрикс24Company
Dodo EngineeringО том, как разработчики строят IT в Dodo
ДомкликМесто силы
ХабрЭкосистема для развития людей, вовлеченных в IT
HaulmontКорпоративные системы и инструменты разработчика
Онлайн-кинотеатр ИвиМы открываем для людей многообразие мира кино
KTSСоздаем цифровые продукты для бизнеса
КуперКодим будущее доставки товаров
Lamoda TechCode the lifestyle
OTUSРазвиваем технологии, обучая их создателей
Издательский дом «Питер»Company
Rambler&CoCompany
RecognitorComputer Vision and Machine Learning
СберТехнологии, меняющие мир
SberDevicesСоздаём умные устройства
КонтурДелаем сервисы для бизнеса
Т-БанкCompany
VKТехнологии, которые объединяют
Wunder FundМы занимаемся высокочастотной торговлей на бирже
