Данат Байдуллаев
Data Engineer
Алматы
Summary
Я являюсь целеустремленным Data Engineer с крепким фундаментом в области Computer Science и глубокими техническими навыками в Python, SQL и обработке больших данных. Мой опыт включает работу с различными инструментами и платформами для обработки данных, такими как DBT, Airflow, Python, PostgreSQL, Tableau и ClickHouse. Я отлично коммуницирую с коллегами и постоянно стремлюсь к профессиональному развитию в области Data Engineering.
Overview
2
2
years of professional experience
3
3
Languages
Work History
Data Engineer
Vodafone Group Plc
Izmir
06.2022 - 05.2024
- ● Анализировал бизнес-требования и разрабатывал SQL-запросы для получения и очистки
данных, необходимых для аналитики.
● Анализировал данные с использованием библиотеки Pandas.
● Оптимизация запросов (SQL: Индексы и планы запросов, Python: сериализация и
десериализация данных).
● Разработал витрины данных для бизнес пользователей и отдела аналитиков для повышения
эффективности запросов.
● Оптимизировал процессы на Clickhouse и PostgreSQL (рефакторинг запросов, написание
новых, жизнеспособность CH/PostgreSQL, мониторинг).
● Построение структуры Data Warehouse с использованием Python, DBT и Apache Airflow (ETL
Pipelines).
● Проектировал и поддерживал дашборды, в основном в Tableau, знаком с интерфейсом
Amazon QuickSight.
● Построение архитектуры на PostgreSQL.
● Настройка корректной работы сбора данных на различных типов источников (API, HTTP).
● Ключевое достижение: Разработал пайплайн данных с использованием DBT и AWS S3, что
привело к увеличению эффективности работы на 15%.
Education
Bachelor of Science - Computer Science
Dokuz Eylul Universiy
Измир, Турция 04.2001 -
Skills
Python
SQL
OLAP/OLTP
Data Warehouses
Data Lakes
ACID
CAP
Data Modelling
ETL development
Data Pipeline Design
Hadoop Ecosystem(Only Theory)
RDBMS
Database Design
Business Intelligence
Pandas/MatPlotLib
Tableau
Looker
Amazon QuickSight
DBeaver
Pentaho DI
DBT
Tableau Prep
Jupyter Notebook
AWS RDS
Projects
- Проект по ELT на DBT с шерингом самокатов: Разработал и реализовал процесс ELT, использующий DBT для обработки данных о шеринг-самокатах.
- Создание дашбордов высокого уровня на Tableau: Создавал дашборды для визуализации ключевых показателей и данных по оттоку кадров.
- Проекты по ETL на Pentaho DI: Создание Staging и витрины данных, используя Pentaho DI.