О чём курс

Данные — это топливо, на котором работают современные компании. Производство, госуслуги, e-commerce, банки, маркетинг — везде нужны инженеры данных — специалисты, которые понимают, как собирать, хранить и превращать данные в полезный актив для бизнеса.

Курс подойдет продуктовым аналитикам, начинающим ML-инженерам и всем, кто хочет разобраться в современных data-платформах. Студенты применят современные инструменты для работы с данными и увидят, как они живут в больших системах.

Фича курса. Поработаешь с технологиями, которые используют в индустрии.

• S3 — распределённое хранилище данных.
• Kafka — система потоковой передачи сообщений.
• Apache Spark — кластерные вычисления.
• ClickHouse — аналитическая СУБД.
• Apache Airflow — оркестратор задач и потоков данных.
• Apache Iceberg — популярный файловый формат.
• Postgres — современная реляционная база данных для OLTP.

Условия поступления на курс

Пререквизиты:

• «Основы Python».
• «Python для анализа данных».
• «SQL и базы данных».

Кореквизиты: нет.

Для каких потоков доступен: 2024–2026.

Лимит по количеству студентов: нет.

Академическая нагрузка

• 1 лекция-воркшоп в неделю.
• 1 семинар в неделю.

Команда курса

Untitled

Тематический план

Курс состоит из девяти тематических блоков:

• В блоках 1–3 разберёшься как данные хранятся в файловых системах и реляционных базах, познакомишься с Apache Spark, научишься читать и записывать совместимые с bigdata файлы, узнаешь, как поставлять данные в реальном времени и работать с Apache Kafka.