[Яндекс.Практикум] Инженер данных. Data Engineer. 2022 часть 3/6

Что делают инженеры данных:
Строят пайплайны
Это первая задача инженера, когда он начинает продумывать архитектуру данных. Специалист решает, какие этапы работы с данными нужны, и определяет необходимые инструменты.
Проектируют безопасные хранилища
Инженер оценивает данные компании и разрабатывает подходящее для них хранилище.
Масштабируют потоки данных
Показатель опыта инженера — то, с каким объёмом данных он может работать. Чем опытнее специалист, тем больше объём данных.
Настраивают мониторинг
Инженер данных собирает логи и метрики, анализирует графики технического состояния инфраструктуры и автоматизирует оповещение об ошибках.
Кому подойдёт курс:
Разработчикам
Освоите новую специализацию и продолжите развитие в перспективной области работы с данными.
Начинающим инженерам данных
Структурируете знания, получите новый опыт на проектах и станете более конкурентоспособным на рынке труда.
Специалистам по Data Science и аналитикам
Научитесь строить дата-пайплайны, проектировать витрины, строить ETL и собирать сырые логи в большом объёме.
Программа курса «Инженер данных»
За 6,5 месяцев учёбы от 12 часов в неделю вы узнаете, как извлекать, очищать и сохранять данные. Поймёте, как создавать и поддерживать разные виды хранилищ. А ещё научитесь работать со стриминговой обработкой данных.
При создании программы мы проанализировали вакансии, а также опросили работодателей и практикующих инженеров данных, чтобы обучать тем навыкам и инструментам, которые понадобятся в работе и будут важны при найме.