Фундаментальное руководство по инженерии данных: проектирование и эксплуатация надёжных систем данных на всём жизненном цикле. Охватывает генерацию, хранение, поглощение, преобразование и предоставление данных. Особое внимание — облачным технологиям, оркестрации конвейеров и безопасности. Написана практиками для инженеров, переходящих в Data Engineering или систематизирующих знания.
🧠 Ключевые идеи
Жизненный цикл инженерии данных: от исходных систем до аналитиков и ML-инженеров
Архитектура данных: проектирование масштабируемых, надёжных и сопровождаемых систем
Выбор технологий: как оценивать инструменты на каждом этапе жизненного цикла
DataOps и оркестрация: управление качеством данных и автоматизация конвейеров
Фоновые процессы: безопасность, управление данными, программная инженерия