Fundamentals of Data Engineering
Un mapa moderno y completo del rol de ingeniero de datos, desde la ingesta hasta el consumo.
ÁreaIngeniería de Datos y Sistemas Distribuidos
TemaIngeniería de Datos
NivelIntermedio
Publicación2022
Autor(es): Joe Reis, Matt Housley
¿Qué puedes lograr leyendo este libro?
- Entender el ciclo de vida completo de los datos, desde la generación hasta el consumo final
- Elegir herramientas modernas de ingeniería de datos con criterio, no por moda
- Colaborar más efectivamente con equipos de ingeniería de datos como data scientist
Descripción
A diferencia de libros centrados en una tecnología específica, este libro cubre el ciclo de vida completo de la ingeniería de datos de forma agnóstica a herramientas: generación, ingesta, almacenamiento, transformación y consumo, con un panorama actualizado del ecosistema moderno (data lakes, lakehouses, streaming).
Para quién es ideal
- Data scientists que quieren entender mejor de dónde vienen sus datos
- Quien está considerando transicionar hacia un rol de ingeniería de datos
- Líderes técnicos evaluando cómo estructurar un equipo de datos
- Panorama actualizado del ecosistema de herramientas de datos moderno
Contenido destacado
- El ciclo de vida de la ingeniería de datos
- Generación e ingesta de datos desde múltiples fuentes
- Almacenamiento: data warehouses, data lakes y lakehouses
- Transformación de datos y orquestación de pipelines
- Gobernanza, seguridad y consideraciones de costos
Ventajas y limitaciones
Ventajas
- Panorama moderno y agnóstico a herramientas específicas, con buena vida útil
- Escrito pensando explícitamente en la colaboración con ciencia de datos
- Buen puente conceptual entre roles de analista, ingeniero y científico de datos
Limitaciones
- Al ser panorámico, no profundiza en la implementación técnica de ninguna herramienta específica
- Menos citado y establecido que Designing Data-Intensive Applications