Bootcamp · BC-DATA

Bootcamp Ingeniería de Datos y Big Data

De los ficheros sueltos a una plataforma de datos con ingesta, transformación, orquestación y gobierno.

En diseño Intermedio → Especialización 4 fases · 11 cursos

Formato asíncrono Desarrollo, Ingeniería / Industria, Empresa / PYME

DATOSDESARROLLOINGENIERÍA / INDUSTRIAEMPRESA / PYME

Lo que aprenderás

Consultar volúmenes de gigabytes desde el portátil con DuckDB antes de montar nada
Procesar conjuntos distribuidos con PySpark y entender su ejecución perezosa
Diseñar flujos de eventos con Kafka: particiones, consumidores y retención
Orquestar cargas nocturnas con Airflow, con reintentos y alertas que funcionan
Transformar y documentar modelos analíticos versionados con dbt
Implantar validación automática, linaje y contratos de datos entre equipos

Contenido del itinerario

4 fases · 11 cursos · cada fase asume la anterior

Fase 1 · Antes de escalar

Qué es y qué no es Big Data, analítica local y SQL analítico.

Fase 2 · Procesamiento distribuido

Spark, Dask y optimización con formatos transaccionales.

Fase 3 · Flujos y orquestación

Kafka, Airflow y transformación versionada con dbt.

Fase 4 · Gobierno y tiempo real

Calidad del dato y arquitectura de latencia baja para industria.

Requisitos

Python a nivel intermedio y SQL a nivel de consultas con uniones y agregaciones
Familiaridad con la línea de comandos y con Docker
Conviene tener acceso a un conjunto de datos real de la organización

Descripción

Casi todas las plataformas de datos empiezan igual: un script que alguien programó en su equipo y que nadie más entiende, seguido de otros doce. Cuando ese conjunto se cae un domingo por la noche, no hay quien lo arregle. La ingeniería de datos es, sobre todo, la disciplina de que eso no ocurra.

El itinerario sigue el recorrido natural del dato: primero analítica local con DuckDB para no montar infraestructura innecesaria, después procesamiento distribuido con Spark, flujos de eventos con Kafka, orquestación con Airflow y transformación versionada con dbt. Cierra con calidad y gobierno, que es lo que hace que alguien pueda responder del dato.

La última pieza es una arquitectura en tiempo real orientada a industria, que conecta este itinerario con el de IoT y permite llevar una señal de máquina hasta un indicador de dirección con latencia de segundos.

¿Para quién es este itinerario?

Analistas que se han quedado sin capacidad en el portátil
Perfiles de desarrollo que asumen la plataforma de datos de la empresa
Ingeniería de proceso que quiere explotar el histórico de planta

En diseño

Los itinerarios se contratan como plan cerrado para un grupo. Los cursos que lo componen también están disponibles por separado.

Solicitar propuesta Ver todos los itinerarios

Referencia: BC-DATA
Recorrido: Intermedio → Especialización
Estructura: 4 fases · 11 cursos
Público: Desarrollo, Ingeniería / Industria, Empresa / PYME
Producción: 0 de 11 cursos ya grabados