Temario del curso
Introducción a Apache Iceberg
- Descripción general de Apache Iceberg
- Revisión de conceptos básicos
Análisis profundo de la arquitectura de Iceberg
- Estudio detallado del formato de tabla empleado por Apache Iceberg
- Descripción pormenorizada de su arquitectura, en lo que respecta a metadatos y organización de archivos
- Análisis de los mecanismos internos relativos a la evolución de esquemas y particiones
Instalación y configuración avanzada
- Configurar Apache Iceberg para conseguir el máximo rendimiento en diferentes entornos
- Integrarlo con múltiples motores de procesamiento de datos
- Configuraciones avanzadas: seguridad, cifrado y controles de acceso
- Instalación en entornos distribuidos
Operaciones y mantenimiento avanzados
- Gestión de tablas a gran escala en Apache Iceberg
- Implementación y manejo de modificaciones complejas en los esquemas
- Abordar la evolución de las particiones, incluyendo el particionado oculto
- Técnicas avanzadas para operaciones CRUD vinculadas a cambios en esquemas y particiones
Estrategias de optimización de consultas
- Métodos para reducir la latencia de las consultas
- Técnicas como el particionado selectivo y la selección de archivos pertinentes
- Almacenamiento en caché de metadatos y estrategias de optimización correspondientes
- Implementación y validación práctica de dichas técnicas
Ajuste del rendimiento para grandes conjuntos de datos
- Técnicas destinadas a mejorar el desempeño cuando se trabaja con datos masivos
- Utilización de funcionalidades nativas de Apache Iceberg orientadas al rendimiento
- Análisis de casos prácticos relacionados con dicho ajuste en escenarios reales
- Mejoras concretas para el rendimiento en grandes volúmenes de datos
Migración e integración avanzadas de datos
- Traslado de estructuras complejas desde otros sistemas al formato de Iceberg
- Integración de Apache Iceberg con flujos continuos de datos en tiempo real
- Traslado y fusión de grandes volúmenes de información junto a la incorporación de fuentes de datos en tiempo real
Fiabilidad y coherencia de los datos
- Garantizar la consistencia e integridad del material informativo en entornos distribuidos
- Implementar protocolos que aseguren garantías transaccionales sobre los datos
- Estrategias para gestionar fallas y recuperación de información
- Establecimiento eficaz de mecanismos que aseguren confiabilidad y uniformidad de los datos
Funcionalidades avanzadas y personalización
- Implementación de catálogos propios para el manejo de datos
- Ampliación del propio Iceberg mediante elementos añadidos por los usuarios
- Creación y puesta en marcha de catálogos personalizados, así como ampliaciones para la plataforma
Gobernanza y cumplimiento normativo
- Desarrollo de políticas propias en cuanto a gobernanza de los datos
- Observancia estricta de las reglamentaciones vigentes sobre el manejo de la información
- Seguimiento y gestión integrales del historial de acceso y trayectoria de los datos
- Despliegue de funcionalidades tendentes a una correcta gobernanza y cumplimiento legal
Resumen final y siguientes pasos recomendados
Requerimientos
- Conocimiento de los conceptos básicos, operaciones fundamentales y gestión de tablas en Apache Iceberg
Público objetivo
- Ingenieros de datos
- Arquitectos de datos
- Analistas de datos
- Desarrolladores de software
Formación Corporativa a Medida
Soluciones de formación diseñadas exclusivamente para empresas.
- Contenido personalizado: Adaptamos el temario y los ejercicios prácticos a los objetivos y necesidades reales del proyecto.
- Calendario flexible: Fechas y horarios adaptados a la agenda de su equipo.
- Modalidad: Online (en directo), In-company (en sus oficinas) o Híbrida.
Precio por grupo privado (formación online) desde 4350 € + IVA*
Contáctenos para obtener un presupuesto exacto y conocer nuestras promociones actuales
Reseñas (2)
Un viaje por el mundo de Spark: un curso muy intenso. DSL, Spark SQL, particionamiento versus agrupación para mí.
Georgiana Elisabeta
Curso - Apache Spark Fundamentals
Traducción Automática
Ejercicios prácticos. La clase debería haber durado 5 días, pero los 3 días fueron útiles para aclarar muchas de las preguntas que tenía al trabajar con NiFi.
James - BHG Financial
Curso - Apache NiFi for Administrators
Traducción Automática