Descripción
Optimice y operativice las canalizaciones de datos de manera segura a cualquier escala.
CDP Data Engineering es el único servicio nativo en la nube expresamente diseñado para los equipos de ingeniería de datos empresariales. Data Engineering está creado en Apache Spark y es un conjunto de herramientas de ingeniería de datos completo que facilita organización automatizada con Apache Airflow, supervisión avanzada de canalizaciones, resolución visual de problemas y herramientas de gestión completas para optimizar los procesos de ETL entre equipos de análisis empresariales.
Data Engineering está completamente integrado con Cloudera Data Platform, lo que permite una visibilidad y seguridad integrales con SDX además de integraciones fluidas con servicios de CDP como Data Warehouse y Machine Learning. Data Engineering de CDP facilita flujos de trabajo de ingeniería de datos coherentes, repetibles y automatizados en una plataforma de nube híbrida desde cualquier lugar.
Casos de uso
Automatice las canalizaciones de datos en todas partes
Obtenga visibilidad y control de ETL
Mantenga la integridad de los datos en todo momento
Automatice las canalizaciones de datos en todas partes
Obtenga conjuntos de datos de calidad con seguridad con CDP Data Warehouse, CDP Machine Learning o cualquier otra herramienta de análisis.
La ingeniería de datos optimiza las canalizaciones de datos, desde los equipos de análisis hasta el aprendizaje automático, los almacenes de datos y más. Acelere la obtención de valor organizando y automatizando las canalizaciones para ofrecer conjuntos de datos seleccionados y de calidad en cualquier parte de manera segura y transparente.
Obtenga visibilidad y control de ETL
Gestione el ciclo de vida de sus datos de manera integral y transparente.
Gestionar el ciclo de vida de los datos y controlar los costes se vuelve cada vez más complejo cuando se intenta operativizar las canalizaciones de datos en toda la empresa y a escala.
Data Engineering ofrece un conjunto de funcionalidades de control operativo y visibilidad para planificar la capacidad, automatizar las canalizaciones, capturar el linaje automáticamente y solucionar problemas en diferentes casos de uso empresariales.
Mantenga la integridad de los datos en todo momento
Visibilidad completa de la canalización de los datos para proteger su negocio.
A medida que la cantidad y complejidad de los datos se incrementan, garantizar la precisión y la fidelidad continuas para escalar cargas de trabajo analíticas en toda la empresa puede ser complicado.
Data Engineering ofrece supervisión nativa del recorrido de los datos y alertas para la detección temprana de problemas, así como resolución visual de problemas para solucionarlos rápidamente y evitar que afecten a su negocio.
Organice flujos de trabajo de transformación de datos complejos respaldados por Apache Airflow, con cientos de operadores, para cumplir los requisitos de análisis esenciales.
Data Engineering es una solución contenedorizada, escalable y portable, con entornos de carga de trabajo aislados y controles, lo que permite gestionar los procesos de manera segura con computación elástica bajo demanda para cumplir los SLA empresariales de manera rentable.
Visualice las métricas de rendimiento incluyendo CPU, memoria y E/S en todas las fases de sus tareas de Spark para localizar cuellos de botella y encontrar la aguja en el pajar cuando se enfrente a problemas.
Aproveche una interfaz de gestión de tareas enriquecida con API CLI y REST para automatizar e integrarse fácilmente con flujos de trabajo existentes, como canalizaciones de CI/CD y herramientas de terceros.
Data Engineering ofrece un servicio de Spark en Kubernetes completamente integrado que automatiza y optimiza la gestión de artefactos, la seguridad y la programación de recursos, y aprovecha Apache Yunikorn para ofrecer programación FIFO y GANG.
Los administradores de la plataforma pueden gestionar el acceso y la seguridad desde una interfaz centralizada y proporcionar cargas de trabajo nuevas con rapidez, al tiempo que supervisan fácilmente la capacidad y visualizan la utilización de recursos a lo largo del tiempo. SDX también permite hacer un seguimiento completo del ciclo de vida para saber de dónde vienen los datos y a dónde van.
¿Necesita analizarlo en detalle?
Experimente por sí mismo Data Engineering en Cloudera Data Platform
Primeros pasos
Demostración de CDP
Vea una demostración bajo demanda para aprender cómo acelerar sus flujos de trabajo de ingeniería de datos empresariales en todas partes.
Recorrido por el producto: descubra CDP
Eche un vistazo a los entresijos con un recorrido en vídeo de CDP y descubra cómo los flujos de trabajo de ingeniería de datos seguros y optimizados pueden favorecer a su empresa.
Recursos técnicos de CDP
Ahorre tiempo con una central de información y recursos técnicos para desarrollar sus habilidades y obtener conocimientos sobre Cloudera Data Engineering.
Formación gratuita
Acceda a formación bajo demanda para ponerse al día con Data Engineering y habilitar canalizaciones rápidas y seguras en toda la empresa.
Precios
Evalúe precios, condiciones de facturación, detalles de licencia y tarifas horarias, y haga un cálculo estimado de los costes mediante prácticas calculadoras.
Documentación de productos
Empiece con buen pie con las prácticas recomendadas en planificación de recursos, configuración de productos y todo lo que necesita saber sobre ingeniería de datos.