Descripción general
Controle la distribución de datos al tiempo que permite la flexibilidad de entregar datos en cualquier lugar.
CDF-PC ofrece un paradigma de desarrollo low-code basado en flujo que se alinea mejor con la forma en que los desarrolladores diseñan, desarrollan y prueban las canalizaciones de distribución de datos. Con más de 450 conectores y procesadores en todo el ecosistema de servicios de nube híbrida, incluidos lagos de datos, lakehouses, almacenes en la nube y fuentes locales, CDF-PC ofrece una distribución de datos indiscriminada. Estos flujos de distribución de datos se pueden controlar por versión en un catálogo donde los operadores pueden realizar implementaciones de autoservicio en diferentes tiempos de ejecución.
CLOUDERA DATAFLOW FOR PUBLIC CLOUD
Distribución universal de datos con tecnología Apache NiFi
Conecte con cualquier fuente de datos en cualquier lugar, procéselos y entréguelos a cualquier destino.
Casos de uso
Microservicios sin código y sin servidor
Procesamiento de archivos prácticamente en tiempo real
Ingesta de lakehouses de datos
Optimización de ciberseguridad y registros
IoT y recopilación de datos por streaming
Microservicios sin código y sin servidor
DataFlow Functions es la primera solución visual sin código para crear microservicios con escalabilidad infinita.
Al ejecutar flujos de NiFi en AWS Lambda, Azure Functions y Google Cloud Functions, DataFlow Functions es la primera solución que proporciona una interfaz de usuario sin código fácil de usar para crear microservicios activados por solicitudes HTTPS. Ofrece la opción de crear un endpoint de API con escalabilidad infinita en un entorno sin servidor en muy poco tiempo.
Procesamiento de archivos prácticamente en tiempo real
DataFlow Functions facilita el procesamiento de archivos prácticamente en tiempo real en una arquitectura sin servidor.
Al ejecutar flujos de NiFi en AWS Lambda, Azure Functions y Google Cloud Functions, DataFlow Functions proporciona la forma más rentable de procesar archivos siempre que los archivos estén disponibles en el almacén de objetos. Los recursos solo se ejecutan cuando se procesan los datos y ya no es necesario que el NiFi funcione las 24 horas del día. Esto también proporciona una arquitectura sin servidor sin ningún requisito de gasto en operaciones de infraestructura.
Ingesta de lakehouses de datos
Modernice las canalizaciones de datos con una única herramienta que funciona con cualquier centro o almacén de datos.
Gracias a la compatibilidad con más de 450 procesadores, Cloudera DataFlow facilita la recopilación y transformación de datos en el formato que su lakehouse necesita.
Cloudera DataFlow proporciona la flexibilidad para tratar los datos no estructurados como tales y lograr un alto rendimiento al no tener que hacer cumplir un esquema o dar a los datos no estructurados una estructura aplicando un esquema y utilizando el lenguaje de expresión NiFi o consultas SQL para transformar fácilmente los datos.
Optimización de ciberseguridad y registros
Permita que los analistas de datos detecten y analicen eventos de forma más rápida y precisa mediante la organización de datos SIEM.
Reduzca el coste de su solución de ciberseguridad modernizando las canalizaciones de recopilación de datos para recopilar y filtrar datos en tiempo real de miles de fuentes en todo el mundo.
La ingesta de todos los registros de dispositivos y aplicaciones en su solución SIEM no es un enfoque escalable desde una perspectiva de costes y rendimiento. Cloudera DataFlow le permite recopilar datos de registro desde cualquier lugar y filtrar el ruido, haciendo que los datos almacenados en su sistema SIEM sean fácilmente manejables.
IoT y recopilación de datos en streaming
Envíe datos desde dispositivos IoT en el borde a un flujo de datos central en la nube que se amplía y reduce según sea necesario.
Cloudera DataFlow está diseñado para manejar datos de transmisión a escala, lo que permite a las empresas empezar poco a poco con sus proyectos de IoT, pero con la confianza de que sus flujos de datos pueden gestionar los picos de datos causados por la adición de más dispositivos fuente, así como manejar problemas de conectividad intermitente.
DataFlow Functions ofrece una forma eficiente, rentable y escalable de ejecutar flujos NiFi sin servidor para casos de uso basados en eventos.
Las implementaciones de DataFlow aumentan y reducen automáticamente los flujos de NiFi en función del uso de la CPU. Los costes de infraestructura se pueden controlar estableciendo límites mínimos y máximos para el escalado automático.
Conéctese a cualquier fuente de datos o destino utilizando la rica biblioteca de procesadores de NiFi, incluyendo fuentes de datos locales, almacenamiento de datos en la nube, almacenes de datos en la nube, fuentes de datos de registro, servicios de analíticas de datos en la nube o servicios de procesos de negocio en la nube. Los desarrolladores también pueden implementar rápidamente un conjunto predefinido de flujos de datos con una configuración mínima denominado ReadyFlows para implementar los casos de uso de flujo de datos más comunes.
Supervise todas sus implementaciones de flujo de NiFI en un único panel de control, independientemente de la nube en la que se ejecuten. Haga un seguimiento de las métricas de rendimiento de flujo importantes definiendo alertas de KPI para sus implementaciones de flujo.
Provea fácilmente puntos de conexión seguros, estables y escalables, lo que facilita que cualquier aplicación envíe datos a implementaciones de flujo.
Cloudera DataFlow se ha diseñado pensando en la automatización. Cualquier acción que se realice en la interfaz de usuario se puede convertir en una instrucción CLI para la automatización. Implementar un nuevo flujo de NiFi es tan fácil como ejecutar un único comando CLI.
DESARROLLE FLUJOS NIFI EN CUALQUIER LUGAR E IMPLEMÉNTELOS EN CUALQUIER NUBE
como clústeres de Kubernetes de escalado automático o flujos NiFi sin servidor
Opciones de tiempo de ejecución en la nube pública
| Característica | Implementaciones de DataFlow | DataFlow Functions |
Tiempo de ejecución en la nube |
Clústeres NiFi utilizando Kubernetes/contenedores |
Flujos NiFi que se ejecutan en los servicios informáticos sin servidor de los proveedores de la nube (AWS Lambda, Azure Functions y Google Cloud Functions) |
|---|---|---|
Caso de uso |
Casos de uso que necesitan una baja latencia para cargas de trabajo de alto rendimiento que requieren flujos NiFi siempre en funcionamiento | Casos de uso basados en eventos y microrápidos sin requisitos de latencia por debajo del segundo, en los que los flujos NiFi no necesitan ejecutarse continuamente |
Ventajas |
Escalado automático de clústeres Kubernetes para flujos de trabajo de larga ejecución con supervisión centralizada | Una forma eficiente, rentable y escalable de ejecutar los flujos NiFi sin servidor, lo que permite a los desarrolladores centrarse en la lógica empresarial |
Unidad de medición |
Unidad de procesamiento de Cloudera (CCU) | Recuento de invocaciones de métodos |
Experimente por sí mismo DataFlow for the Public Cloud
Recopile datos desde el edge
Gestione, controle y supervise el borde para sus campañas de datos en transmisión e IoT y consiga datos en tiempo real con ingesta y gestión sin código con Cloudera Edge Management.
Primeros pasos
DOCUMENTACIÓN DEL PRODUCTO
Encuentre especificaciones técnicas, arquitectura y tutoriales de Cloudera DataFlow for the Public Cloud.
PRECIOS DE CDF FOR THE PUBLIC CLOUD
Evalúe los precios de Cloudera DataFlow for the Public Cloud en varios tipos de instancias de nube.
RECORRIDO GENERAL DE DATAFLOW
Realice un recorrido práctico de Cloudera DataFlow for the Public Cloud.
COMUNIDAD CLOUDERA CON NIFI
Conecte con personas como usted, pregunte dudas, resuelva sus problemas y aprenda más sobre Apache NiFi.
FORMACIÓN SOBRE NIFI
Reserve un curso de formación práctico de tres días sobre los fundamentos de Apache NiFi y más.
DEMOSTRACIÓN DEL PRODUCTO
Vea la introducción y demostración de Cloudera DataFlow for the Public Cloud.
