Potenciación de las organizaciones basadas en datos con Cloudera Flow Management 4 (con tecnología Apache NiFi 2.0)
Apache NiFi ha sido durante mucho tiempo una piedra angular para la ingeniería de datos, ya que proporciona un marco potente y flexible para la ingesta, la transformación y la distribución de datos. Como uno de los principales contribuyentes a NiFi, Cloudera ha sido fundamental para impulsar su evolución y adopción. Con el reciente lanzamiento de Cloudera Flow Management 4.0 en versión preliminar técnica como el primer lanzamiento de Cloudera Flow Management basado en NiFi 2.0, estamos encantados de mostrar las capacidades mejoradas y cómo Cloudera continúa liderando la gestión de flujos de datos.
El valor de NiFi 2.0 y Cloudera Flow Management 4.0
Cloudera Flow Management 4.0 (impulsado por Apache NiFi 2.0) introduce mejoras significativas, entre las que se incluyen:
Rendimiento mejorado: NiFi 2.0 presenta importantes mejoras de rendimiento, ya que gestiona los flujos de datos de forma más eficiente y se adapta a cargas de trabajo más intensivas. Estas mejoras ofrecen a los usuarios más potencia y fiabilidad para ingerir, procesar y distribuir conjuntos de datos más grandes y complejos.
Desarrollo simplificado: la nueva interfaz del lienzo de flujos y la funcionalidad mejorada de arrastrar y soltar hacen que el desarrollo de flujos sea más rápido e intuitivo. Esto reduce significativamente el tiempo de desarrollo, lo que se traduce en un ahorro de costes.
Seguridad avanzada: NiFi 2.0 introduce funciones de seguridad mejoradas, como mecanismos de encriptación y autenticación. Esto aumenta la confianza en un sistema seguro y fiable para procesar datos confidenciales.
Integraciones ampliadas: NiFi 2.0 se integra a la perfección con una gama más amplia de fuentes de datos y sistemas, lo que amplía su aplicabilidad en diversos casos de uso. Cloudera Flow Management 4.0 conserva específicamente componentes para soportar integraciones con aplicaciones de Cloudera, donde se eliminaron muchos componentes como Hive y Accumulo en Apache NiFi 2.0. Además, Cloudera Flow Management 4.0 incluye nuevas integraciones, como las capacidades de Captura de Datos de Cambios (CDC) para sistemas de bases de datos relacionales y Iceberg. Esto permite a los usuarios diseñar sus propios sistemas de extremo a extremo con aplicaciones de Cloudera y sistemas externos.
Desarrollo de procesadores nativos de Python: NiFi 2.0 proporciona un SDK de Python para desarrollar rápidamente procesadores en este lenguaje y implementarlos en flujos. La versión incluye procesadores de análisis sintáctico de documentos comunes escritos en Python. Cloudera Flow Management 4.0 añade específicamente componentes para la incrustación de datos, la ingesta en bases de datos vectoriales, el impulso de varios sistemas de IA generativa y el trabajo con modelos lingüísticos de gran tamaño (LLM) a través de Amazon Bedrock. Esto proporciona a los usuarios un impresionante conjunto de capacidades de IA generativa para potenciar sus casos empresariales.
Buenas prácticas en el diseño de flujos: NiFi 2.0 proporciona un motor de reglas para desarrollar análisis de flujos que recomiendan y aplican las mejores prácticas de diseño de flujos. Cloudera Flow Management 4.0 proporciona varias reglas de análisis de flujos para aspectos como la gestión de hilos y los componentes recomendados. Los administradores de Cloudera Flow Management pueden aprovecharlas para garantizar flujos bien diseñados y sólidos para sus casos de uso.
Cloudera y NiFi: soporte continuo, innovación y migración simplificada
Cloudera ha sido un impulsor clave en el desarrollo de NiFi, y ha contribuido activamente a su comunidad de código abierto, además de proporcionar orientación experta a los usuarios. Cloudera ha realizado una fuerte inversión en NiFi, lo que garantiza su continua evolución y relevancia en el cambiante panorama de los datos.
Nuestro compromiso con NiFi queda patente en nuestras iniciativas. Participamos activamente en la comunidad Apache NiFi, donde compartimos conocimientos y buenas prácticas, y apoyamos a los usuarios a través de listas de correo, foros y eventos. Además de nuestras contribuciones a la comunidad, Cloudera Flow Management Operator permite a los clientes implementar y gestionar clústeres e instancias de NiFi Registry en plataformas de aplicaciones Kubernetes. Cloudera Flow Management Operator simplifica la recopilación, transformación y entrega de datos en las empresas. Al aprovechar la infraestructura en contenedores, el operador agiliza la orquestación de flujos de datos complejos.
Cloudera es el único proveedor que dispone de una herramienta de migración que simplifica el complejo y repetitivo proceso de migración de los flujos de Cloudera Flow Management desde el conjunto de componentes NiFi 1 para utilizar el conjunto NiFi 2. Para ello, Cloudera ofrece servicios integrales de formación y consultoría para ayudar a las organizaciones a aprovechar todo el potencial de NiFi.
Impulsar el futuro de la gestión de flujos de datos
Con Cloudera Flow Management 4.0.0 (con tecnología Apache NiFi 2.0), Cloudera refuerza su liderazgo en la gestión de flujos de datos. Seguiremos invirtiendo en el desarrollo de NiFi para garantizar que siga siendo una herramienta potente y fiable para los ingenieros y científicos de datos. Además, Cloudera ofrece implementaciones en la nube de Cloudera Flow Management, que optimizan la eficiencia operativa y permiten escalar la empresa con confianza. Las características que permiten integrar y mejorar sus soluciones basadas en IA son el enfoque central de Cloudera Flow Management. También seguimos proporcionando soporte y orientación a nuestros clientes para que puedan aprovechar toda la potencia de NiFi y llevar a cabo iniciativas de datos críticos para el negocio.
Más información:
Para explorar las nuevas capacidades de Cloudera Flow Management y descubrir cómo puede transformar tus flujos de datos, obtén más información aquí:
