Integración e integridad de datos

Integración de Big Data, Cloud e IoT

Con la explosión de los tipos de datos de próxima generación, los procesos tradicionales ya no son lo suficientemente buenos. Necesita una plataforma progresiva de gestión de datos con las mejores prácticas integradas y las herramientas de integración de datos, entregadas en las instalaciones, en la nube o mediante un híbrido de ambas, para entregar datos procesables y relevantes destinados al consumo en toda la empresa.

Integración de Hadoop™ más fácil e inteligente

  • Una plataforma creada para Big Data, preparación de datos y compromiso nativo de Hadoop
  • Herramientas gráficas visuales para crear, colaborar y controlar big data para acelerar el tiempo de comercialización
  • Ingestión progresiva de datos incorporada: estructurada, no estructurada y social
  • Creada a partir de las mejores prácticas para la coherencia de datos entre aplicaciones operacionales
  • Movimiento de datos en tiempo correcto para operar a múltiples velocidades
  • Miles de implementaciones para gestión de datos, movimiento, integración y BI

Características clave

Flujos de datos transaccionales, por lotes o cambiados (delta) en tiempo real para el procesamiento de datos bidireccionales

Transmisión de datos y datos no estructurados, incluidos Flume, Spark y Hadoop

  • Datos en movimiento: Cola de mensajes usando Kafka y refinado de datos
  • DData en reposo (datos en la base de datos)
  • DSqoop para Hadoop
    • Trae los metadatos de la base de datos y los crea en Hadoop
    • Admite captura de datos modificada
    • Soporta todos los tipos de archivos compatibles con Hadoop
    • Canalización (usesark)
    • Admite la transformación en la canalización y la calidad de los datos

Permite el consumo de datos en reposo de fuentes relacionales, otras fuentes de Hadoop y fuentes NoSQL, así como datos de transmisión de datos y refinado de datos con procesamiento de lenguaje natural y calidad de datos integrada

  • Calidad de datos integradores
    • ICleansing
    • IEnriching
    • IStandardizing
    • IMatch
    • IMerge
       

El soporte de transformación completa en múltiples fuentes de datos y objetivos permite un despliegue rápido y trabajo en equipo paralelo

Proporciona interacciones humanas mejoradas para ayudar a los administradores de datos a impulsar el proceso de integración

Permite aplicaciones completas de integración de datos de extremo a extremo

Representación visual de la transformación de fuentes como Hadoop, Scala y Spark con funciones predefinidas de calidad de datos populares codificadas para acelerar el tiempo de comercialización

  • Crea transformaciones de datos visualmente a partir de datos en Hadoop
  • Construye código en Map Reduce y Scala (puede ejecutar inark)
  • Totalmente compatible con agregados SQL y funciones escalares
  • Lista de funciones de calidad de datos populares y codificadas en BDI (30)
  • Transform Targets puede estar compuesto de tablas de Hive, tablas de bases de datos relacionales o formatos de entrada de IDS
  • Soporte para Spark
    • Soporte completo de Java, Scala, Python
    • Crea secuencias de comandos
    • Administra todas las dependencias
    • Le permite implementar y ejecutar un nodo y depurarlo
    • Modelos predictivos, GraphX, Match and Merge, transmisión por secuencias, SQL
  • Admite una variedad de protocolos entrantes y salientes y está disponible para cualquier aplicación consumidora, sistema o producto de análisis
  • Procesamiento de transacciones por lotes, delta y en tiempo real con soporte de transmisión completo

La facilidad de diseño en toda la organización se facilita a través de servicios de modelización, integración y reparación preempaquetados, listos para usar, con visualización