Intégration et intégrité des données

Intégration du Big Data, du Cloud et de l’IoT

Avec l’explosion des données de nouvelle génération, les processus traditionnels ne sont plus suffisamment efficaces. Il vous faut une plateforme de gestion des données progressive, intégrant les meilleures pratiques ainsi que des outils pour l’intégration des données - livrés sur site, dans le cloud ou via un hybride des deux - pour fournir à l’ensemble de l’entreprise des données exploitables et pertinens.

Intégration intelligente et simplifiée de Hadoop™

  • Une plateforme conçue pour le Big Data, la préparation des données et l'engagement natif de Hadoop
  • Des outils graphiques visuels pour créer, collaborer et contrôler des données volumineuses afin d’accélérer la mise sur le marché
  • Importation intégrée de données progressives structurées, non structurées et sociales
  • Meilleures pratiques intégrées pour la cohérence des données entre les applications opérationnelles
  • Mouvements de données en temps voulus pour des opérations à des vitesses multiples
  • Des milliers de déploiements pour la gestion, le mouvement et l’intégration des données, ainsi que la BI

Principales caractéristiques

Flux transactionnels en temps réel, en mode batch ou de données modifiées (delta) pour le traitement bidirectionnel des données

Données en continu et données non structurées, y compris la prise en charge de Flume, Spark et Hadoop

  • Données en mouvement : Mise en file d'attente des messages à l'aide de Kafka et remaniement des données
  • DData au repos (données dans la base de données)
  • DSqoop pour Hadoop
    • Extrait les métadonnées de la base de données et les crée sur Hadoop
    • Prise en charge de la saisie de données modifiées
    • Prise en charge de tous les types de fichiers pris en charge par Hadoop
    • Pipeline (repère d'utilisation)
    • Prise en charge de la transformation en pipeline et de la qualité des données

Permet l’ingestion de données au repos à partir de sources relationnelles, d’autres sources Hadoop et de sources NoSQL, ainsi que le streaming de données et le remaniement de données avec le traitement en langage naturel et la qualité des données intégrée

  • Qualité des données intégrée
    • ICleansing
    • IEnriching
    • IStandardizing
    • IMatch
    • IMerge
       

La prise en charge complète de la transformation à travers de multiples données sources et cibles permet un déploiement rapide et un travail d’équipe parallèle

Fournit des interactions humaines améliorées pour aider les gestionnaires de données à piloter le processus d’intégration

Active les applications complètes d'intégration des données de bout en bout

Représentation visuelle de la transformation à partir de sources telles que Hadoop, Scala et Spark avec des fonctions de qualité des données populaires prédéfinies et codées pour une mise sur le marché plus rapide

  • Créer visuellement des transformations de données à partir de données sur Hadoop
  • Créer du code dans Map Reduce et Scala (peut exécuter inark)
  • Prise en charge complète des agrégats SQL et des fonctions scalaires
  • Liste des fonctions populaires de qualité des données et codées en BDI (30)
  • Les cibles de transformation peuvent être des tables de ruche, des tables de base de données relationnelles ou des formats de rampe IDS
  • Prise en charge de Spark
    • Prise en charge complète de Java, Scala, Python
    • Crée des scripts de construction
    • Gère toutes les dépendances
    • Permet de déployer et d’exécuter un nœud et de le déboguer
    • Modèles prédictifs, GraphX, correspondance et fusion, streaming, SQL
  • Prise en charge d’un ensemble de protocoles entrants et sortants, disponibles pour tout type d’application, de système ou de produit d’analyse de consommation
  • Traitement des transactions par lots, delta et en temps réel avec prise en charge complète du streaming

La facilité de conception à l’échelle de l’organisation est facilitée par des services de modélisation, d’intégration et de remédiation pré-packagés, prêts à l’emploi, avec visualisation