Brève description: Un nouveau nœud de source de données a été introduit pour PLMSynchro, qui lit les données directement à partir d'une base de données SQL plutôt qu'à partir d'un fichier CSV. L'objectif était de remplacer ou d'étendre la connexion de données existante, basée sur le format CSV, par une connexion à une base de données. Le nouveau nœud fonctionne de manière similaire au nœud source CSV existant.
Afin de permettre un traitement efficace de grands volumes de données, une fonction de filigrane a été mise en place :
Le nœud stocke soit la dernière date traitée (CREATEDATE), soit le dernier ID traité.
Lors des exécutions ultérieures, seuls les enregistrements nouvellement ajoutés ou modifiés sont traités.
Il est également possible de gérer un statut de traitement directement dans la table source (En attente, Réussite, Erreur).
Dans ce ticket, plusieurs exemples de pipelines et de scripts SQL ont été fournis :
Avantages pour les utilisateurs
Connexion directe aux bases de données ERP, PDM ou de staging, sans passer par des fichiers CSV.
Une synchronisation des données plus rapide et automatisable.
La prise en charge des importations incrémentielles réduit le volume de données et les durées d'exécution.
Meilleure intégration dans les bases de données d'entreprise existantes et les processus ETL.[22]
[22] Extract, Transform, Load (ETL) est un processus consistant à regrouper des données provenant de plusieurs sources, dont la structure peut varier, dans une base de données cible.
