Extraction Transformation and Loading (ETL)

 

Notre produit de haute performance, s’intégre avec les ETL du marché, tels , Ascential Software, Embarcadero, Kalido, Informatica par exemple, grâce à un plugin.

En outres, CoSORT propose aux utilisateurs de bases de données Oracle une intégration pour diminuer le temps de traitement de volume de données stocké dans des tables volumineuses.

Cette intégration consiste en les composants suivants :

 Fact   pour extraire à grande vitesse les données de plusieurs bases de données relationnelles et les mettre dans des fichiers à plat.(7 X plus rapide)

CoSORT et son module SortCl pour trier, fusionner, dédoublonner, transformer, filtrer etc (jusqu'à 20X)

SQL*Loader pour recharger les données transformées.(10X)

Un benchmark de l'intégration de cette solution a été réalisé et donne les résultats suivants :

Benchmark

Example Basic d'un exemple d'Extract-transform-load (ETL)qui compare 2 possibilités

CoSORT fact | sortcl | sqlldr

et 

 Oracle SQL*Plus
insert into
(select * ... order by).

Fichier Source : ~ 50,000,000
50-byte rows (2.32 GB) trié sur 1 clef.

CoSORT ETL: 00h:18m:00s
Oracle SQL*Plus: 01h:38m:58s

Configuration: ia64 hp server rx5670
4X1GHz Itanium2 CPU, 32GB RAM
HP-UX B.11.23, Oracle 9i