Nouveau record mondial de l’ETL de bases de donnée

3 décembre 2008   dans   Services

Syncsort et Vertica, en collaboration avec HP, ont visiblement établi un nouveau record du monde du chargement de données dans une base de données relationnelle pour des applications de veille.

Ce nouveau record du monde bat les précédentes performances enregistrées en termes d’extraction, de transformation et de chargement (ETL). Syncsort DMExpress 4.8 a permis selon le communiqué "d’extraire, de transformer, de nettoyer et de charger 5,4 téraoctets de données brutes dans la base de données analytique Vertica en 57 minutes et 21,51 secondes" via HP BladeSystem c-Class sur le système d’exploitation Linux RedHat Entreprise.

La solution Syncsort/Vertica a été exécutée sur deux boîtiers HP BladeSystem c7000 utilisant une combinaison de serveurs lame et de lames de stockage. La densitéde la plate-forme HP BladeSystem a permis à tout le cluster en shared nothing de 16 noeuds, y compris toute la mémoire de disque, de tenir dans moins d’un demi rack (20U).

Le record établi par Syncsort et Vertica sur HP BladeSystem c-Class en matière d’ETL est semble-t-ti le premier à être réalisé avec une base de données en colonnes. Les performances et l’extensibilité de DMExpress v4.8 et de Vertica v2.5 ont été testées au moyen de 16 serveurs lame HP ProLiant BL460c à deux processeurs quatre coeurs et 16 lames de stockage HP StorageWorks SB40c. Les résultats du test de performance ont été vérifiés par George Spofford, de DSS Labs.

(Vous souhaitez reproduire cet article ?)

A la Une