L'université Toulouse 1 se plie aux réglementations financières

Gratuit et libre de droits, Talend Open Studio couvre toutes les transformations de données de l'université liées à la Lolf et à la Loi pour la confiance dans l'économie numérique.

L'université Toulouse 1 (UT1) accueille chaque année près de 17 000 étudiants. Comme tous les services de l'Etat, elle est soumise à la Loi organique relative aux lois de finances (Lolf), qui exige la création d'indicateurs de performance, ainsi qu'à la loi pour la Confiance dans l'économie numérique (CEN), impliquant la vérification du respect des règles d'utilisation des ressources informatiques. Pourtant, ces deux projets d'intégration de données reposent sur des architectures techniques opposées. Les indicateurs de la Lolf sont calculés à partir de données extraites des systèmes de gestion (cinq SGBD), puis stockés dans un datamart Oracle. C'est un projet d'ETL centralisé : les processus d'intégration s'exécutent sur un seul serveur dédié. A l'opposé, pour des raisons de performances et de sécurité, les 320 scripts Perl qui analysent les fichiers plats liés à la CEN (300 Mo de logs quotidiens) s'exécutent au plus proche de leurs sources, sur une trentaine de serveurs. Il s'agit donc d'une intégration distribuée.Composée de 26 personnes, l'équipe informatique de l'université a retenu Talend Open Studio pour gérer les deux projets à l'aide d'un seul outil polyvalent. ' L'objectif est de rationaliser la création des traitements pour éviter les recoupements, explique Christian Armengaud, responsable du centre informatique de gestion d'UT1. Nous avons étudié un outil propriétaire, mais il ne prenait pas bien en charge les architectures centralisées et distribuées en même temps et imposait une licence pour chacun des 30 serveurs. '

Un outil polyvalent

S'appuyant sur Eclipse, Talend Open Studio est un environnement de développement qui accélère et standardise la création des scripts de transformation de données. Ecrits en SQL, Perl ou Java, ils s'exécutent sur un serveur dédié ou sont distribués sur plusieurs serveurs. Tous les traitements restent centralisés au sein d'un référentiel partageable (Talend on Demand), ' un point important pour éviter les redondances, et diminuer ainsi le coût de maintenance évolutive des processus de transformation ', explique Christian Armengaud.Comme l'UT1 maîtrisait déjà Perl, la prise en main de Talend Open Studio a été rapide. D'autant plus qu'un éditeur était là ' pour accélérer la mise en ?"uvre en évitant des erreurs de conception '. L'UT1 a ainsi pu créer le datamart lié à la Lolf en à peine un mois par homme. ' Même si nous avons été surpris par la maturité de l'outil, c'est rassurant de pouvoir compter sur un service professionnel ', conclut Christian [e-mail]

Intégration centralisée et distribuée en même temps

Talend Open Studio centralise l'ensemble des transformations et des métadonnées au sein d'un référentiel. Mais les traitements s'exécutent soit sur un seul serveur dédié, soit directement au niveau des différentes sources de données. Quelle que soit l'architecture retenue, le déploiement ne nécessite que quelques clics.

Le cas étudié : Université Toulouse 1

Activité : enseignement supérieur.
Siège : Toulouse (31).
Effectif : 626 enseignants-chercheurs, 481 personnels administratifs, 16 805 étudiants.
Équipe informatique : 26 personnes (pour un budget 2006 de 410 000 euros)

Industrialiser 300 transformations de données hétérogènes liées à deux projets s'appuyant sur une architecture opposée (centralisée/décentralisée) à l'aide d'un seul outil, avec un coût réduit.

Talend Open Studio pour la création et le pilotage de l'ensemble des transformations (basées sur Perl et SQL). Oracle pour le datamart lié à la Lolf, et MySQL pour le référentiel des traitements distribués liés à la loi CEN.

L'architecture doit être pensée avant de créer les traitements qui seront déployés sur serveurs dédiés ou distribués.
Le référentiel des objets nest pas partageable par défaut par les équipes (il faut Talend on Demand).
La version Perl est plus facile à déployer (pas de problèmes de JVM).