Talend Practical OSDI Vol2 FR (1)

download Talend Practical OSDI Vol2 FR (1)

of 18

Transcript of Talend Practical OSDI Vol2 FR (1)

  • CASE STUDIES

    Intgration de Donnes Open Source en Pratique

    Etudes de cas

    Volume 2

  • Page 2

    Sommaire

    Levolor rationnalise son intgration B2B ............................................................................................ 4

    Virgin Mobile : un nouveau forfait ETL illimit pour la Business Intelligence ............................... 6

    SupplyFrame automatise la cration de son catalogue et de ses mises jour ................................. 8

    MyBuys personnalise lachat en ligne .............................................................................................. 10

    UNHCR amliore ses prises de dcision grce lintgration et la cartographie ............................ 12

    Theis Consult gre et analyse le trafic routier allemand .................................................................. 14

    Car & Boat Media automatise la chane de traitement de ses petites annonces. ............................ 16

  • Page 3

    Intgration de donnes open source en pratique : tudes de cas Au cours des dernires annes, l'Open Source s'est tabli comme un lment clef du march de lintgration de donnes. Beaucoup d'organisations ont adopt ce modle pour leurs projets d'intgration de donnes, allant de l'ETL pour le datawarehousing ou le dcisionnel jusqu' lintgration de donnes oprationnelle, la migration de donnes, la synchronisation de donnes, etc.

    Ce Volume 2 de L'Intgration de Donnes Open Source en Pratique prsente une slection de cas pratiques, mettant en scne des projets rels d'intgration de donnes ainsi que les bnfices qu'ils ont apports.

  • Rvolutionner lactivit

    Levolor a tabli des standards en matire de dcoration dintrieur, de design, de qualit et de satisfaction client. Le premier proposer des stores automatiques personnaliss, le premier galement mettre de la couleur dans les stores, Levolor continue dtre le pionnier dans la dcoration de fentre et reste lacteur le plus important du secteur. Les produits dont les stores et les volets fabriqus en quantit et sur mesure, les rideaux, dcors et simples tout comme les rideaux personnaliss offrent aux consommateurs plus doptions que jamais pour habiller leurs fentres.

    Aujourdhui, la socit est une fi liale de Newell-Rubbermaid, qui vend des produits de grande consommation et possde une gamme de marques importante telles que Sharpie, Paper Mate, Parker, Waterman, Rubbermaid, Calphalon, Graco, Levolor , Kirsch, BernzOmatic, Vise-Grip, IRWIN et Lenox. Le sige de Levolor se situe High Point en Caroline du Nord. Le sige de Newell Rubbermaid se trouve Atlanta en Gorgie et la socit emploie plus de 20 000 personnes dans le monde.

    Le dfi des dveloppements spcifi ques

    Les dveloppements spcifi ques sont trs consommateurs en ressources et en temps et les projets deviennent encore plus diffi ciles quand il sagit dun produit personnalis qui demande une maintenance rgulire. Levolor propose ses lments de dcoration pour fentres grce divers systmes de distribution et des programmes pour les entreprises dsirant acheter ses produits. Le codage de ces systmes peut devenir trs compliqu, particulirement au niveau de la source. Levolor avait besoin dun outil pouvant rendre le processus plus convivial, pouvoir revenir en arrire et voir quelle problmatique commerciale a t rsolue plutt que de grer un codage de bas niveau. La plupart des processus ETL taient effectus localement, explique John Shafer, dveloppeur de lapplication eBusiness de Levolor. Ce type de codage est compliqu, pas seulement dans la comprhension des processus commerciaux mais parce quil a t dvelopp avec diffrentes mthodes et implmentations. Cest diffi cile de reprendre le travail de quelquun et de comprendre ce quil a fait et pourquoi il la fait.

    Intgration en temps rel

    Levolor fait de lintgration B2B et avait besoin de traiter de manire fi able les informations venant de sources diffrentesles commandes provenant de diffrents revendeurs partenaires, les clients qui visitent le site Internet et tous les autres canaux de distribution. Les fl ux dinformation entrants tournent 24x7 alors que les dtails des informations et du statut sont communiqus en rponse.

    Levolor rationalise son intgration B2BPour Levolor, passer de dveloppements spcifi ques Talend Integration Suite permet de gagner 25% en support chaque anne et daugmenter leffi cacit de son informatique.

    Un autre bnfi ce important est le support supplmentaire fournit par Talend. On a pu aller vers eux avec des ides de co-dveloppement. Il est diffi cile de voir comment cela pourrait tre possibleen termes de cot et de tempsavec le modle logiciel traditionnel. Ajouter cela la disponibilit du forum et de lcosystme ; cela favorise loffre open source du pack logiciel et je crois que vous aidez une communaut en travaillant sur des projets varis. Je pense que cest propre Talend.

    John ShaferDveloppeur de lapplication eBusiness

    Un auUn at lt l

    icationcation

    ActivitFabrication de stores

    ImplmentationIntgration de donnes oprationnelle

    Points clsProduit personnalis avec maintenance rgulireGrande varit de systmes et programmes de distributionFlexible, facilit dutilisationSupport du forum et de lcosystmeIntgration de donnes B2B Fonctionnalits de dploiement dentrepriseSolution prte lemploi

    Activit : Fabrication de storesImplmentation : Intgration de donnes oprationnelle

    Page 4

  • Ils avaient galement besoin dintgrer des donnes pour le reporting dun tiers ; par exemple, Levolor compile des informations de diffrentes sources sur un produit et sur le type de client qui la achet.

    Loutil devait leur permettre de surveiller les jobs et la source et de les dployer dun environnement de dveloppement un environnement de production. A cause de la nature complique des produits, explique John Shafer, il y a quelques routines que nous devons tre capables de coder. Avec certains des produits que nous avions regards, lopration savrait diffi cile. Talend Integration Suite a permis Levolor dutiliser un pack standard afi n de dvelopper des jobs qui pourront tre rutiliss. Lorsque vous regardez le code et la nature critique des informations qui circulent, explique John Shafer, vous ralisez que vous avez besoin dune solution capable de grer ces jobsafi n dtre sr quils oprent quotidiennement, chaque heure, chaque fois que cela est ncessaireet pour donner au business la fl exibilit indispensable pour sadapter aux nouvelles opportunits qui se prsentent. Avoir besoin dun outil qui peut pendre en charge toutes ces fonctionnalits rapidement est une vidence. Avec Talend, les composants sont inclus et cest essentiellement une question dassemblage. Ne coder que lessentiel et utiliser la nature graphique du produit pour pouvoir traiter les lments communs dun job un autre.

    Le cot tait une considration moins importante. Nous avons valu dautres offres dditeurs de solutions ETL traditionnels et ils proposaient ces services pour environ $230 000 sans compter les cots lis au support. Nous pensions plus aux risques que lon vitait quau retour

    sur investissement. Cependant, avec Talend, quand nous avons des besoins de personnalisation, nous obtenons des ressources avec des dlais de production et pour des cots raisonnables et nous pouvons dvelopper un composant personnalis pour excuter des tches dont nous pouvons tirer parti plusieurs reprises. Cest lun des gros avantages de lopen source. De plus, la possibilit de tlcharger et dessayer Talend Open Studio avant dacheter Talend Integration Suite a rendu notre choix vident.

    Cots et effi cacit

    Avant dimplmenter Talend, nous avions une solution dveloppe en interne et lconomie ralise nest pas forcment une conomie montaire mais un gain de temps, explique John Shafer. La prochaine tapeaprs avoir migr tous les jobs vers Talend et pass une opration quotidienneest dtendre le tableau de bord et la maintenance des jobs dans Talend aux analystes informatiques. Cela libre du temps de dveloppement pour des opportunits plus importantes que des tches ETL gnrales.

    Un autre bnfi ce important est le support supplmentaire fournit par Talend. On a pu aller vers eux avec des ides de co-dveloppement, conclut John Shafer. Il est diffi cile de voir comment cela pourrait tre possibleen termes de cot et de tempsavec le modle logiciel traditionnel. Ajouter cela la disponibilit du forum et de lcosystme ; cela joue en faveur de loffre open source et je crois que vous aidez une communaut en travaillant sur des projets varis. Je pense que cest propre Talend.

    Page 5

  • Le leader franais des oprateurs alternatifs

    Virgin Mobile, oprateur mobile virtuel (MVNO) franais, sappuie sur le rseau Orange et propose depuis le 3 Avril 2006 aux consommateurs franais une offre simple, innovante, claire et comptitive. Virgin Mobile affi che des premiers rsultats excellents: 95%* des clients de Virgin Mobile sont satisfaits du Service Client Virgin Mobile et loprateur connat la croissance la plus rapide du march. En Avril 2008, Virgin Mobile a t rcompens par les Trophes Marketing Client pour la qualit de ses e-mails.

    Virgin Mobile France est commercialis par Omer Telecom, joint venture entre les groupes Virgin et Carphone Warehouse. Virgin Mobile, lanc par Sir Richard Branson, est galement prsent au Royaume-Uni, en Australie, aux Etats-Unis, au Canada, en Afrique du Sud et en Inde. Avec plus de 10 Millions de clients dans le monde, larrive de Virgin Mobile en France repose sur une vritable expertise en tlphonie mobile.

    Lopen source : choix darchitecture et ncessit conomique

    Depuis son lancement, Virgin Mobile France a choisi dadopter des technologies open source. Ce choix est motiv la fois par des raisons conomiques et philosophiques : en effet, le mtier de MVNO est trs spcifi que et il nexiste aucune solution prte lemploi, ddie cette profession. Nos besoins de personnalisation taient donc importants et nous souhaitions pouvoir modifi er le code sans diffi cult, tmoigne Lionel Beaudet, Manager Technique chez Virgin Mobile France. Mme si les solutions open source ont un cot, leur rapport qualit-prix est imbattable. De plus, en accdant aux sources, nous gardons le contrle et la matrise de notre systme dinformation.

    La grande majorit du systme dinformation de Virgin Mobile France repose donc aujourdhui sur larchitecture LAMP (Linux, Apache, MySQL, PHP/Perl) : Applications Web, CRM, Back Offi ce. MySQL est au centre de cette architecture : Nos bases de donnes doivent grer des volumtries consquentes : nous allons atteindre le million de clients courant 2008 et leurs appels gnrent en moyenne 5 millions de tickets de facturation par jour. Et ces volumes ne cessent de crotre, poursuit Lionel Beaudet.

    Dans un secteur extrmement concurrentiel, au sein duquel les acteurs se multiplient, les MVNO sont confronts dimportants dfi s, notamment en termes de gestion fi nancire et de marketing. Disposant de moyens plus modestes que les oprateurs historiques, les MVNO doivent grer avec soin leur croissance (leur clientle a

    Virgin Mobile un nouveau forfait ETL illimit pour la Business IntelligenceTalend Integration Suite aide Virgin Mobile, leader sur le march des oprateurs alternatifs, piloter ses activits.

    Avec le recul, nous affi rmons que Talend propose la seule solution open source dintgration de donnes vritablement aboutie, offrant toutes les fonctionnalits ncessaires, les performances dune solution professionnelle, des prestations de support de qualit et une excellente intgration avec MySQL et le reste de notre environnement. Sa prise en main est simple et conviviale, et elle offre dinnombrables possibilits de personnalisation.

    Lionel BaudetManager Technique

    AvecAvecaffi rmaffi rm

    ActivitOprateur de tlphonie mobile

    ImplmentationETL pour le Dcisionnel

    Points clsPremier Oprateur de Rseau Mobile Virtuel avec 700 000 clients en France

    5 millions de tickets de facturation par jour (1,8 milliard par an)

    Data warehouse pour la Business Intelligence

    Gestion des ventes, marketing, service clients, fi nance (risques et fraudes)

    Croissance rapide

    Support de qualit et ractif

    Versatilit et facilit de maintenance

    Activit : Oprateur de tlphonie mobileImplmentation : ETL pour le Dcisionnel

    Page 6

  • doubl en un an) et se proccuper de leur rentabilit, tout en sefforant de toujours mieux connatre leurs clients pour mieux les satisfaire explique Nasser Naili, Senior Manager chez Logica. Ils ont besoin de mettre en uvre un systme de pilotage de la performance, couvrant diffrents domaines dont les fi nances, le marketing et les relations fournisseurs. Conscient de ces enjeux, le management de Virgin Mobile France cherchait se doter des outils permettant de relever lensemble de ces dfi s.

    Vers un pilotage global de la performance

    Car, si les quipes de Virgin Mobile France taient pleinement satisfaites des performances transactionnelles de son systme dinformation, ses performances en matire de reporting, et plus gnralement de pilotage, restaient insuffi santes : La mise en uvre dun Data Warehouse tait ncessaire pour rpondre aux besoins analytiques de plusieurs directions fonctionnelles, notamment du marketing, des ventes et des fi nances, commente Lionel Beaudet. Aprs un appel doffres visant externaliser ce dveloppement, nous avons retenu la rponse de Logica, qui nous proposait Talend Integration Suite pour lextraction et Business Object pour les requtes.

    La solution mise en uvre par Logica couvre quatre principaux domaines : le pilotage commercial (ventes par mois/jour, rpartition des ventes par canaux de vente, profi ls clients, etc.) ; et le pilotage marketing (segmentation & analyse de lusage via le dcryptage des millions de tickets de facturation), pour crer de nouvelles offres rpondant mieux aux besoins des clients. Le premier domaine est oprationnel aujourdhui et le second en cours de mise en uvre. Dans un futur proche, la solution intgrera galement des donnes de service client (nombre dappels, changement doffres, migration, etc.) et des donnes fi nancires, principalement en vue de grer les fraudes et les risques.

    La seule solution open source dintgration de donnes vritablement aboutie

    Virgin Mobile France sappuie sur Talend Integration Suite pour extraire les donnes de la base de production, les transformer et les intgrer dans la base de donnes spcifi que au Data Warehouse. Organise selon un schma en toile, celle-ci permet de slectionner et dagrger de manire effi cace et rapide certaines donnes afi n de garantir la fi nesse de lanalyse.

    Talend Integration Suite organise les donnes en allant les chercher dans diffrentes tables de la base de production et en les plaant dans une table unique

    du Data Warehouse. Il nous aide nous affranchir des limites du transactionnel en ligne pour offrir nos utilisateurs des services de reporting performants, ajoute Lionel Beaudet. Avec le recul, nous affi rmons que Talend propose la seule solution open source dintgration de donnes vritablement aboutie, offrant toutes les fonctionnalits ncessaires, les performances dune solution professionnelle, des prestations de support de qualit et une excellente intgration avec MySQL et le reste de notre environnement. Sa prise en main est simple et conviviale, et elle offre dinnombrables possibilits de personnalisation.

    Deux raisons majeures ont motiv la dcision de Virgin Mobile France dopter pour la solution dentreprise Talend Integration Suite. Dune part, nous bnfi cions de services de support de qualit et trs ractifs. La mise en uvre de loutil a t assure par Logica, mais nous le grons dsormais en interne et avons parfois besoin dassistance. Dautre part, la solution facilite grandement le travail collaboratif et la possibilit de travailler plusieurs sur le mme projet nous permet de gagner beaucoup de temps, prcise Lionel Beaudet.

    Aprs quelques mois dutilisation Virgin Mobile France a suffi samment de recul pour dresser un premier bilan de son projet. Les bnfi ces obtenus par Virgin Mobile France relvent de deux domaines stratgiques : dune part, le management sappuie sur une meilleure visibilit sur les activits, ce qui lui permet de ragir rapidement toute volution du march et de dfi nir ses priorits. Dautre part, la direction marketing dispose dinformations permettant de gagner des parts de march et de fi dliser la clientle, rsume Nasser Naili. Globalement, le systme lui permet daccrotre son agilit et de se diffrentier fortement sur le march.

    Aprs la mise en uvre des deux derniers lots, Virgin Mobile France prvoit de faire voluer son systme de reporting, notamment pour intgrer de nouvelles offres et prendre en compte lvolution des rglementations. Un projet de Data Warehouse est vou ne jamais sachever et nous continuerons affi ner nos outils afi n de rpondre toujours plus prcisment aux demandes de nos utilisateurs. Lvolutivit et la facilit de maintenance sont donc galement deux aspects trs importants de la solution dintgration, conclut Lionel Beaudet. L encore, Talend Integration Suite nous apporte pleine satisfaction.

    Page 7

  • Leader des services dinformation sur les composants lectroniques

    Afi n de supporter de la mme manire les fabricants et les annonceurs, SupplyFrame propose un moteur de recherche puissant et performant permettant aux crateurs et aux responsables des achats de trouver les informations techniques sur des millions de composants lectroniques provenant de milliers de fabricants. Grce aux outils marketing proposs par SupplyFrame, les publicitaires peuvent attirer lattention des ingnieurs concepteurs et des responsables des achats en employant un format valeur ajoute pour la recherche de composants en dlivrant des messages pertinents et contextuels.

    La mise en ligne de nouveaux produits, la monte en gamme de ces derniers, les campagnes de publicit, la gnration de leads, et le e-commerce ont fait de SupplyFrame une entit marketing ultraperformante dont la croissance est la plus rapide dans son secteur.

    Le contenu technique comprenant notamment les fi ches produits, les spcifi cations, les sources et les rfrences croises, est fourni directement par les fabricants et leurs distributeurs franchiss. Lutilisation des donnes tant autorise et sa fourniture gratuite, tous les fabricants maintiennent une reprsentation quivalente dans les recherches.

    Collection de donnes diverses et complexes

    Afi n de charger et maintenir sa base de donnes de composants lectroniques, SupplyFrame doit collecter et agrger les informations sur les produits provenant dun nombre important de fabricants et de distributeurs. Le catalogue de SupplyFrame contient des informations sur plusieurs millions de composants distincts provenant de milliers de sources diffrentes.

    Certains des fabricants fournissent des donnes via des fl ux proactifs des fi chiers dposs sur un serveur, quotidiennement ou selon une frquence pralablement dtermine. Dautres rendent leur donnes accessibles sur leur propre site FTP, SupplyFrame doit donc aller les extraire. Dautres encore envoient des tableaux Excel par e-mail. Enfi n, certains sont dans limpossibilit de fournir des donnes ; SupplyFrame doit alors recueillir les informations pertinentes partir du site web de la socit laide de technologies dites de screen scraping.

    A lorigine, lentreprise a mis en place ces processus de collecte bass sur du code personnalis , explique Adrew Brown, Vice Prsident en Charge du Contenu chez SupplyFrame. Cependant, le nombre et la complexit des fournisseurs de

    SupplyFrame automatise la cration de son catalogue et de ses mises jourLe rseau de contenu et de publicit pour le secteur de llectronique utilise Talend Integration Suite afi n dautomatiser les mises jour produits partir de sources multiples.

    Les gains de temps sont signifi catifs. Ce qui auparavant se dveloppait en deux semaines, prend maintenant moins dune journe cela reprsente une conomie de 90%, non seulement en cots de dveloppement mais aussi en rendant de nouvelles sources dinformations disponibles.

    Andrew BrownVice Prsident en Charge du Contenu

    Les gLes gtt

    rge durge du

    ActivitServices dinformation en ligne

    ImplmentationIntgration oprationnelle, collection et chargement de donnes

    Points clsPlusieurs millions de composants provenant de centaines de sources diffrentesCollection de donnes automatiqueSolution accessible, courbe dapprentissage rapideEcosystme Talend accessibleProcessus rutilisablesEmails dalerte automatiques

    Activit : Services dinformation en ligneImplmentation : Intgration oprationnelle, collection et chargement de donnes

    Page 8

  • donnes ayant augment, ces processus de codage manuel taient devenus onreux crer et maintenir. Pour la future gnration de notre mcanisme automatis de collection de donnes, nous avons envisag plusieurs alternatives disponibles sur le march.

    Une ouverture trois fois moins chre

    SupplyFrame a examin plusieurs alternatives, dont les solutions propritaires et les solutions open source. Le dbat ne portait pas vraiment sur le choix dune solution propritaire ou open source, mais plus sur les capacits techniques et le prix de loutil , explique Andrew Brown. Talend Integration Suite rpondait non seulement nos besoins techniques, mais sur une priode de cinq ans, la solution tait aussi trois fois moins chre que loutil concurrent le plus abordable .

    Dautres facteurs furent dterminants quant au choix de Talend Integration Suite : accessibilit de la solution, courbe dapprentissage trs rapide, et une connectivit tendue. Grce plusieurs centaines de connecteurs inclus dans la solution et dautres disponibles partir de la communaut via lEcosystme de Talend, toutes nos bases sont couvertes, explique Andrew Brown.

    Enfi n, la gnration du code Java et la capacit de regarder sous le capot (grce louverture du code) nous ont aussi permis de prendre notre dcision. Nous ne pensons pas devoir changer le code source de Talend Integration Suite mais sachant que nous en avons la possibilit si besoin est, nous sommes plus sereins , explique Andrew Brown.

    Une mise sur le march plus rapide

    Limplmentation de Talend Integration Suite a aid SupplyFrame dans deux principaux domaines le gain de temps et la fl exibilit en rpondant rapidement aux

    besoins des clients. Auparavant, lorsque nous avions besoin de rcolter des donnes, nous crions un ticket pour dvelopper un processus bas sur la nature du fl ux selon Andrew Brown. Par exemple, nous avions mis en place un rpertoire FTP et avons dit aux fabricants et aux distributeurs que sils pouvaient y dposer les informations dans notre format, nous pouvions alors mettre en place le processus. Dsormais, nous sommes capables de traiter beaucoup plus de formats, et nous nobligeons plus les fournisseurs de donnes remplir autant de conditions. La collection des donnes est alors facilite .

    Le dveloppement des fl ux de donnes devenant plus facile et le rfrentiel de mtadonnes mettant en avant la rutilisation, Talend Integration Suite a ainsi acclr de manire signifi cative le temps de mise disposition de linformation. Les gains de temps sont signifi catifs , dit Andrew Brown. Ce qui auparavant se dveloppait en deux semaines, prend maintenant moins dune journe. Cela reprsente une conomie de 90%, non seulement en cots de dveloppement mais aussi en rendant de nouvelles sources dinformation disponibles. Lorsquon implmente un nouveau processus, nous sommes capables de rutiliser des processus de base que nous avions dj dvelopps. Il est trs simple de dupliquer un processus et de le modliser ensuite en fonction des besoins de personnalisation de ce dernier.

    Talend Integration Suite aide aussi SupplyFrame grer les conditions derreur et garantit la bonne excution des processus de collection. Si un processus choue, un email peut tre automatiquement envoy au fournisseur des donnes et ce dernier peut ainsi tre au courant du moindre problme, explique Andrew Brown. Talend Integration Suite tend notre champ daction et nous donne plus de fl exibilit en tant capable de grer beaucoup de situations diffrentes .

    Page 9

  • Des experts en personnalisation pour le commerce lectronique

    MyBuys est le premier fournisseur de recommandations produits pour les distributeurs en ligne. La socit tablit des profi ls complets bass sur le comportement de chaque acheteur, puis utilise un portefeuille dalgorithmes brevets et une optimisation en temps rel pour fournir les recommandations les plus pertinentes sur les sites Internet et dans les emails dalertes.

    De grands distributeursdont Lancme, SKECHERS, Golf Galaxy, et Karmaloopsont partenaires de MyBuys pour offrir des recommandations intelligentes et personnalises leurs clients.

    Donner les meilleures recommandations

    MyBuys personnalise lachat et fournit des recommandations sur des produits que les clients achtent. Quand les internautes se connectent leurs sites marchands prfrs ou quand ils ajoutent un produit leur panier, ils voient souvent une section du site intitule Nos clients ayant achet cet article ont aussi aim, ou Promotions, ou Notre coup de coeur, ou dautres formules similaires, explique Phil Mueller, Responsable du Consulting chez MyBuys. Si le site marchand est un client de MyBuys, les recommandations personnalises viennent de nousnous alimentons le site Internet en temps rel pour que les recommandations soient dployes sur la page lorsque lacheteur la consulte.

    La personnalisation de lachat en ligne a beaucoup volu depuis le dbut du E-Commerce. MyBuys fournit ce service aux sites marchands pour chacun des clients. En arrire plan, le processus de personnalisation suppose une combinaison de collection de donnespour bien comprendre le vendeur, ses produits, le comportement et les prfrences des clientset des analyses avances, afi n de pouvoir dlivrer les meilleures recommandations, celles qui stimuleront les ventes, explique Phil Mueller. Ce nest pas juste une question de technologie ; nos offres sont labores grce un savoir-faire et une expertise du comportement des clients. Cependant, la technologie doit fonctionner correctement et collecter les donnes est un des aspects cls.

    En effet, le moteur de personnalisation brevet de MyBuys est aliment par des mises jour rgulires de deux catgories de donnes. La premire est le catalogue du site avec les ventes et promotions, les best-sellers, les ventes croises, etc. La deuxime concerne les clients et leurs propres prfrences, leur faon dacheter et leurs habitudes de navigation.

    Pour chaque nouveau site client, nous devons dterminer les diffrents fl ux de donnes, explique Phil Mueller. Ce nest pas un processus facile. Les donnes arrivent sous plusieurs formatsfi chiers plats ou dlimits, des fl ux XML, et mme

    MyBuys personnalise lachat en ligneTalend Integration Suite rationalise et acclre les dploiements client.

    Notre moteur de personnalisation fournit les recommandations les plus utiles quand il a accs aux dernires donnes du magasin. Talend Integration Suite dlivre systmatiquement de lintgration de donnes robuste et hautement performante. MyBuys dpend de Talend et nous savons que nous pouvons compter sur eux !

    Phil MuellerResponsable du Consulting

    NotreNotre

    ultingulting

    ActivitE-Commerce

    ImplmentationIntgration de donnes, Nettoyage de donnes, Analyse de donnes

    Points clsDonnes traites : catalogues produits, ventes et promotions, best sellers, ventes croises, produits prfrs des acheteurs, faon dacheter, habitudes de navigationFichiers plats ou dlimits, fl ux XML, Web Services, SGBD OracleRationaliser et acclrer lintgration de donnes, dployer des processus standards et rutilisablesDploiement initial en moins de 2 moisNouveaux dploiements effectus 5 fois plus vites

    Activit : E-CommerceImplmentation : Intgration de donnes, Nettoyage de donnes, Analyse de donnes

    Page 10

  • des Web Services. Chaque client a des structures de fi chier et des modles de donnes diffrents. Nous avons non seulement besoin davoir toutes ces donnes dans notre application (installe sur une base de donnes Oracle), mais nous devons aussi traiter ces donnes qui arrivent des frquences diffrentescela peut varier de plusieurs fois par jour une fois par semaine cela dpend du client.

    Augmentation des dploiements dintgration de donnes

    A lorigine, MyBuys a choisi une solution de Business Process Management (BPM) pour grer la collecte des donnes et les tches dintgration. Le nombre de nos clients augmente un rythme soutenu et il est apparu vident que la solution que nous avions dploye nallait pas suivre, rappelle Phil Mueller. Nous avions besoin de rationnaliser et de standardiser lintgration de donnes dans un but prcis : dployer des processus standards et rutilisables. Pour chaque client, une partie du processus est particulire la structure de donnes et au format mais le reste est commun tous les dploiements. Nous voulions dvelopper cette dernire partie une seule foiset quand nous avons la maintenir, effectuer les changements une seule fois.

    Lquipe consulting de MyBuys a ralis que lintgration de donnes tait la bonne approche. Nous avons tudi le march et avons dcid de nous intresser quelques outils dintgration de donnes propritaires et open source, dit Phil Mueller. Ce que nous avons trouv tait trs intressant. Il existe quelques produits propritaires sur le march mais ils sont lents, ont des fonctionnalits limites et ne sont pas si performants que je le pensais. Inversement, lopen source et Talend Integration Suite en particulier, propose une souscription abordable avec des fonctionnalits de niveau entreprise.

    Avec le contrat de maintenance de leur outil BPM arrivant son terme, MyBuys avait peu de temps pour dployer la nouvelle solution. En moins de deux mois, nous devions redvelopper tous nos processus dintgration de donnes existants, explique Phil Mueller. La facilit dutilisation de Talend Integration Suite et son approche oriente donnes nous ont aid respecter ce dlai. Le gain de productivit est incroyableun fl ux de donnes qui prendrait 5 6 heures crer avec notre ancienne technologie est maintenant dvelopp et test en moins dune heure.

    Lapproche open source de Talend a aid MyBuys prendre une dcision plus facilement. Le ratio prix-performance comptait galement, rappelle Phil Mueller, mais le fait de connatre les fonctionnalits prcises de loutil a galement jou un rle important. Nous avions tlcharg Talend Open Studio, (la version GPL) et nous lavons test pendant plusieurs semaines avant de se dcider. Ainsi, nous navons eu ni courbe dapprentissage, ni de mauvaises surprises.

    Standardiser les processus

    Aprs avoir migr les processus dintgration de donnes existants vers Talend Integration Suite, lquipe consulting de MyBuys a commenc dployer des processus pour de nouveaux clients. Maintenant que nous avons pos les bases pour nos processus et tabli les fondements de notre architecture dintgration de donnes, dployer un nouveau client ncessite seulement quelques jours de travail dintgration de donnes, explique Phil Mueller. Bien sr, cela dpend beaucoup de la qualit des donnes que nous avons. Cependant, les fonctionnalits de qualit de donnes incluses dans Talend Integration Suite et sa capacit faire appel des routines Java externes que nous avions dj mises en place pour le nettoyage de donnes, contribuent rsoudre les problmes lis la qualit de donnes.

    Les fonctionnalits avances de programmation et de gestion des processus mtier de Talend Integration Suite sont aussi importantes pour bien excuter les processus dintgration de donnes. Tous nos clients oprent sur des cycles dactualisation diffrents et ils nous donnent accs aux sources de donnes selon divers calendriers, explique Phil Mueller. Notre moteur de personnalisation fournit les recommandations les plus utiles quand il a accs aux dernires donnes du magasin. Talend Integration Suite dlivre systmatiquement de lintgration de donnes robuste et hautement performante. MyBuys dpend de Talend et nous savons que nous pouvons compter sur eux !

    Page 11

  • Assurer la protection des rfugis dans le monde

    Le Haut Commissariat des Nations Unies pour les Rfugis (HCR) a t cr le 14 dcembre 1950 par lAssemble Gnrale des Nations Unies. Il a pour mandat de coordonner laction internationale pour la protection des rfugis (mais aussi des apatrides, des demandeurs dasile et des dplacs internes) tant au niveau lgal (droit de non refoulement, droit essentiels) quau niveau physique (bien-tre des personnes).

    En plus de cinquante ans dactivit, lagence a aid environ 50 millions de personnes recommencer leur vie. Aujourdhui, environ 8000 employs (dont 1000 au sige de Genve) continuent daider environ 33 millions de personnes dans plus de 110 pays.

    Des tableaux de bord pour amliorer les prises de dcision

    Parmi les moyens mis disposition de ses agents, linformatique tient un rle grandissant. En matire dintgration de donnes, une initiative pilote a rcemment t mise en uvre par le bureau du HCR en Mauritanie et a permis au pool dexpertise rgionale de se familiariser avec la solution dintgration de donnes open source Talend Open Studio.

    Le 12 Novembre dernier, Nouakchott, a t sign entre le Gouvernement de la Rpublique Islamique de Mauritanie, le Gouvernement de la Rpublique du Sngal et le HCR, un accord tripartite concernant le rapatriement des rfugis Mauritaniens au Sngal. La premire phase de lopration sest attache profi ler les sites de retour pour notamment sassurer de leur capacit dabsorption. Talend Open Studio nous permet dagrger un important volume de donnes provenant de feuilles Excel, correspondant chacune un site particulier et appel tre remis jour rgulirement. Il devient plus facile de gnrer des tableaux de bord que lon peut relier par suite un module cartographique pour faciliter la visualisation explique Edouard Legoupil, Expert SIG du HCR pour la rgion Afrique de lOuest. En vitant les oprations de copier/coller trs chronophages et souvent sources derreurs, les fonctions dautomatisation de la solution de Talend nous aident gagner du temps dans lagrgation des informations contenues dans les nombreux champs des formulaires. Dans un projet comme celui-ci, labsence de cots de licence est un avantage essentiel pour un organisme humanitaire comme le ntre : nous sommes ainsi en mesure de consacrer lessentiel de notre budget notre mission premire.

    Cette premire exprience a fait merger dautres ides dapplication de Talend. Nous disposons dune application mtier, appele proGres, qui nous permet denregistrer lidentit des rfugis plus dans certains cas leur biomtrie, et de

    UNHCR amliore ses prises de dcision grce lintgration et la cartographieLes technologies open source de Talend sont loutil central dun projet stratgique de grande ampleur permettant de mieux grer la cartographie des camps de rfugis travers le monde.

    LOpen Source lve les freins linitiative et linnovation. Une grande quantit de donne est recueille lors des oprations humanitaires. Hlas, du fait des diffrents formats utiliss et dun systme dintgration de donnes encore relativement artisanal, nos possibilits dexploitation ont souvent t limites. Aujourdhui, avec Talend, ces perspectives peuvent tre revues entirement. Cet outil est vraiment idal pour aller plus loin dans lexploitation de nos donnes.

    Edouard LegoupilExpert SIG

    LOpeLOp li li

    ActivitOrganisation internationale

    ImplmentationNettoyage de donnes, Consolidation de donnes, Donnes gographiques

    Points cls32,9 millions de rfugis dans 110 pays6 300 employsConsolidation et exploitation de donnes humanitairesAnalyse gographique, dcisionnelPopulation des camps de rfugis, dmographieCartographie et infrastructure : habitation et voirie, coles, eau, puration, etc.

    Activit : Organisation internationaleImplmentation : Nettoyage de donnes, Consolidation de donnes, Donnes gographiques

    Page 12

  • garder trace des traitements raliss sur les dossiers. Lors des rapatriements, pour des raisons juridiques, nous ne transfrons pas la base vers le pays de retour des rfugis. Talend Open Studio peut nous aider automatiser lagrgation des trs nombreuses feuilles Excel qui en sont alors extraites. Il est devient facile de produire les tableaux de bord qui serviront suivre ltat davancement de la procdure de validation des retours.

    Un projet global de gestion de donnes spatiales

    Le HCR a par ailleurs initi un projet consistant mettre en place un Web SIG (Systme dinformation gographique) consolidant, lchelle du globe, les reprsentations go-spatiales des camps de rfugis. En plus des donnes collectes directement par le personnel du HCR ou de ses partenaires sur le terrain, les informations peuvent tre croises avec des couches de sources varies (base transport et logistique UNSDI-T maintenue par UNJLC, base toponymes de Geonames, base sur les units administratives sub-nationales du projet SALB).

    Le projet a dabord t initi sur une chelle rduite lAfrique de lOuest afi n de valider la pertinence de notre prototype et de le prsenter notre hirarchie. Dans le cadre du projet global, nous le gnralisons maintenant plus dune quarantaine de camps travers le monde (Soudan, Tchad, Ethiopie, Kenya, Rwanda, Tanzanie, etc.) explique Edouard Legoupil. Les donnes de chacun de ces camps ont t produites diffrentes priodes par des consultants ou des partenaires et ne reposent donc pas forcment le mme schma. Talend Open Studio nous aide nettoyer les donnes, harmoniser les rfrentiels et consolider lensemble des informations dans un schma de donnes unique. Des extraits de cette base de donnes sont ensuite chargs dans une base de donnes extension spatiale (POSTGIS) via le module Spatial Data Integrator for Talend dvelopp par Camptocamp.

    Le projet, dont le dveloppement est assur par lquipe de Camptocamp SA (France et Suisse, www.camptocamp.com), offre une importante innovation puisque la mme interface est capable de fonctionner la fois en ligne et hors ligne. Dans les rgions et les conditions o le HCR travaille, il est nest pas raliste de se reposer sur un accs continu Internet. Il nous a fallu prvoir un systme mariant lergonomie et la facult de mutualisation de donnes offerte par un WebSIG avec la capacit offl ine dun logiciel SIG traditionnel, explique Edouard Legoupil. En situation offl ine, les utilisateurs disposeront dun systme de base locale (MapFish coupl Google Gears, tous deux logiciels libres) sur lequel est pr-charg, via un Job Talend, le jeu de donnes correspondant la zone restreinte dans laquelle ils travaillent. La synchronisation des donnes sopre ds que lutilisateur a lopportunit de se reconnecter Internet.

    Par ailleurs, le HCR gre environ 8 annes darchives cartographiques, qui sont diffuses et stockes en format PDF. Travaillant gnralement dans lurgence, les agents doivent tre en mesure de trouver rapidement une carte, quils disposent ou non dune connexion Internet indique Franois-Xavier Prunayre, Chef de projet chez Camptocamp. Grce Spatial Data Integrator for Talend, le systme gnre automatiquement des mtadonnes partir de fi chiers PDF afi n de rfrencer ces cartes dans le catalogue de mtadonnes de lUNHCR. La recherche est en outre facilite grce des informations dtailles contenues dans les proprits des fi chiers.

    Consolidation et aide la dcision

    Les donnes hberges par le systme sont trs varies et leur consolidation offre une vue globale des conditions de vie des rfugis dans les camps. Par exemple, nous grons un important camp de rfugis libriens ici Accra poursuit Edouard Legoupil. Grce notre systme, nous disposons dinformations sur les infrastructures (par exemple, sur les habitats ou les routes, mais aussi les coles, les points deau, lassainissement, etc.). Dans notre base mtier, proGres, nous disposons des composantes dmographiques des populations qui y vivent (comme lge, le sexe, la qualifi cation, etc.). Les reprsentations cartographiques que nous pouvons crer en croisant ces informations partir de ladresse de chaque rfugi se rvlent prcieuses pour mettre en place nos programmes dassistance. Par exemple, la carte de vulnrabilit, en localisant les personnes ges ou les femmes seules avec enfant, peut aider les responsables de la scurit du camp organiser leurs rondes. Nos problmatiques sont en fait trs proches de celles de collectivits locales. Les plus grands camps peuvent hberger plus de 50 000 personnes. Nos donnes sont bien sr confi dentielles et scurises, elles ne sont exploites que dans le cadre des programmes dassistance.

    A terme, il est envisag de coupler les outils danalyse gographique des outils de Business Intelligence, type OLAP. Au-del dune visualisation prdfi nie des donnes, il deviendra possible dexplorer leur contenu, de forer les donnes et dlaborer soi-mme ses hypothses et analyses.

    Lopen source lve les freins linitiative et linnovation. Malgr un budget initial rduit, nous avons pu rapidement faire la preuve de nos concepts et une initiative locale a pu ainsi rapidement tre dcline au niveau mondial conclut Edouard Legoupil. Une grande quantit de donne est recueille lors des oprations humanitaires. Hlas, du fait des diffrents formats utiliss et dun systme dintgration de donnes encore relativement artisanal, nos possibilits dexploitation ont souvent t limites. Aujourdhui, avec Talend, ces perspectives peuvent tre revues entirement. Cet outil est vraiment idal pour aller plus loin dans lexploitation de nos donnes.

    Page 13

  • Spcialistes du consulting routier

    Bas Aix-la-Chapelle, en Allemagne, Theis Consult GmbH a t cr en 1991 par Theo Theis, spcialiste en gnie civil. Depuis, la socit a tendu ses oprations pour inclure linformatique ; aujourdhui, Theis Consult offre diffrents services dans ce secteur, du consulting jusquau dveloppement de logiciels. Theis Consult recommande des solutions et aide ses clients dvelopper des projets divers et varis, dont le management urbain, la scurit routire, la recherche et dveloppement, etc. Theis Consult est devenu un des leaders dans le management, le consulting et lamnagement routier en dveloppant des logiciels et des solutions pour soutenir le rseau routier.

    Amliorer les conditions autoroutires du rseau tendu allemand

    LAllemagne est fi re davoir un des meilleurs systmes autoroutiers au monde12 500 km (troisime rseau le plus vaste aprs celui des Etats-Unis et celui de Chine) de routes en excellent tat reliant les villes principales du pays et offrant aux voyageurs des conditions optimales de conduite et des informations en temps rel sur ltat du trafi c grce un rseau dense de panneaux lumineux. Cependant, comme beaucoup de pays, lAllemagne est sujette aux fl uctuations du trafi c : vacances scolaires, mauvaises conditions mtorologiques, heures de pointe, travauxtous ces facteurs peuvent contribuer augmenter le volume de circulation et des embouteillages. LAllemagne est une rpublique fdrale comprenant 16 Lnder, chacun tant responsable de la gestion de leur territoire. Mme si le systme routier est amnag et organis de faon centrale, au niveau fdral par le ministre fdral des transports, chaque Land a une administration des transports et est responsable de lamnagement et de loptimisation du trafi c, des travaux, etc. Comprendre les diffrents aspects de la circulation suppose lanalyse de volumes de donnes importants lavance, explique Christian Roszak, DG de Theis Consult. De plus, chaque administration des transports utilise son propre systme pour grer la circulation et pour comptabiliser le nombre de vhicules, ajoutant cela un nouveau degr de complexit : toutes ces donnes ont besoin dtre traites et formates pour correspondre nos bases de donnes analytiques.

    Lintgration de donnes pour fl uidifi er les embouteillages

    Pour dvelopper le contrle de la circulation et le systme danalyse qui devraient tre dploys toutes les entits de gestion des autoroutes sur lensemble du territoire, Theis Consult avait besoin dune solution dintgration de donnes puissante et versatile. Les donnes collectes par les capteurs routiers (comptage des voitures, radars, etc.) existent dans des formats diffrentsbases de donnes Oracle, Informix, PostgreSQL, fi chiers XML, fi chiers plats ASCII, etc. De plus, chaque

    Theis Consult gre et analyse le trafi c routier allemand

    Talend Open Studio permet lanalyse du trafi c autoroutier afi n danticiper au mieux les embouteillages.

    Compar au dveloppement manuel, Talend Open Studio nous a permis dconomiser 57% de temps de dveloppement pour le premier projet. Talend Open Studio nous a aussi permis de rutiliser les processus dintgration de donnes dun projet lautre. Aprs un investissement initial, nous pouvons donc optimiser le travail fait et lutiliser pour de futurs projets (avec diffrentes structures et technologies) plus rapidement que si nous devions recommencer chaque fois.

    Christian RoszakDG

    CompCom

    ActivitGnie civil

    ImplmentationConsolidation de donnes, ETL

    Points cls12 500 km dautoroutes16 Lnder (Etats) responsables des transports, Ministre Fdral des TransportsDonnes provenant des capteurs routiers, messages dalerte du trafi c, mto, densit de population, vacances, sites de travaux, etc.Bases de donnes Oracle, Informix, PostgreSQLFichiers XML et ASCIIFormats spciaux : RDS-TMC, TLS, DATEX II, TPEG, OKSTRA, etc.

    www.theis-consult.de

    Activit : Gnie civilImplmentation : Consolidation de donnes, ETL

    Page 14

  • confi guration est diffrente ; il y a autant de schmas de bases de donnes quil y a de systmes sources, explique Christian Roszak. Nous avons aussi besoin de regrouper les donnes RDS-TMC utilises pour diffuser les messages dalerte trafi c sur des programmes radio rguliers, les donnes relatives la mto et aux travaux qui sont stockes dans un format particulier ainsi que dautres informations (densit de population, dates des vacances, sites de construction, etc.). Mme sil existe plusieurs standards dfi nis pour les interfaces et les changes de donnes (comme TLS, DATEX II, TPEG, OKSTRA, etc.), ils sont souvent inaccessibles et inutilisables pour la planifi cation analytique, stratgique et conceptuelle.

    Theis Consult a dploy un projet similaire pour une agence de travaux publics en utilisant des scripts pour agrger et transformer toutes les donnes sources. Le traitement des donnes est trs complexe, explique Christian Roszak. Le dveloppement manuel des processus dintgration de donnes fi nit par tre trs consommateur en temps, diffi cile maintenir et les processus rsultants ne peuvent pas tre rutiliss pour dautres projets similaires car toutes leurs caractristiques doivent tre codes manuellement.

    Theis Consult a donc dcid de sintresser aux solutions dintgration de donnes. Ayant utilis des outils ETL propritaires dans le pass, je connaissais leur puissance mais aussi leurs limites, explique Christian Roszak. Nous traitons de gros volumes de donnes, cest pourquoi un temps dexcution trs rapide est ncessaire. Nous devons pouvoir galement personnaliser la solution avec des connecteurs et des composants de traitement de donnes supplmentaires. Aprs un court essai, choisir les solutions Talend nous a paru vident.

    Talend Open Studio gnre du code natif Java et Perl avec du SQL embarqu (pour les interactions entre les bases de donnes) et offre un temps dexcution performant en vitant davoir se reposer sur un moteur dintgration lent et lourd. Son ouverture permet aux utilisateurs et aux intgrateurs de crer facilement leurs propres composants et connecteurs et de les ajouter la solution sils ont besoin de fonctionnalits supplmentaires. Cependant, Talend Open Studio est prt lemploi avec plus de 400 connecteurs disponibles et la plupart des bases sont donc dj couvertes.

    Compar au dveloppement manuel, Talend Open Studio nous a permis dconomiser 57% de temps de dveloppement pour le premier projet, conclut Christian Roszak. Mais en plus de la fl exibilit et du gain de temps, lutilisation de Talend Open Studio nous a aussi permis de rutiliser les processus dintgration de donnes dun projet lautre. Aprs un investissement initial, nous pouvons donc optimiser le travail fait et lutiliser pour de futurs projets (avec diffrentes structures et technologies) plus rapidement que si nous devions recommencer chaque fois.

    Page 15

  • Leader des petites annonces

    Car & Boat Media est une holding ddition cre en 2007 par le groupe de mdia franais SPIR, leader du web automobile en France (Caradisiac.fr) et par Schibsted, groupe de mdia scandinave (Internet, Journaux, imprims et services mobiles) prsent dans 20 pays et sappuyant sur prs de 10 000 employs, diteur notamment de La Centrale et du quotidien gratuit 20 Minutes. La cration de cette socit a galement donn naissance au leader du web automobile en France.

    La Centrale est aujourdhui une marque multimdia : 1er site de vhicules doccasion cr en 1999, journal hebdomadaire national depuis 1969 connu historiquement jusquen 1998 sous le nom La Centrale des Particuliers , magazines thmatiques (La Centrale 4x4, Petits Prix...). LaCentrale.fr est le 1er site de petites annonces auto/moto, avec 6 millions de visiteurs par mois et 130 millions de pages vues.

    Historiquement, les systmes dinformation de Car & Boat Media ont toujours occup une place stratgique dans les activits de la socit.

    Implique de manire directe dans le dveloppement de lentreprise et accompagnant au quotidien les utilisateurs mtiers, la DOSI (Direction de lOrganisation des Systmes dInformation) cherche en permanence amliorer ses outils, afi n de gagner en performances tmoigne Ahmed Noui, Chef de Projets Techniques chez Car & Boat Media. Ainsi, ds lavnement dInternet la fi n des annes 90, nous avons mis en uvre un site web qui regroupe aujourdhui la totalit des volumes dannonces que nous proposons au public, soit une masse denviron 180 000 annonces, qui ne cesse daugmenter. Ne disposant auparavant que de moyens humains pour acqurir les donnes, les valider, puis les publier, il devenait impossible de suivre le nouveau rythme impos par les pratiques Internet.

    Paralllement, Car & Boat Media cherchait concilier les exigences de deux publics (les particuliers dont la frquence des annonces est espace, et les professionnels publiant quotidiennement dimportants volumes dannonces) et laborer des stratgies de relation client cibles. La socit devait galement veiller leur proposer des services mixtes permettant de publier aisment une annonce la fois sur le web et sur papier.

    Une premire tape : lEDI

    En 2004, la socit a mis en uvre un systme dEDI (change de donnes informatis) permettant dautomatiser un certain nombre dtapes manuelles pour acclrer le traitement des annonces. Les annonces manant des professionnels ntaient ainsi plus saisies manuellement, mais exportes de leurs logiciels de gestion via un fi chier plat ou XML, puis dposes sur un site FTP et enfi n traites

    Car & Boat Media automatise la chane detraitement de ses petites annonces Talend Integration Suite permet de traiter plus de 180 000 annonces par semaine en toute fi abilit, augmente la productivit et les performances.

    Aprs avoir effectu des tests trs pousss sur dimportants volumes de donnes, nous avons lassurance que la solution tient la charge, ce qui est un lment essentiel pour nous : face laugmentation de nos volumes, nous avons fait un choix davenir.

    Ahmed NouiChef de Projets Techniques

    AprAprt tt t

    quesques

    ActivitGroupe de presse

    ImplmentationIntgration de donnes oprationnelle

    Points clsGestion dannonces imprimes et Web

    180 000 annonces gres par semaine

    Migration effectue en 4 mois

    Facilit dutilisation et de maintenance, adaptabilit

    Qualit du support

    Fonctionnalits de dploiement dentreprise

    Bases de donnes MySQL, Progress, MS SQL Server Fichiers plats

    Activit : Groupe de presseImplmentation : Intgration de donnes oprationnelle

    Page 16

  • automatiquement. En 2008, le canal EDI a largement dpass le canal web traditionnel de saisie dannonces (proportion : 60/40). LEDI prenant de lampleur, la DOSI a d amnager le systme dinformation en vue damliorer cette chane de traitement poursuit Ahmed Noui. Nous exploitions jusqualors un outil de dveloppement Java sous Linux, permettant de grer des problmatiques de workfl ow (Business Process Management). Mais celui-ci a commenc montrer ses limites lors de la monte en charge partir de 2005. Nous avons dvelopp des patchs et multipli le nombre de serveurs en exploitation pour fi abiliser le systme, mais nous savions que la solution ntait que temporaire. A mesure que les volumes continuaient de crotre, le logiciel avait des comportements alatoires, malgr une monte de version. Il tait temps de mettre en uvre une vritable solution dintgration de donnes, plutt quun outil de workfl ow, afi n non seulement de rsoudre nos problmes de performances, mais galement de prendre en compte lhtrognit des donnes et la varit de nos partenaires.

    En effet, si lactivit de base de Car & Boat tait centre au dpart sur les annonces auto, elle sest largie au fi l du temps pour proposer des annonces motos, camping-cars, caravanes, bateaux, etc.

    Talend Integration Suite : une vidence

    Aprs une tude purement fonctionnelle visant dfi nir avec prcision ses besoins, la DOSI a lanc une tude technique pour slectionner la meilleure solution dintgration en fonction de critres trs prcis. Quatre solutions ont t testes, parmi lesquelles fi guraient Talend Open Studio et Talend Integration Suite, ainsi que

    la nouvelle version de loutil de workfl ow dj utilis et une solution dintgration de donnes commerciale.

    Nous avons vite cart les alternatives commerciales, non seulement pour des questions de budget et de philosophie (le systme dinformation de Car & Boat repose depuis longtemps sur des briques open source), mais surtout car nous ne souhaitions pas dpendre dun diteur pour nos dveloppements. En ralit, la slection de Talend Integration Suite, nous est apparue rapidement comme une vidence explique Ahmed Noui. Les principaux critres dvaluation, au-del des aspects conomiques (licence + maintenance) et du type de licence (GPL, utilisateurs ou processeurs), taient la facilit dutilisation et de maintenance, ladaptabilit (cest dire facilit dintgration dans notre environnement), les possibilits dautomatisation, la compatibilit avec de nombreuses plates-formes et bases de donnes, la gestion des alertes et le reporting. Talend Integration Suite et Talend Open Studio ont respectivement obtenus la note de 7,6 et 6,6/10, les deux autres produits natteignant pas la moyenne. La qualit des services de support et les fonctionnalits de dploiement dentreprise offertes par Talend Integration Suite ont achev de nous convaincre.

    Page 17

  • Page 18

    2009 Talend. All rights reserved.

    Talend_Practical_OSDI_shell_FR.pdfLevolor rationnalise son intgration B2B 4Virgin Mobile un nouveau forfait ETL illimit pour la Business Intelligence 6SupplyFrame automatise la cration de son catalogue et de ses mises jour 8MyBuys personnalise lachat en ligne 10UNHCR amliore ses prises de dcision grce lintgration et la cartographie 12Theis Consult gre et analyse le trafic routier allemand 14Car & Boat Media automatise la chane de traitement de ses petites annonces. 16