HOME | COUNTRIES | CITIES | COMPANIES | SPORTS | CARS
news videos images websites wiki



Bonjour donc faire cette présentation technique paul va sur et ensuite je voudrais vous donner un peu de contexte sur ce qu'on fait chez euronext alors quelques quelques mots sur euronext dont euronext opérateur boursier européen opérateurs de marché présent dans 5 sec. Pays paris bruxelles amsterdam lisbonne et récemment en irlande à dublin donc euronext s'est séparé du new york stock exchange en 2014 donc qui il a ensuite fait une introduction en bourse l'introduction en. Bourse qui aujourd'hui a été multiplié par 2 points 5 c'est à dire on est passé d'une. Valeur de 19 euros a aujourd'hui quasiment 60 euros. Autant vous dire la confiance que vous nous font les investisseurs et d'ankoro nec s'est aussi dotée d'une stratégie et d'un plan stratégique sur trois ans 2016 à 2019 appelé à gilles. Tifo gros donc qui nous a permis de faire certaines acquisitions émergent sur cette période quand je disais récemment nous avons fait l'acquisition de la bourse de dublin e et puis l'année dernière nous avons fait aussi l'acquisition de l'entreprise américaine fast match qui fait du forex tu forex un produit sur lequel on n'était. Pas prêt voilà pour pour euronext alors je fais je vais rapidement vous parlez un peu de du voyage qu'on a fait depuis un an et demi on l'a commencé effectivement par une réflexion. Sur les besoins euronext en termes de données on a vu qu'on avait pas mal de limites en termes de capacité à analyser les données et et ans elle est valorisée alors ce qu'il faut savoir aussi se relaxer que la vente de données représente pour rosneft 20 % de son revenu c'est quelque chose quand même qui est assez présent dans. La culture de business euronext et donc nous avons nous avons également essayé de collecter certains besoins extérieur de nos clients qui en vrai appétit en termes d'usagé de la donner ce qu'il faut savoir c'est que dans les marchés boursiers toute décision d'investissement elle est basée sur des faits et donc les. Fesses en train de lui en réalité par des données nous avons également regarder ce que font nos compétiteurs nos compétiteurs européens et aussi dans le monde sur 7 sur cette partie business en. Termes de vent de données analytique il s'est avéré qu'on avait on avait un. Peu de retard qu'il fallait vite se bouger pour reprendre cette marche de retard également ce que ce qu'on a vu pu aussi est constaté en interne ce qui a aussi une vraie demande on interne pour tout ce qui est analyste de la donner pour pour justement pouvoir analyser sous fond les compétiteurs tout ce qui est marqué de chair sur. Sur ce segment et puis également on avait une opportunité liés à notre programme de refondre notre système de. Training qui s'appelle optique qui nous permet également de récupérer collecter de la donner en temps réel avec une avec. Une architecture basée sur sur du kafka. Et du streaming il faut pas oublier. Aussi je ne sais pas si c'était contre un taux d opportunité je les vois surtout comme des opportunités tout ce qui est régulation donc dans le marché de la finance nous avons une régulation qui s'appelle n'y fit 2 qui est qui nous amène à être un peu plus transparent et faire beaucoup plus. De reporting aux régulateurs et gdp art je pense que tout le monde ici connaît la difficulté d'être complets y en avait qu'une avec une régulation aussi aussi complexe donc tout ça pour vous dire que nous avons engagé un certain nombre de demandes extérieures et. Intérieures qui nous ont amené un certain certaines réflexions à développer. De nouveaux produits autour de la data mais surtout concentré notre effort et comment. Est ce qu'on peut vous resterez tout ça sur ce. Que j'appelle la data governance donc la date de gouvernance et c'est d'abord tout ce qui est développement. Technologique mais aussi comment est ce que je pense que je vais orchestré tout ça en termes de process en terme de sécurité et en termes de procédure voilà voilà. Pour pour le contexte voilà maintenant ce que nous avons sorti de ses études et notre roadmap et de son implémentation est évident et clair que si on veut s'affranchir des contraintes de disponibilité des données c'est pas très compliqué d'aller qu'aujourd'hui nous a semblé. Totalement en ligne avec ce. Qu'on cherchait à faire c'est à dire pouvoir doter euronext d'une capacité ont donné qu'ils soient illimité et donc c'est pour ça qu'on a choisi d'aller sur amazon pour sa capacité à stocker de la donner. Sur s3 au mode illimité de pouvoir intégrer et ingéré de. La donner en temps réel depuis notre plate. Forme mais aussi pouvoir l'enrichir demain avec les des données externes ce qu'on a des données qu'on achète chironex depuis depuis des plates formes comme au retur ou bloomberg est de pouvoir construire au-dessus de. Ce data l'est qu'un certain nombre de produits alors le premier produit si vous lisez de la gauche c'est un peu notre fondation et c'est grâce à ce projet qu'on est. En train aujourd'hui 2 de construire notre tallec c'est notre base de données de marché qui nous permet de rendre un certain nombre de services pour tous qui est facturation et tout ce. Qui y est reporting aux régulateurs. Et puis à côté ce qu'on a aussi décidé de faire c'est justement pouvoir développer un certain nombre de produits certains sont plutôt dédié pour avoir plus de revenus. Donc je pense à data shop qui est un produit qui va être ouvert vers l'extérieur avec des api y aille avec des capacités avant de la donner à la demande enrichi n'est pas que de la données temps réel donc il ya un vrai travail. De gouvernance et de qualité de données à mettre en place et donc on a beaucoup d'idées aujourd'hui on est. Sur la release one sur 2018 je peux pas vous donner trop de détails puisque la release en 2019 on devrait dépasser ce que font aujourd'hui nos compétiteurs donc on a mis les moyens et aujourd'hui les choses avancent comme prévu sur cette partie et puis il ya des sujets qui sont aujourd'hui sur. La partie de droite de votre ex de l'écran on a des news qu'est ce qu'ils sont aujourd'hui en cours de d'études et on pense aujourd'hui à notre solution de surveillance de marché qui demande. Un certain nombre d' expertise comment est ce que je lis des données temps réel et je puisse faire de l'analytics et pouvoir détecter des patterns pour tout ce qui est marqué t'abuse ou ce genre de choses que aujourd'hui on est les équipes de surveillants. Qui le font avec avec des seuils statiques hissant défini à l'avancé on pense aussi à des intelligences artificielles pour pouvoir aider ces surveillants dans leur mission et pouvoir et qu'ils puissent focaliser sur des choses à valeur ajoutée et puis enfin ce que disait claude rich juste la session avant puisque cloud. Il fait partie aussi de nos partenaires la capacité à fournir de la donner à la demande à certaines populations d'euronext je pense à des utilisateurs des craintes des gens qui font de l'analyse qui ont. Besoin de données de brasser de la donner l'idée c'est de créer un espèce de laboratoire pour tester des idées pouvoir les faire passer en production donc c'est des idées que certaines personnes aujourd'hui mais ils n'ont pas les moyens ils n'ont pas la donnée de pouvoir le pouvoir la réaliser et donc on. Pourrait voir des produits émerger de 7 2 7 5 boxes analytique pourrait être posée demain dans data shop à la vente où elles pourraient aller vers les régulateurs parce qu'on va améliorer aussi notre transparence vis-à-vis de la vie dure des régulateurs mais également elle pourrait aussi aller vers vers l'outil de surveillance parce qu'on. Va trouver des nouveaux des nouveaux modèles qui nous permettent de mieux surveiller notre marché voilà donc on a mis les moyens c'est une stratégie que moi même et mes équipes implémentant depuis début de. Cette année nous avons une vision jusqu'à fin 2019 donc tous ces projets devraient être en production voire avant pour certains voilà donc aujourd'hui il ya l'intelligence artificielle la seule limite je. Dirais c'est l'intelligence humaine. Quand on offre tous ses services au business les utilisateurs c'est à eux maintenant de pouvoir développer et être créatif voilà pour pour ma présentation je vais donner laisser la parole maintenant à paul demonchy si vous avez des questions je serai là pour pourrait importer merci beaucoup et d'hermann donc le challenge. Comme vient d'expliquer abderrahmane c'est de pouvoir faire d'euronext une société qui soit vraiment data centric donc c'est un challenge qui a été lancée en ce début d'année et le challenge c'est de le faire avec les outils qui vont bien et donc avec la wsk. Lors faire un télex sur à w s je pense que vous avez une présentation juste avant donc je vais. Être assez bref je vais pas forcément accentuée sur tous les produits qui permettent de faire un tas tallec mais peut-être en tout cas resituer quelques principes de base 1 datalex sur s3 à date élections amazon cs3 cs3 parce qu'on des couples le stockage de données avec le computer est donc ici on n'échappe pas à cette règle on n'échappe. Pas à cette règle. Mais on va aussi se focaliser sur un autre outil qui redshift qu'un moteur de base de données pour des petabyte. De data et ça ça va venir en remplacement direct dans legacy actuelle chez euronext qui est. Une base de données netezza la migration des données actuelles qui sont une prémisse verra w s ça va se. Faire principalement avec avec du snow ball pour aller rechercher tout l'historique et on va également utiliser dms data migration de service pour pouvoir faire en complément tout le différentiel dans le cadre. De cette migration pour la sécurité on va chiffrer la totalité des données sur radio sur s3 ce qui est fondamental je vous encourage fortement à toujours forcés dans les règles de vaud bucket policy ou règles de s3 avoir ce chiffrement ça vous permettra de ne jamais avoir un bouquet de public c'est simple. À faire et c'est essentiel comme le disait werner ce matin et on va aussi utiliser iam qui est donc le système de da est un titi et d'accès. À ce management d'afw s pour pouvoir déterminer qui peut avoir accès la donner et qu'elle donnait précisément il ya un point majeur sur lequel on va mettre l'accent aujourd'hui dans cette présentation c'est la partie transformation. De données actuellement il ya des processus de transformation de données qui sont utilisés pour pouvoir mettre la donne et d'endetter 2 à ils sont utilisés ils sont mis en place principalement avec génieau et en fait on va les transformer pour utiliser du talent et est donc principalement ça va être des jobs ce parc qui vont être créés à l'aide. De l'outil talent' pour ceux. Qui connaissent staelens et 1 c'est un service qui permet de pouvoir faire de pouvoir écrire des jobs de transformation de données et et c'est l'outil sur lequel euronext a choisi de de base et ses opérations donc tous les jeunes vont être eût écrit avec talent et de. Studio et le résultat. Ce sera des jobs en ce parc qui pourra être ensuite exécuté sur à wsb atx principalement voire sur la mer donc on cesse le choix de pouvoir utiliser les deux l'orchestration enfin de la donne et va se faire avec ce type fonctionne. Ce système fonctionne c'est une machine à et à la wsk qui permet de pouvoir chaîné des steppes pour chesnais des jobs s'assurer que les jobs sont bien faits et et avoir des fonctions les plus atomique possible entre ces différents états donc l'état de l'art aujourd'hui nous avons en point d'entrée un file system que vous voyez à gauche qui. Efface ya ce fameux système il est partagé il sert en fait de plateforme d'entrée des fichiers et. Des changes avec le régulateur avec les partenaires il ya quatre bases de données ibm netezza qui sont entre miss qui porte une volumétrie de 64,74 terrab est compressé point est important compresser et qui arrivent des mots de septembre à saturation du. Coup donc le. Le ca positionne en tout cas une une donne importante du côté d'euronext entre le file system et la base de données et elsa on a près de 150 jobs géniaux qui permet de faire de la transformation de données et une disette. De job talent. Et qui permettent en fait d'avoir la donne et qui arrivent au bon format dans dans des thésards et comme l'a. Expliqué ce matin nicolas on a on a ces jobs de transformation qui s'effectue. Par balles successifs en fin de journée et ça peut prendre entre six et douze heures donc ce qui est ce qui est une. Situation qui on peut largement évitées avec le cloud et avec les outils qu'on a décidé d'utiliser il ya aussi des données qui sont en streaming et donc potentiellement on va aussi se laisser la possibilité de pouvoir traiter ces données en streaming elles sont aujourd'hui. Disponibles sur un kafka et enfin la donne et une fois qu'elle est utilisée une fois qu'il est disponible sur des t2 à elle et elle est exposée via des connecteurs dbc après 250 utilisateurs en interne et donc ça dans la migration qu'on est en train de mettre en place on va maintenir cet état alors comment. Migrer ses process et les. Adapter au cloud pour bénéficier d'une orchestration plus événementiel et pour pouvoir paralysé l'ensemble de ces tâches on a mis en place un process. 10,26 grings l'idée c'est plus forcément de se baser sur un skate du leur type taille dalle qui. Était utilisé en prémices mais en fait quand la data arrive sur s3 on va avoir des stèles fonctionne qui vont automatiquement être lancée et danser les les tâches en fait de transformation de données sur la wsb h donc ça passe par un mécanisme avec la treille. Qui le système de sécurité qui lobe absolument toutes les appels d'api haye sur la wsg on a un cloud chiffonne qui vient surveiller un pattern sur ces appels équivalence et du coup lorsque ça correspond à un pattern de fichiers qui nous intéresse sur s3 une stèle fonctionne qui a elle-même ensuite il ira lancer différents jobs sur a&w ce. Match et ces jobs étant écrit avec talent ce système fonctionne je fais un rapide parenthèse dessus donc comme. Je vous l'aï dit c'est une machine à état on part donc en fait on part d'un état initial et on décompose les actions à effectuer en font en petit fonction atomique et on donne la possibilité dit terré d'attendre. De boucler et typiquement ici on prend. Le cas d'un. Job talent' exécutif sur adoubuzz match mais on. Se réserve le droit également de le faire avec avec eux est maire alors si on prend un petit peu de recul voici à quoi ressemble architecture globale de. Notre arrestation donc de toutes les phases de transformation de données donc à gauche vous avez le fal système le fsi a qui en prennent des données sont envoyées sur s3 la deuxième opération du coup c'est de lancer automatiquement des steppes fonctionne qui elles mêmes vont appeler à w ce match et de façon itérative. Sur les différentes étapes elles vont enregistrer des états intermédiaires toujours sur s3 dans un budget qu'on appelle process et l'état final de ces transformations c'est de mettre sur redshift est également sur étroit pour pouvoir développer et déployer cette architecture on utilise massivement de l'infrastructure à. Ce code donc principalement du club formation voire uniquement en fait du clac formation et est donc on a déployé une pipe. Line de siaci dit ici je vous montrais une première itération de celle ci qui est fait dans le cloud et c'est ce qui va servir de démonstration aujourd'hui il ya une deuxième itération de cette populaire de sidi qui a été fait avec des outils type jenkins et aiguë lab met met donc. Celle ci je vais pas pouvoir vous l'a démontré puisqu'elle utilise des briques qui soit un très bon mais ça revient exactement au même donc première étape c'est d'aller écouter ce qui se passe sur un dépositaire higgitt sur lequel il. Ya donc le comider des jobs fait par les développeurs talend et dès qu'il ya un comité qui est lancé dalé bild et le job et enfin de le déployer avec la formation donc oui non voilà c'est ici alors ici je vais faire un. Comité bidon en fait j'ai peut-être changé je vais rajouter. Juste un espace une entrée et j'ai pas si vous avez bien voir mais je leur ai juste un comique d'un guide et c'est. Bon mais s'extraire qu'en fait ce n'est pas le retour alors je veux dire la merci pour ceux qui suivent voilà la haye et push donc là ça va prendre normalement on a on à la paille plane ici qui devrait être ça devrait devenir bleu dans source ça ne fait pas juste rafraîchir la page. Voilà donc ça a été détecté automatiquement un parent par la pipe line et. On va rentrer du coup dans une étape de bill depuis une étape de diplômes je. Vais revenir à la présentation on va laisser ça se faire pendant quelques minutes donc cette pipe line. De siaci dit on les a adaptés pour des outils qui sont propres à euronext aujourd'hui c'est à dire au lieu d'utiliser du code ville pour pouvoir bild et on utilise aussi du jenkins est par contre le déploiement quand il se faire avec la formation mais les opérations. De déploiement sont lancés non pas par cobayes plane que je viens de vous montrer mais directement en fin de job par jenkins et et on utilise également le le système de ré poesy torride dit l'abe qui est utilisé massivement en interne chez. Euronext alors un. Petit d'agde pour voir comment est ce que un job talent' avec un déploiement de ce. Type est orchestrée on a ici c'est le repository git qu'on va avoir pour les développeurs talent' donc la totalité de leurs de leur écriture de jobs est stocké dans un répertoire donc c'est le talent and project ici mais ça porte un nom à chaque fois différent sur l'opération de transformation et puis on va avoir un sou. Répertoire qu'on a nommé ici à w s il ya ici dit. Qui contient en fait. Un docker file le dr file. En fait c'est ça va être le fichier qui va permettre dans la phase de build de construire une image docker qui sera utilisée par à w ce. Match dans le cadre de l'exécution des des jobs talent' c'est une image assez basique on a juste besoin d'installer oracle jd qui habite pour être compatible avec. Talend le temple est claude formation donc c'est. Celui qui est redéployé à chaque fois dans le cadre de. L'apa plane donc lui va contenir toute l'infrastructure correspondant à un autre à w ce match donc on a un computer vermunt qui va être finalement le le. Système qui va orchestrer le fait de pau pdd des conteneurs de la bonne sur sur un os qui soit à la bonne dimension en termes de mémoire et de cpu c'est à dire qu'on détermine à chaque fois pour les tâches qu est la quantité de cpu et mémoire et à w ce match va sélectionner automatiquement les. Instances qui sont les plus adéquates il va également les sélectionnés en se basant. Sur du sporting stentz ça veut dire qu'on va y avoir des économies massives dire qu'on détermine que tous les jobs se font sur du spot et en fonction de la quantité de cpu et mémoire qu'on a demandé pour l'exécution du job et bien derrière on aura les instances qui sont. Les plus avantageuses pour le client m'entendais bien bas ok des fonctions lambda c'est celle qui vont être utilisés dans le cadre de cette fonction cette fonction est un orchestrateur et machina état mais en tant que telle à chaque. Fois qu'on veut effectuer une opération on la délègue direct directement à une fonction lambda je vous montrerai dès que ce sera construit la tête de la stop motion j'en ai fait. Une relativement simple mais pour vous pour vous montrer pour montrer tout ça et puis on a cloud shiv hunt alors ici c'est pour se baser sur la notion d'événementiel dès qu'un fichier est roi. Arrive dès qu'un fichier arrive sur s3 dans le bon répertoire on lance une township hunt plus tôt elle se déclenche automatiquement et c'est elle qui va lancer notre note stable fonctionne avec le lancement des jobs donc c'est vraiment on sort de la logique ce qui est du lait avec une opération une fois par jour à. La fin des fins à la clôture du marché pour pouvoir se permettre dès l'arrivée des bons fichiers de lancer des tâches de transformation de données de façon à les avoir le plus tôt possible et enfin je passe sur les éléments stade fonctionne. Et essayer registry parce que le cirad surréagissent riz c'est là où on. Va stocker notre notre image d'oka et les stats fonctionne du coup on va se refaire un focus plus détaillée une fois ce sera construit et 16ème parameter store c'est très utile. Aussi pour faire passer des variables d'environnement global lambda on a identifié notre fonction des étapes qui trois étapes trois fonctions principales une première en fait qui va lancer le job donc son but c'est d'appeler les api ria w s pour lancer un. Job sur sur a&w ce match ou sur eux est maire si on le souhaite un tchèque jobs status pour vérifier que le job est fait entièrement et potentiellement on a aussi on. Se laisse la possibilité d'aller attendre d'autres fichiers sur s3 pour continuer et paralléliser d'autres tâches le but ce point ya mail c'est l'équivalent de ce que vous pourriez avoir en fait pour une recette sur jenkins mais dans le cadre de code bild donc dans notre version avec jenkins ça n'est pas utilisé cela dit. On respecte précisément cette recette également dans le dans le. Cadre de jenkins et config points jeon sa détient toutes les variables d'environnement dont on pourrait avoir besoin pour le déploiement je vais revenir j'espère que notre système est prêt nous sommes en plein déploiement va les observer sur clac formation'' là que le bull. S'est bien passé manifestement night in progress ça ne se rafraîchit pas tout seul que ça intéresse je peux faire un rapide focus sur le template clac formation des transhumants un. Petit peu je ne sais pas si c'est visible pour chacun non même pour moi c'est un peu petit ça reprend les éléments que j'avais listé sur la slider est ici si on prend un petit pic mans autre notre confiance envers le monde on précise ici le. Fait qu'on souhaite travailler avec les instances optimale selon la quantité de mémoire qu'on souhaite mettre dans notre tâche est également de travailler en fait avec des. Spots inch nails. Donc là avec les spots in stat si on fait des économies massives on peut aller jusqu'à juste un facteur 5 / sur les économies rencontré et on n'utilise que les ressources pendant le temps dont on a besoin pour faire le job je reviens je regarde si on est prêt ce sont les aléas de la démo en direct. Est-ce que vous avez des questions à ce stade le temps que ça se construisent oui c'est c'est une très très bonne. Question si si je vais y répondre alors c'est un des points sur lequel on a passé énormément de temps comme vous l'avez dit on et on travaille dans une activité très régulée donc dans le cadre de la signature et le. Contrat qu'on a fait avec avec amazon nos données vont être en europe on a choisi de les héberger. En irlande et en secours à paris de mémoire maintenant comme je l' ai dit tout à l'heure on a fait récemment certaines acquisitions et notamment aux états unis on ne s'interdit pas à travers le même contrat et pour des nouvelles. Filiales d'ouvrir des data centres amazon aux états unis récemment on a on est en train de le regarder pour une de nos filiales parce que c'est un contrat chapeau et. Qui inclut des spécifités pour les différentes les différentes filiales d'euronext donc notamment pour tout ce qui est trading et données européennes notamment projet des pères le data. Centre les données vont être hébergés en irlande pour une nouvelle filiale qui serait amené à rejoindre le groupe euronext elle serait hébergé aux états unis avec évidemment les toutes les technologies vpc et tout ce qu'on peut mettre en place pour ne pas faire. Transférer des données d'un d'un pays à l'autre ça c'est des choses qu'on ne s'interdit pas de mettre en place contre actuellement alors il ya des choses contractuelle est ce qu'on peut faire je pense que j'ai pas vous le. Vous l'apprendre avec rosneft on peut en deux clics atterrir à hong kong ou en californie comme on veut donc. Contractuellement aujourd'hui on à signer dans le contrat il ya deux choses qui sont bien spécifié c'est qu'on a choisi d'héberger les données européennes en europe donc on a mis l'irlande et et. France après techniquement les équipes qui opère chez nous depuis le portugal sont capables techniquement à travers les farwell à travers la technologie d'ouvrir un site un bpc donc et donc tout un data centre virtuel n'importe où dans le monde et tout se. Fait par dans le cadre légal évidemment on est sur des comptes séparés à chaque fois cédé concédé d'entrée par l qui n'ont pas de porosité entre eux oui alors alors je. Vais répondre à votre question parce que vous avez parlé de cloud acte cloud dax c'est sa date de mars je crois voilà ces quelques voilà ces quelques semaines ce qu'il faut savoir c'est que avec ce nouvel acte ousseynou cette nouvelle loi or onex par définition est soumis à l'ets cents. Américains parce qu'il fait parce que lui même il a des filières aux états unis donc avec cette nouvelle loi au sens cette nouvelle loi on était déjà sur le patriot act d'accord donc se noue cette nouvelle loi aujourd'hui elle elle les. Plus on target plus les entreprises qui sont pas du tout présente aux états unis nous. On est déjà présent depuis deux ans donc on a pas on n'a pas à se soucier. De cette nouvelle loi je pense sur sur ce sujet si si ça vous va bien on peut peut-être essayer de vous. Mettre en relation avec avec nokia juste après qu'ils pourront vous apporter à mon avis les bonnes réponses on pourra en parler aussi plus tard parce que je suis aussi responsable du projet des pères donc on se pose aussi peut-être les mêmes questions mais comme comme moi je le. Disais on est présent un peu partout. Les américains ils ont leur propre rjdp enfin j'ai dpr voilà. C'est le privacy shield donc on est pour la vessie chez l'autre et aux états unis donc nos fournisseurs de certificats d'accès internet sont aussi prévus si schild et c'est donc à une vraie compatibilité entre entre ge et des pères et pour abc chine quand colin et les provinces chiites on. Est un peu dans le même mais on pourra en parler plus tard dans un jeu revient la démonstration du coup parce que maintenant c'est presse est prêt voilà donc nous avons hop je vais aller sur ce thème. Fonctionne nous avons théoriquement et je dirais même avec certitude une stat fonctionne qui vient d'être créée cette machine voilà donc nous avons un système fonctionne ici qui vient d'être créée donc on peut aller dessus juste pour voir à. Quoi elle ressemble donc elle est ici ce qu'elle fait principalement c'est qu'on a un état de départ qui est du coup lancé à l'arrivée d'un fichier sur s3 et on va faire la démonstration tout de suite on vérifie. Que le fichier à lebon patterns avec une petite fonction lambda ensuite si le fichier un bon patterns et qu'il est concerné à ce moment là on va lancer notre job de transformation de données avec talent. Tu es à doubler. Ce match et ensuite on va attendre quelques secondes 10 secondes pour être précis pour voir si le job est terminée ou pas s'il est pas terminée on réitère on. Les attend 10 secondes et on re de chèques en fait à chaque fois et à. La fin une fois que c'est terminé dans arrivants end donc je vais lancer ici une copie de fichiers ça écoute sur un budget qui s'appelle le nxt racing box sur un répertoire aux donc là j'en vois ce fichier donc théoriquement et on va le voir tout de suite en ayant fait ça. On va avoir un job qui vient d'être lancée sur la stèle fonctionne donc en parallèle on voit sur notre répertoire est roi ici au je vais actualisé on à l'arrivée de notre fichier qu'un petit fichier objectivement même la tâche talend qui est derrière elle fait principalement. Une opération d'identité pour aller copié dans un répertoire process histoire de. Ne pas perdre non plus trop de résidence et des données de prod c'est pas de drogue je veux montrer ce qu'il ya dedans je crois qu'il ya vraiment rien du voilà donc dit value un hoquet de nok je pense que c'est c'est pas vos données trod très bien en calant sur. La scène fonctionne up cliquez dessus qu'elle est en cours d'exécution donc ce qui est assez ce qui est assez sympa en fait c'est qu'on peut suivre eux on peut suivre avec précision et de façon graphique comment est ce vrai ce qu on en est sûr des opérations de transformation de données est-il. Ici là ça fonctionne le fait qu'un seul job mais elle peut on peut on écrire soi-même cette stat fonctionne elle peut faire l'enchaînement de trois quatre cinq jeunes avec des opérations intermédiaires. Et donc si on souhaite voir où est ce qu'on en ait dans l'exécution parce qu'on peut faire de la gestion d' erreur ici typiquement dans le catalan jobs status donc je peux voir que j'ai un job qui est lancé et qui à l'état 2 rumble dans à wsb h ça veut dire qu'il attend que le. Computer games lance lance cette tâche donc la tâche elle est prête on va l'avoir ici à paraître dans la ligne du milieu donc là elle est en starting ça veut dire que derrière on a à w ce badge qui a lancé automatiquement une instance de la bonne taille par rapport à nos besoins. Et qui va exécuter cette opération donc ce job qui peut être écrire n'importe quel langage en réalité un comme on est libre on utilise on utilise docker derrière donc le job ici c'est l'exécution d'un job écrit en java mais on peut faire des opérations de cliniques de données chaîné des opérations pour retirer par exemple des caractères spéciaux. Des caractères qui ne nous plaisent pas dans le dans le cadre de notre transformation de données et et et on peut également utiliser goût amer pour allécher les différentes opérations je vais aller dessus et ici on peut voir également. Les log de l'exécution de l'opération donc tout est pisté tout est lobé et vous avez du coup une capacité à pouvoir à pouvoir suivre et vous assurer que les opérations se sont passées dans les bonnes conditions si jamais ça se passe. Pas bien vous avez avec précision ce qui se passait dans le cadre de l'exécution de cette tâche voilà donc là ça s'est bien passé car. Je suppose j'ai pas de message d'erreur on peut aller voir la stat fonctionne pour voir dans quel état elle est je pense qu'elle a besoin d'être réactualisé puisqu'en. Théorie elle est terminée voilà donc s terminé comme on voulait on a eu un succès ce ce qui est une bonne nouvelle on va également voir sur s3 ici donc. On avait notre fichier cal normalement en process on a eu un répertoire du coup procès ce qui a été fabriqué avec notre même fichier calme c'est magique voilà très bien je reviens juste à quelques éléments on va dire des désaccords finalement. Pour rolex d'avoir des mécaniques comme ça qui sont en place et qui sont utilisés. Par les développeurs talend c'est avant tout un gain en agilité donc soyons honnêtes aujourd'hui euronext a des capacités à pouvoir expérimenter innovait beaucoup plus rapidement vous l'avez vu ici il m'a fallu quelques minutes pour juste faire un comité et pouvoir exécuter des tâches pour les développeurs c'est un confort qui est qu est massif on a. Aussi en termes de coûts le fait d'utiliser des spots instanz c'est un facteur 5 sur les économies par rapport à des coups classiques l'estimation qui a été fait et elle. Va se confirmer avec la finalisation des développements sait qu'on a un total cost of ownership qui fait on à iso budget mais avec dix fois plus de data qui va pouvoir être traitées. Une parallélisation de ses data de ces transformations on a aussi l'utilisation de redshift versus netezza redshift il. Ya une fischer qui s'appelle régis spectrum qui permet de pouvoir écrire directement sur s3 et donc pour tout ce qui concerne les archives de data elles vont être stockés sur spectrum ce qui permet d'avoir des économies massives. Également puisque aurait pas besoin de 6 et un moteur de base de données sur la quantité globale de data et enfin sur les aspects d'élasticité on se permet de pouvoir faire juste avoir juste les ressources pour le moment où on souhaite les utiliser et et on se permet aussi mais là on y est c'est le. Step qui va arriver d'aller travailler avec des outils comme kinesis trim et et qui n'existent data analytics pour faire du traitement en temps réel là les premières les premières briques de dates avec sont d'abord sur. Des opérations de baigts c'est la base de données de marché mais on va évoluer assez rapidement sur sur le fait de prendre des données en realtime avec des. Applications comme le site et à bière de type smart pour pouvoir faire de la surveillance de marché et enfin et c'est pas. Des moindres en mettant en place cette cet sera tallec avec euronext je pense que chaque chaque besoin qui a été. Identifiée trouve aujourd'hui en fait son service et la brique qui lui correspond sur un w s et es donc a pas de difficultés aujourd'hui majeur à tordre le système à mettre des ronds dans des. Carrés pour pouvoir atteindre nos objectifs et ça ça permet d'aller très vite et donc on a un rythme d'innovation qui qui suit voilà je vous remercie pour votre écoute merci abder. Si vous avez d'autres questions trois minutes si vous avez trois minutes vous allez question elle dit n'hésitez pas à w ce match mais on peut faire là accueil mer en fait là où. Dans la stat fonctionne on a des fonctions lambda qui vont qui vont lancer un job sur a&w ce match on pourrait faire la même chose avec la mère j'ai déjà fait le principe étant d'aller d'aller lancé un cluster est maire éphémère directement avec les api la double est ce donc ça on. Le fait depuis une fonction dans des en python là ici depuis le fonctionnement des hôpitaux on lance du match mais mais c'est à quelques lignes de code près. La même chose bah. En fait claude formation il va te permettre de pouvoir créer ton infrastructures ce que tu souhaites avoir c'est c'est que c'est qu'en. Fait tu dispose des ressources nécessaires pour faire des calculs au moment où tu en as besoin donc si on opère sur la mer ici on n'ira pas écrire l'infrastructure er dans un temps quelques. Lattes formation'' ce sera lambda qui dansera direct par contre pour batch on a besoin de créer ce qu'on put environment parce qu'il va être le socle de l'exécution des tâches dans la wsb h pour le pur pour le faire simple dans la doubleuse match on a trois éléments on a le computer vermunt. On a le job ku et le troisième des chapes mais on va envoyer des informations dans la task définition. Et en fait on va envoyer une information dans le job ku une tâche d'un job ku et donc on peut enchaîner une dizaine par exemple de tâches qui nécessitent un instant t on va dire chacune 10 giga de mémoire et et 10 cpu ce que va faire le computer band à w ce badge sait qu'il va calculer. Automatiquement combien s qui devrait lancer d'instance et quelle instance il devrait lancer derrière pour l'exécution simultanée ou quasi simultanées de l'intégralité de ses tâches qui sont dans le dock ue et ensuite on peut mettre des dépendances entre les entre les jobs pour que certains jobs athènes attend d'autres ce que vous avez d'autres questions ouais. Or me remplacer kaka s'est passé non non c'est. Pas du tout un remplacement aujourd'hui on utilise kafka en plo maïs chez euronext on a pensé me rhorer avec avec soi kafka soit avec kinesis aujourd'hui la décision qui va être prise je pense. Qu'on va utiliser ni l'un ni l'autre parce qu'on va tirer des données directement de kafka vers le cloud il est possible que l'on n'utilise qui n'existe pour ses capacités analytiques sur tout. Ce qui est surveillance de marché donc ça c'est l'étude comme j'ai. Dit tout à l'heure elle est en cours voilà donc il n'y a. Pas de qui n'existe versus kafka en. Fait on n'a pas besoin on n'a pas besoin d'aller. D'aller d'aller reproduire un kafka dans clad il existe un de près mais et et comme l'expliqué tout à l'heure nicolas rivard il ya certains process dans une société comme euronext qui doivent rester une trêve et et donc le kafka en tant que tel il fonctionne très bien parfois on a des direct connect qui nous permettent de mettre des. Kafka connect d'un cloud et de pouvoir du coup consommer des topics kafka et de lancer des process soit d'écriture directement sur s3 en continu soit soit tout simplement de d'aller alimenter un kinesis stream et lancé des opérations de kinesis data analytics et où kinesis feuille rose pour. Enregistrer les données. Transformé sur sur est ce trop sûrs et shift non en fait on a on a fait un vrai travail on a passé quasiment un an et demi d'assessment pour vous dire comment le choix il. A été difficile je pense qu'il ya un point qui différencie un nouvel ses locaux système c'est c'est toutes les entreprises qui hantent auradou levé son terme de providing du service autour de novès la formation et ce genre de choses on a vraiment vu une vraie carence chez les compétiteurs je ne vais pas les citer mais la vraie la. Vraie différence a été a été fait sur ce sur ce point vraiment l'écosystème autour d'un double s après la qualité des produits je pense qu'il ya aussi d'autres cloud fournisseurs qui sont aussi très bons notamment dans la partie big. Data mais le big data n'était pas n'était pas on n'a pas ouvert le club que pour le big data donc on a aussi d'autres use cases demain et amazon répondait parfaitement à tous ses angles voilà une dernière question on a dépassé le passé le camp 2000 alors être pendant. D'un fournisseur oui évidemment même quand on est en pro maïs on est dépendant parce que quand on choisit les. Thésards on est dépendant du même quand on choisit oracle. Même chez nous on est dépendant de d'oracle quand on a des bases oracle etc je pense que c'est un peu la même question quand on va chez chez un fournisseur comme comme amazon il ya un point qui est important dans l'architecturé c'est. Qu'on a et c'est moi qui ai poussés à ce qu'on n'utilise. Pas 100 % de produits amazon dans le cloud pour ce pour ce programme c'est la mise en place de l'hotel talend ce qu'il faut savoir c'est c'est que talend. Aujourd'hui ils masquent un peu toute la complexité technique demain on peut prendre un tel un don peut le faire tourner chez nous les mêmes règles métier fonctionneront actionnant sur une autre technologie différente d'amazon donc on a mis on a mis cette règle qui nous paraissaient très importante néanmoins. On est on est à 100% je dirais engagé à utiliser toute. La stack de manager de services d'amazon donc on a on a au moins un talent qui pour nous est un est un point essentiel qui nous permettra demain de faire marche arrière mais voilà on s'est pas. Mariée pour faire marchèrent dans dans quelques quelques mois quelques semaines donc l'aventuré elle vient de commencer je. Pense pas qu'on puisse aujourd'hui. Se mettre ce. Point comme un point bloquant pour pour ce qu'on veut faire demain merci.

 


NYSE Euronext Company News

Thu, 02 May 2019 14:25:40 GMT
NYSE President Sees Tech as Key to Big Board's Next Evolution - www.waterstechnology.com
NYSE President Sees Tech as Key to Big Board's Next Evolution www.waterstechnology.com A look at the massive tech projects (and legal battles) underway at the NYSE, which are being led by Stacey Cunningham.
Thu, 09 May 2019 10:55:00 GMT
Brookfield Asset Management Reports First Quarter 2019 Net Income and FFO - GlobeNewswire
Brookfield Asset Management Reports First Quarter 2019 Net Income and FFO GlobeNewswire Net Income of $1.3 billion or $0.58 per share. FFO of $1.1 billion or $1.04 per share. BROOKFIELD, News, May 09, 2019 (GLOBE NEWSWIRE) -- Brookfield ...
Thu, 09 May 2019 05:13:27 GMT
The Patriot Financial Insurance Agency LLC increases their Holdings in Invesco S&P 500 Equal Weight ETF – A Market Journal – Latest news, Updated News, Global News - amarketjournal.com
The Patriot Financial Insurance Agency LLC increases their Holdings in Invesco S&P 500 Equal Weight ETF – A Market Journal – Latest news, Updated News, Global News amarketjournal.com A Market Journal provides global news, targeting, marketing, online media management, hosted news *service* helps with their target audiences in various ...
Wed, 10 Apr 2019 07:00:00 GMT
Information regarding the total number of voting rights and total number of shares of the Company - GlobeNewswire
Information regarding the total number of voting rights and total number of shares of the Company GlobeNewswire Information regarding the total number of voting rights and total number of shares of the Company. (Article 223-16 of the General Regulations of the Autorité des ...
Tue, 30 Apr 2019 07:00:00 GMT
TECHNICOLOR APPOINTS DAVID PATTON AS GLOBAL PRESIDENT, CUSTOMER EXPERIENCE AND ADVERTISING - GlobeNewswire
TECHNICOLOR APPOINTS DAVID PATTON AS GLOBAL PRESIDENT, CUSTOMER EXPERIENCE AND ADVERTISING GlobeNewswire PRESS RELEASE. TECHNICOLOR APPOINTS DAVID PATTON AS GLOBAL PRESIDENT, CUSTOMER EXPERIENCE AND ADVERTISING. Paris (France), 30 ...
Tue, 30 Apr 2019 07:00:00 GMT
AB Science reports today its annual financials as of 31 December 2018 and provides an update on its activities - GlobeNewswire
AB Science reports today its annual financials as of 31 December 2018 and provides an update on its activities GlobeNewswire Paris, April 30, 2019 – 6pm. Net loss of 26.1M€ for the year 2018. Cash position of 11.6M€ as of 31 December 2018, plus 5.7M€ of 2018 tax credit. AB Science ...
Fri, 12 Apr 2019 07:00:00 GMT
Former Coinbase Exec Appointed Head of Sales and Marketing at Fidelity - Cointelegraph
Former Coinbase Exec Appointed Head of Sales and Marketing at Fidelity Cointelegraph Digital assets trading and custody platform Fidelity Digital Assets has named Christine Sandler, former head of institutional sales at Coinbase, the head of Sal...
Tue, 16 Apr 2019 07:00:00 GMT
AB Science presented new preclinical data for masitinib in ALS at the 2019 Muscular Dystrophy Association Conference - GlobeNewswire
AB Science presented new preclinical data for masitinib in ALS at the 2019 Muscular Dystrophy Association Conference GlobeNewswire Paris, 16 April 2019, 8pm. New preclinical data for masitinib in amyotrophic lateral sclerosis (ALS) presented at the 2019 Muscular Dystrophy Association ...
Wed, 17 Apr 2019 07:00:00 GMT
Bryan, Garnier & Co acquires Beringer Finance - PE Hub
Bryan, Garnier & Co acquires Beringer Finance PE Hub Bryan, Garnier & Co has acquired Beringer Finance, a Nordic-focused investment bank. No financial terms were disclosed. PRESS RELEASE. LONDON ...
Mon, 22 Apr 2019 07:00:00 GMT
Orange Business Services launches its HR Innovation Lab to promote co-innovation within the HR ecosystem - WebWire
Orange Business Services launches its HR Innovation Lab to promote co-innovation within the HR ecosystem WebWire An open and agile think-tank Lab to anticipate the transformation of human resources through new technologies, , , , , , Orange Business Services inaugurated ...