L'accroissement continuel des données numériques dans les organisations a conduit à l'émergence du Big Data. Ce concept recouvre les questions de stockage et de conservation de vastes quantités de données mais aussi celles liées au gisement potentiel de valeur que représentent ces masses d'informations. Ce séminaire présente les problèmes spécifiques du Big Data et les solutions techniques potentielles, de la gestion des données aux différents types de traitement.
Formation dans vos locaux, chez nous ou à distance
Réf. BGA
2j - 14h
Vous souhaitez transposer cette formation, sans modification, pour votre entreprise ?
Formation à la carte
Vous souhaitez une formation adaptée aux spécificités de votre entreprise et de vos équipes ? Nos experts construisent votre formation sur mesure !
L'accroissement continuel des données numériques dans les organisations a conduit à l'émergence du Big Data. Ce concept recouvre les questions de stockage et de conservation de vastes quantités de données mais aussi celles liées au gisement potentiel de valeur que représentent ces masses d'informations. Ce séminaire présente les problèmes spécifiques du Big Data et les solutions techniques potentielles, de la gestion des données aux différents types de traitement.
Objectifs pédagogiques
À l’issue de la formation, le participant sera en mesure de :
Découvrir les principaux concepts du Big Data
Identifier les enjeux économiques
Évaluer les avantages et les inconvénients du Big Data
Comprendre les principaux problèmes et les solutions potentielles
Identifier les principales méthodes et champs d'application du Big Data
Appréhender les avantages et les contraintes du Big Data
Public concerné
Directeurs SI, Responsables SI, Chefs de projets, Architectes, Consultants ou toute personne amenée à participer à un projet Big Data.
Prérequis
Connaissances de base des architectures techniques.
Vérifiez que vous avez les prérequis nécessaires pour profiter pleinement de cette formation en faisantce test.
Programme de la formation
Introduction
Les origines du Big Data : un monde de données numériques, l'e-santé, chronologie.
Une définition par les quatre V : la provenance des données.
Une rupture : changements de quantité, de qualité, d'habitudes.
La valeur de la donnée : un changement d'importance.
La donnée en tant que matière première.
Le quatrième paradigme de la découverte scientifique.
Big Data : traitements depuis l'acquisition jusqu'au résultat
L'enchaînement des opérations. L'acquisition.
Le recueil des données : crawling, scraping.
La gestion de flux événementiels (Complex Event Processing, CEP).
L'indexation du flux entrant.
L'intégration avec les anciennes données.
La qualité des données : un cinquième V ?
Les différents types de traitement : recherche, apprentissage (Machine Learning, transactionnel, data mining).
D'autres modèles d'enchaînement : Amazon, e-Santé.
Un ou plusieurs gisements de données ? De Hadoop à l'in-memory.
De l'analyse de tonalité à la découverte de connaissances.
Relations entre Cloud et Big Data
Le modèle d'architecture des Clouds publics et privés.
Les services XaaS.
Les objectifs et avantages des architectures Cloud.
Les infrastructures.
Les égalités et les différences entre Cloud et Big Data.
Les Clouds de stockage.
Classification, sécurité et confidentialité des données.
La structure comme critère de classification : non structurée, structurée, semi-structurée.
Classification selon le cycle de vie : données temporaires ou permanentes, archives actives.
Difficultés en matière de sécurité : augmentation des volumétries, la distribution.
Les solutions potentielles.
Introduction à l'Open Data
La philosophie des données ouvertes et les objectifs.
La libération des données publiques.
Les difficultés de la mise en œuvre.
Les caractéristiques essentielles des données ouvertes.
Les domaines d'application. Les bénéfices escomptés.
Matériel pour les architectures de stockage
Les serveurs, disques, réseaux et l'usage des disques SSD, l'importance de l'infrastructure réseau.
Les architectures Cloud et les architectures plus traditionnelles.
Les avantages et les difficultés.
Le TCO. La consommation électrique : serveurs (IPNM), disques (MAID).
Le stockage objet : principe et avantages.
Le stockage objet par rapport aux stockages traditionnels NAS et SAN.
L'architecture logicielle.
Niveaux d'implantation de la gestion du stockage.
Le "Software Defined Storage".
Architecture centralisée (Hadoop File System).
L'architecture Peer-to-Peer et l'architecture mixte.
Les interfaces et connecteurs : S3, CDMI, FUSE, etc.
Avenir des autres stockages (NAS, SAN) par rapport au stockage objet.
Protection des données
La conservation dans le temps face aux accroissements de volumétrie.
La sauvegarde, en ligne ou locale ?
L'archive traditionnelle et l'archive active.
Les liens avec la gestion de hiérarchie de stockage : avenir des bandes magnétiques.
La réplication multisites.
La dégradation des supports de stockage.
Méthodes de traitement et champs d'application
Classification des méthodes d'analyse selon le volume des données et la puissance des traitements.
Hadoop : le modèle de traitement Map Reduce.
L'écosystème Hadoop : Hive, Pig. Les difficultés d'Hadoop.
OpenStack et le gestionnaire de données Ceph.
Le Complex Event Processing : un exemple ? Storm.
Du BI au Big Data.
Le décisionnel et le transactionnel renouvelés : les bases de données NoSQL.Typologie et exemples.
L'ingestion de données et l'indexation. Deux exemples : Splunk et Logstash.
Les crawlers Open Source.
Recherche et analyse : Elasticsearch.
L'apprentissage : Mahout. In-memory.
Visualisation : temps réel ou non, sur le Cloud (Bime), comparaison QlikView, Tibco Spotfire, Tableau.
Une architecture générale du data mining via le Big Data.
Cas d'usage à travers des exemples et conclusion
L'anticipation : besoins des utilisateurs dans les entreprises, maintenance des équipements.
La sécurité des personnes, détection de fraudes (postale, taxes), le réseau.
La recommandation. Analyses marketing et analyses d'impact.
Analyses de parcours. Distribution de contenu vidéo.
Le Big Data pour l'industrie automobile ? Pour l'industrie pétrolière ?
Faut-il se lancer dans un projet Big Data ?
Quel avenir pour les données ?
Gouvernance du stockage des données : rôle et recommandations, le Data Scientist, les compétences d'un projet Big Data.
Modalités d'évaluation
Le formateur évalue la progression pédagogique du participant tout au long de la formation au moyen de QCM, mises en situation, travaux pratiques…
Le participant complète également un test de positionnement en amont et en aval pour valider les compétences acquises.
Avis clients
4,8 / 5
Les avis clients sont issus des évaluations de fin de formation. La note est calculée à partir de l’ensemble des évaluations datant de moins de 12 mois. Seules celles avec un commentaire textuel sont affichées.
ANTOINE M.
26/03/24
5 / 5
merci !
CYRIL D.
26/03/24
5 / 5
Très bon contenu. Formateur très compétent. Sujet vaste mais très bien abordé et une très bonne mise au niveau qui était le mien : je partais de néant! Merci
MAËL D.
26/03/24
5 / 5
très bien
JEROME L.
26/03/24
5 / 5
bon timing, plein d’ex pertinents une super formation avec un super formateur!
SORAYA Z.
26/03/24
5 / 5
Approche très intéressante et enrichissante de l’existant et de toutes les possibilités offertes par le Big Data. Formateur très sympathique et attentif aux besoins, réactions de chacun. Formation bien calibrée qui s’est faite à crescendo (de la création aux évolutions)avec des illustrations et cas d’usages concrets. Un grand Merci à Cyril ! A recommander sans hésitation que ce soit pour sa culture personnelle et/ou professionnelle!
HUGO T.
19/03/24
5 / 5
Très bon contenu. Clair et précis
MAXIME D.
14/11/23
5 / 5
Très bonne formation qui donne un état large de ce qu’est le Big Data. C’est ce que je recherchais.
SOPHIA H.
14/11/23
5 / 5
MERCI BEAUCOUP c’était top !
JEAN-YVES M.
14/11/23
5 / 5
Bonne formation grâce à un très bon formateur.
Explications claires avec des exemples pertinents.
Très satisfait
NATHALIE P.
14/11/23
5 / 5
Formateur très pédagogue et intéressant.
Maitrise du sujet.
Merci !
THIERRY M.
14/11/23
5 / 5
Bonne synthèse sur le BIGDATA avec la relation avec l’IA
GILLES G.
14/11/23
5 / 5
Très concis
STÉFAN J.
14/11/23
4 / 5
Le sujet du Big Data est bien parcouru dans son ensemble
J’ai beaucoup apprécié la diapositive montrant les solutions et orientation par rapport à la valeur recherchée
Peut être un peu plus de temps pour bien différencier chaque choix possible serait bien
AURÉLIE L.
14/11/23
5 / 5
Très bonne animation de la part de Cyril. Bon mix entre théorie, pratique, tests et cas pratiques.
NATHALIE F.
19/09/23
5 / 5
un jolie vernie pour un novice.
Merci a Cyril le formateur
CAROLE M.
19/09/23
5 / 5
EXCELLENT PÉDAGOGUE
ALEXANDRE A.
19/09/23
5 / 5
Très bonne introduction au big data. S’adresse à tout type de publique
NAWAL A.
19/09/23
5 / 5
Formateur très pédagogue et formation très complète.
CHARLES P.
19/09/23
5 / 5
Richesse des éléments présentés et des exemples
GAËL R.
04/07/23
4 / 5
C’est une bonne entrée en matière sur le sujet BiData qui est très vatse.
AYOUB M.
04/07/23
4 / 5
Le contenu est dense mais c’est un bon vernis pour aller détailler par la suite
Merci
MOHAMED M.
04/07/23
5 / 5
Contenu fort intéressant bon équilibre entre la théorie et les cas pratiques permettant de mieux appréhender le Big data
ANTHONY T.
04/07/23
5 / 5
Formation très complète sur le thème du Big Data. Passage en revue de l’ensemble des architectures mais en restant accessible à des profils non technique.
JUDES G.
04/07/23
5 / 5
Le petit jeux sur Kahoot est très ludique et permet de nous tenir motivé.
STÉPHANE M.
23/05/23
5 / 5
Tableau très clair du Big data et ce qui gravité autour. Parfait pour être plus à l’aise dans des meeting dédiés
CHARLOTTE F.
23/05/23
4 / 5
La formationmériterait une meilleure description en amont. Elle est intéressante mais dans mon cas pas forcément adaptée. Le problème vient donc du choix de la formation et pas du tout de son contenu
GUILLAUME L.
23/05/23
5 / 5
Formation très vivante avec beaucoup d’exemples concrets. Très enrichissante notamment dans la mise en perspective et les connexions entre les différents aspects du Big Data.
ANTOINE S.
23/05/23
5 / 5
Très bon formateur sur tous points !
NATHALIE B.
23/05/23
5 / 5
Le formateur était extrêmement intéressant et très communicant. J’ai appris plein de choses avec beaucoup d’intérêt.
FRÉDERIC H.
23/05/23
5 / 5
Très intéressant, et surtout très bien illustré. Je n’avais pas d’attente ou de mise en pratique prévue à court terme mais très bien pour une vision à la fois globale et large.
FREDDY D.
23/05/23
5 / 5
Très bien adapté à mon besoin : présentation générale du concept de big data.
RENAUD M.
18/04/23
5 / 5
Très complet
BENJAMIN S.
18/04/23
5 / 5
Très bonne formation. Peut être uniquement besoin d’une version encore plus actuelle du marché et des dernières technos et des tendances ;-)
EDOUARD D.
15/11/22
5 / 5
Très riche, intéressant et interactif.
AYMERIC H.
15/11/22
4 / 5
Formation très animée, il manquait peut être le support en // en libre accès. Sinon, présentation d’un large éventail sur le monde de la DATA : enjeux, outils, rex, expérience, technologies, risques, juridique... => ne demande qu’à être approfondie à partir de cette session, mais c’était le point de passage obligé pour l’entrée en matière :)
JEROME P.
15/11/22
5 / 5
Formation très active et participative. Bonne vulgarisation des technologies et des concepts. beaucoup d’exemples et de preuves par illustration : Très intéressant et concret !
JEAN-BAPISTE F.
15/11/22
5 / 5
Le formateur est très pédagogue et de nombreuses applications/site web ont été présentées.
LYES M.
15/11/22
5 / 5
Le contenu est complet pour comprendre les enjeux du BigData
EMMANUEL J.
15/11/22
5 / 5
Pédagogie très originale (avec bonnet rose) et orienté "Quoi" : que peut nous apporter le Big Data ?
Se poser les bonnes questions, et apporter la réponse appropriées.
Formateur très performant en distanciel (jonglage avec pas mal de médias)
Un grand merci au formateur.
AMAURY B.
15/11/22
5 / 5
Beaucoup d’outils et de bonnes pratiques, le tout bien illustré.
VINCENT B.
15/11/22
5 / 5
Forte capacité à transmettre et à se mettre au niveau de la classe.
FABRICE E.
15/11/22
4 / 5
merci beaucoup pour toute la culture générale apprise en deux jours.
ETIENNE R.
18/10/22
4 / 5
Contenu de très haute qualité et suffisamment technique.
Aurait été souhaité un peu moins de contenu sur l’IA et plus de contenu sur les enjeux économiques de la big data (emplois, compétences, marché, géographie) et perspectives futures.
PIERRE C.
18/10/22
5 / 5
Bonne formation, mélangeant la partie théorique et pratique. Le formateur est très pédagogue
ALAIN Z.
18/10/22
5 / 5
Tres bon cours et très bon "professeur"
VINCENT C.
18/10/22
5 / 5
Très bonne formation très bien illustrée d’exemple concrets
SIMON R.
18/10/22
5 / 5
Très bon formateur clair, bien organisé.
BERNARDES .
08/09/22
4 / 5
J’aurais préféré passer moins de temps sur des exemples à travers des sites partagés pendant la formation et passer plus de temps sur la technologie elle-même. Exemple, on a passé le sujet de l’outil Oozie que j’aurais préféré voir en détail.
Et parfois des temps de latence qui auraient pu être évités.
JULIEN D.
08/09/22
4 / 5
Très bonne formation, qui part du général mais intègre un peu de technique
Peut etre faire un support plus synthétique et/ou ajouter des slides avec les points à retenir
FRANCK S.
14/06/22
5 / 5
Cours intéressant et vivant. Très bon animateur.
FRANÇOIS MARIE C.
14/06/22
5 / 5
Très bonne formation ayant répondu à mes attentes pour recevoir une présentation synthétique sur le Big data aujourd’hui.
Formateur compétent et dynamique, très bonne animation du cours avec des parties interactives via les outils sur le web.
JEAN C.
14/06/22
4 / 5
Très intéressant avec des exemples connus et maîtrisés par Cyril, merci à lui
BENOIT V.
07/04/22
5 / 5
Le contenu est parfaitement adapté à une première approche du domaine. L’intervenant apporte un éclairage lié à son expérience très intéressante.
FABRICE P.
06/04/22
5 / 5
tres bon formateur
NATHALIE C.
06/04/22
5 / 5
Correspond à ma demande initiale
CSIKY ANA R.
03/03/22
5 / 5
Explications claires et bien structurées pour couvrir un sujet complexe notamment d’un point de vue technique. J’ai notamment apprécié les cas d’étude ainsi que les points focalisés sur l’implémentation de la Big Data dans les sociétés, les métiers, les logiciels et les points d’attentions à avoir. Ces éléments seront fort utile dans mon métier.
STEPHANE E.
03/03/22
5 / 5
Présentation claire et exhaustive. Chaque point a été bien abordé avec des exemples concrets, y compris provenant du formateur. Donc un retour d’expérience très appréciable (et d’actualité).
EDDY B.
03/03/22
4 / 5
Contenu intéressant et bien construit.
Un temps accordé à chaque sujet et pour les questions.
L’utilisation de la tablette/dessin permet une meilleure compréhension et est un vrai plus à distance.
STÉPHANIE C.
03/03/22
5 / 5
Pour un domaine complexe qu’est le big data, la formation est restée je pense à portée de tous et était très claire.