Objectifs de la formation
Les compétences acquises à l'issue de ce cursus sont les suivantes : -Formaliser les cas d'usages -Concevoir et mettre en oeuvre des plateformes basées sur des technologies Big Data -Installer et déployer des clusters logiciels -Concevoir et mettre en oeuvre des flux d'intégration de données -Optimiser la performance et la qualité logicielle -Mettre en oeuvre la stratégie d'exploitation des plateformes Big Data (gestion des sauvegardes, procédures de récupération des données, mises à jour et montées de version logicielles...) -Préconiser des outils et/ou technologies adaptés
Contenu de la formation
PROGRAMME DE FORMATION Introduction au métier de Data Engineer Bases de données NoSQL MongoDB Gestion de projet : fondamentaux du management de projet composantes d'un projet (performance, coûts, délais, risques) Ecosystème HADOOP 2 : architecture, outils et langages Hbase Hive / Déployer et administrer CLOUDERA Contraintes juridiques du RGPD dans les projets Big Data Le Framework Apache SPARK Management du SI (Stratégie, SWOT, budget, charges activité, rentabilité...) Data Ingestion avec Talend DI Gestion des risques (identifier, évaluer, traiter, piloter, gérer) Applications Statistiques et Data Mining avec le langage R Conduite du changement d'un projet informatique Machine Learning avec LIB Spark Management d'équipe (Gestion des ressources humaines, communication interne) Streaming avec KAFKA Management de projet AGILE S crum Certfification PSM I Scrapping de données avec Python Fondamentaux du Langage Java Gestion des flux avec Hadoop NIFI Scripting Shell Unix/Linux Indexation des données Elastic Search / Cassandra Kibana Prise en main des outils DevOps : GIT Docker Kubernetes Jenkins Traitement de la Data en Cloud Computing avec Microsoft Azure Programmation en langage Python Data Visualization avec Power BI Programmation fonctionnelle avec Scala Projet Big Data Mise en situation professionnelle
Résultats de la formation
Data engineer;Attestation de suivi de présence
Conditions spécifiques d'accès à la formation
Pour integrer le Mastere Data Engineer vous etes aujourd hui - Titulaire d un diplome Bac+ 3 valide ( d une certification professionnelle de niveau 6 en informatique ou filiere scientifique - Rigoureux, creatif, vous avez un sens aigu du service client - Vous avez un bon niveau d Anglais - Vous avez des competences dans le domaine de l analyse de donnees ( Matlab la modelisation et/ou le developpement ( Python, C++, JavaScript, HTML