ENI Service

ENI Service

Generic selectors
Exact matches only
Search in title
Search in content
Formations
Certifications
Formations
Systèmes
Fondamentaux
Windows Server 2016/2019
Windows Server 2012 R2
Windows 10
Scripting PowerShell
Red Hat Enterprise Linux
Linux
Gestion et supervision des systèmes
System Center et MDT
Nagios
GLPI
Virtualisation
Microsoft Hyper-V, SCVMM
VMware vSphere
Citrix VirtualDesktop, VirtualApps
Veeam
Hyperconvergence
Azure Stack
VMware vSAN
Nutanix
Cloud Computing
Microsoft Azure
Amazon Web Services (AWS)
VMware NSX-T
Microsoft 365 / Office 365 / Dynamics 365
Red Hat OpenStack
Red Hat OpenShift
Red Hat Ansible Automation
DevOps
Fondamentaux
Outils d'automatisation et de déploiement
Outils d'intégration continue
Réseau
Fondamentaux
Cisco
Cybersécurité
Fondamentaux
Stormshield
pfSense
SonicWALL
F5
ISO 27001/27005
Blockchain
Messagerie
Exchange
CMS, GED, portail, e-commerce
SharePoint
WordPress
Joomla!
Drupal
Alfresco
Prestashop
Magento
Serveurs Web et d'applications
IIS
Apache
Tomcat
JBoss EAP/Wildfly
Bases de données
Fondamentaux
SQL Server
Oracle
MySQL/MariaDB
PostgreSQL
MongoDB
Décisionnel
Fondamentaux
SQL Server BI
Power BI
Talend
QlikSence, QlikView
SAP BusinessObjects
Big Data
Fondamentaux
Apache Hadoop
MongoDB
Microsoft Azure Data
Spark
Elastic Suite
Langage R
Intelligence artificielle
Fondamentaux
Machine Learning, Deep Learning
Microsoft Azure IA et Machine Learning
Ingénierie logicielle
Conception, modélisation
Intégration continue, tests
Développement Web et mobile
HTML5, CSS3, JavaScript
PHP
Symfony
Django
Développement mobile
UX Design
Design Circulaire
Langages de développement
Fondamentaux
Java
.NET
Python
C, C++
Perl
WinDev, WebDev
IoT
Raspberry
Arduino
Gestion de projets
Fondamentaux
Méthodes Agiles
Prince2
Project
GanttProject
Organisation du SI
Fondamentaux
ITIL
Sécurité
RGPD
DevOps
Green IT
Travail collaboratif
Office 365 / Microsoft 365
Google Suite
SharePoint
Bureautique
Excel
Word
Outlook
PowerPoint
OneNote
Access
Publisher
VBA Excel/Access
Suite Office
LibreOffice
Power BI Desktop
Project
Acrobat
Mind Mapping
Windows
Internet
Infographie, PAO
Fondamentaux
Photoshop
GIMP
InDesign
Illustrator
Captivate
Premiere Pro
AfterEffects
DAO, CAO
SketchUp
AutoCAD
Digital, Web et Webmarketing
Conception de sites
UX Design
Stratégie digitale
Référencement
Generic selectors
Exact matches only
Search in title
Search in content
Formations
Certifications
Formations
Systèmes
Fondamentaux
Windows Server 2016/2019
Windows Server 2012 R2
Windows 10
Scripting PowerShell
Red Hat Enterprise Linux
Linux
Gestion et supervision des systèmes
System Center et MDT
Nagios
GLPI
Virtualisation
Microsoft Hyper-V, SCVMM
VMware vSphere
Citrix VirtualDesktop, VirtualApps
Veeam
Hyperconvergence
Azure Stack
VMware vSAN
Nutanix
Cloud Computing
Microsoft Azure
Amazon Web Services (AWS)
VMware NSX-T
Microsoft 365 / Office 365 / Dynamics 365
Red Hat OpenStack
Red Hat OpenShift
Red Hat Ansible Automation
DevOps
Fondamentaux
Outils d'automatisation et de déploiement
Outils d'intégration continue
Réseau
Fondamentaux
Cisco
Cybersécurité
Fondamentaux
Stormshield
pfSense
SonicWALL
F5
ISO 27001/27005
Blockchain
Messagerie
Exchange
CMS, GED, portail, e-commerce
SharePoint
WordPress
Joomla!
Drupal
Alfresco
Prestashop
Magento
Serveurs Web et d'applications
IIS
Apache
Tomcat
JBoss EAP/Wildfly
Bases de données
Fondamentaux
SQL Server
Oracle
MySQL/MariaDB
PostgreSQL
MongoDB
Décisionnel
Fondamentaux
SQL Server BI
Power BI
Talend
QlikSence, QlikView
SAP BusinessObjects
Big Data
Fondamentaux
Apache Hadoop
MongoDB
Microsoft Azure Data
Spark
Elastic Suite
Langage R
Intelligence artificielle
Fondamentaux
Machine Learning, Deep Learning
Microsoft Azure IA et Machine Learning
Ingénierie logicielle
Conception, modélisation
Intégration continue, tests
Développement Web et mobile
HTML5, CSS3, JavaScript
PHP
Symfony
Django
Développement mobile
UX Design
Design Circulaire
Langages de développement
Fondamentaux
Java
.NET
Python
C, C++
Perl
WinDev, WebDev
IoT
Raspberry
Arduino
Gestion de projets
Fondamentaux
Méthodes Agiles
Prince2
Project
GanttProject
Organisation du SI
Fondamentaux
ITIL
Sécurité
RGPD
DevOps
Green IT
Travail collaboratif
Office 365 / Microsoft 365
Google Suite
SharePoint
Bureautique
Excel
Word
Outlook
PowerPoint
OneNote
Access
Publisher
VBA Excel/Access
Suite Office
LibreOffice
Power BI Desktop
Project
Acrobat
Mind Mapping
Windows
Internet
Infographie, PAO
Fondamentaux
Photoshop
GIMP
InDesign
Illustrator
Captivate
Premiere Pro
AfterEffects
DAO, CAO
SketchUp
AutoCAD
Digital, Web et Webmarketing
Conception de sites
UX Design
Stratégie digitale
Référencement

Apache Hadoop – Présentation de l’écosystème

Réf. T265-020

Q1_TECHNIQUE_DEV

2 jour(s) - 14 h

Formation
intra-entreprise
sur devis

Télécharger Programme

Dernière mise à jour : 7 octobre 2020

Cette formation permet d'acquérir les connaissances et compétences requises pour appréhender l'architecture d'un système Hadoop en détaillant les services principaux (MapReduce, Pig, Hive Sqoop), leur configuration, la sécurité au sein d'un cluster, et son exploitation.

Objectifs


  • Décrire l'architecture et identifier les composants d'Apache Hadoop
  • Configurer et superviser les services
  • Identifier et manipuler les outils de développement et de supervision Hadoop
  • Exploiter et orchestrer les développements

Pré-requis


Connaissances générales des systèmes d'information.

Public


  • DSI
  • Directeur Technique
  • Chef de Projet
  • Architecte SI
  • Administrateur de bases de données

Programme de la formation


Le projet et les modules

  • Hadoop Common, HDFS, YARN, MapReduce Oozie, Pig, Hive, HBase
  • Les fonctionnalités du framework Hadoop
  • Les différentes versions
  • Les principales distributions et leurs spécificités : Apache, Cloudera, Hortonworks, EMR, MapR
  • Architecture et principe de fonctionnement
  • Terminologie : NameNode, DataNode, ResourceManager, NodeManager
  • Rôle des différents composants

Administration Hadoop

  • Etude des fichiers de configuration core-site.xml, hdfs-site.xml, mapred-site.xml, yarn-site.xml et capacity-scheduler.xml
    • Gestion des utilisateurs pour les daemons hdfs et yarn
    • Droits d'accès sur les exécutables et répertoires
    • Architecture et gestion des services généraux Hadoop des utilisateurs pour les daemons hdfs et yarn
  • HDFS
  • YARN
  • MapReduce
  • HBase
  • Monitoring du cluster Hadoop
    • Suivi de charges
    • Journaux (jConsole)
    • Gestion des nœuds
    • Accès JMX
    • Mise en œuvre d'un client JMX
    • Administration HDFS
    • Stockage des fichiers : fsck, dfsadmin
    • Gestion centralisée de caches avec Cacheadmin
  • Sécurité
    • Activation de la sécurité avec Kerberos dans core-site.xml, et hdfs-site.xml pour les NameNode et DataNode
    • Gestion de la sécurité avec Apache Sentry
  • Exploitation
    • Supervision des éléments par le NodeManager
    • Monitoring graphique avec Ambari, Kibana, Cloudera Manager
    • Visualisation des alertes en cas d'indisponibilité d'un nœud
    • Configuration des logs avec log4j

Développement Hadoop

  • HDFS
    • Architecture
    • Commandes SHELL
  • MapReduce
    • Architecture de MapReduce
    • Exécuter un code MapReduce
  • Hue
    • Introduction
    • Fonctionnalités et utilisation
  • HBase
    • Architecture
    • Commandes SHELL de création et d'interrogation de données
  • Hive
    • Architecture
    • Méthodes d'accès à Hive
    • HiveQL : création de bases de données/tables/vues, interrogation de données avec HiveQL, manipulation de fonctions définies par l'utilisateur (UDF), partitionner vos données, archivage de vos données
  • Pig
    • Introduction
    • Méthodes d'exécution
    • Pig Latin
    • Communication entre Pig et Hive
  • Sqoop
    • Introduction
    • Pour quels usages ?
    • Méthodes d'utilisation
    • Import et export des données
  • Oozie
    • Introduction
    • Planification de workflows avec paramètres

Formation avec un formateur, qui peut être suivie selon l’une des 3 modalités ci-dessous :

1 – Dans la salle de cours en présence du formateur.

2 – Dans l’une de nos salles de cours immersives, avec le formateur présent physiquement à distance. Les salles immersives sont équipées d’un système de visio-conférence HD et complétées par des outils pédagogiques qui garantissent le même niveau de qualité.

3 – Depuis votre domicile ou votre entreprise. Vous rejoignez un environnement de formation en ligne, à l’aide de votre ordinateur, tout en étant éloigné physiquement du formateur et des autres participants. Vous êtes en totale immersion avec le groupe et participez à la formation dans les mêmes conditions que le présentiel. Pour plus d’informations : Le téléprésentiel – notre solution de formation à distance.

Le nombre de stagiaires peut varier de 1 à 12 personnes (5 à 6 personnes en moyenne), ce qui facilite le suivi permanent et la proximité avec chaque stagiaire.

Chaque stagiaire dispose d’un poste de travail adapté aux besoins de la formation, d’un support de cours et/ou un manuel de référence au format numérique ou papier (pour les sessions inter-entreprises, dans le cas où le support de cours officiel est en anglais, nous offrons en complément, s’il existe, un ouvrage de référence des Editions ENI au format numérique rédigé en français).

Pour une meilleure assimilation, le formateur alterne tout au long de la journée les exposés théoriques, les démonstrations et la mise en pratique au travers d’exercices et de cas concrets réalisés seul ou en groupe.

En début et en fin de formation, les stagiaires réalisent une auto-évaluation de leurs connaissances et compétences en lien avec les objectifs de la formation. L’écart entre les deux évaluations permet ainsi de mesurer leurs acquis.

En complément, pour les stagiaires qui le souhaitent, certaines formations peuvent être validées officiellement par un examen de certification. Les candidats à la certification doivent produire un travail personnel important en vue de se présenter au passage de l’examen, le seul suivi de la formation ne constitue pas un élément suffisant pour garantir un bon résultat et/ou l’obtention de la certification.

Pour certaines formations certifiantes (ex : ITIL, Prince2, DPO, …), le passage de l’examen de certification est inclus et réalisé en fin de formation. Les candidats sont alors préparés par le formateur au passage de l’examen tout au long de la formation.

Feuille de présence, émargée par demi-journée par chaque stagiaire et le formateur ;

Evaluation qualitative de fin de formation, qui est ensuite analysée par l’équipe pédagogique ENI ;

Attestation de fin de formation, remise au stagiaire en main propre ou par courrier électronique.

La formation est animée par un professionnel de l'informatique et de la pédagogie, dont les compétences techniques, professionnelles et pédagogiques ont été validées par des certifications et/ou testées et approuvées par les éditeurs et/ou notre équipe pédagogique. Il est en veille technologique permanente et possède plusieurs années d'expérience sur les produits, technologies et méthodes enseignés. Il est présent auprès des stagiaires pendant toute la durée de la formation.

-

C'est le moment
de vous former

    Vous souhaitez obtenir plus d’informations sur cette formation ?

    Pour nous consulter et en savoir plus, vous pouvez compléter le formulaire ci-dessous.

    Les champs avec un astérisque (*) sont obligatoires.

      Vous souhaitez vous pré-inscrire à cette formation ?

      Vous pouvez compléter le formulaire ci-dessous. Dès sa réception nous réserverons votre place.

      Participants :

      NomPrénomE-mail





      Les champs avec un astérisque (*) sont obligatoires.

        Vous souhaitez vous pré-inscrire à cette formation ?

        Vous pouvez compléter le formulaire ci-dessous. Dès sa réception nous réserverons votre place.

        NomPrénomE-mail





        Les champs avec un astérisque (*) sont obligatoires.

          Vous souhaitez obtenir un devis pour cette formation ?

          Pour recevoir un devis détaillé, vous pouvez compléter le formulaire ci-dessous

          Les champs avec un astérisque (*) sont obligatoires.

            Vous souhaitez obtenir un devis pour cette formation ?

            Pour recevoir un devis détaillé, vous pouvez compléter le formulaire ci-dessous.

            Les champs avec un astérisque (*) sont obligatoires.

              Vous souhaitez obtenir un devis pour cette formation ?

              Pour recevoir un devis détaillé, vous pouvez compléter le formulaire ci-dessous.

              Les champs avec un astérisque (*) sont obligatoires.