UNDERSTANDING BIG DATA ENGINEERING BASICS
Catégorie
TECHNOLOGIE DE L'INFORMATION
Sous-catégorie
Data
Code
DAT055
Objectifs de la formation
Comprendre les concepts clés du Big Data : les 5V, les types de données et les principes du calcul distribué
Apprendre à utiliser Hadoop, HDFS et YARN pour le stockage scalable et la gestion de données sur cluster
Traiter et transformer de grands jeux de données avec MapReduce, Apache Spark, PySpark et Spark SQL
Construire des pipelines de données batch et temps réel avec les pratiques ETL, Kafka et Spark Structured Streaming
Appliquer des outils Big Data comme Hive et MongoDB pour améliorer la qualité des données, l'analytique, la scalabilité et les performances
Programme de la formation
Descriptif : Introduction pratique au Big Data et aux plateformes de données modernes : stockage distribué, traitement batch et temps réel, ETL, NoSQL. Thèmes abordés : • Concepts Big Data (5V) • Hadoop, HDFS, YARN • MapReduce, Spark, PySpark, Spark SQL • Pipelines ETL, Kafka, Spark Structured Streaming • Hive et MongoDB
Public cible
Ingénieurs Cloud, Ingénieurs DevOps, Ingénieurs data
Durée (Jours)
1
Nombre de place min
10
Nombre de place max
1000
Formateur
Formateur LabLabee
