Formation AWS : Créer des solutions d'analyse de données par lots sur Amazon Web Services (cours officiel)

Cette formation AWS Analyse de données vous apprend à construire des solutions d'analyse de données par lots à l'aide d'Amazon EMR, un service géré Apache Spark et Apache Hadoop de niveau entreprise. Vous découvrirez comment Amazon EMR s'intègre aux projets open source tels que Apache Hive, Hue et HBase, ainsi qu'aux services AWS tels que AWS Glue et AWS Lake Formation. 

La formation aborde les composants de collecte, d'ingestion, de catalogage, de stockage et de traitement des données dans le contexte de Spark et Hadoop. Vous utiliserez EMR Notebooks pour prendre en charge les charges de travail d'analyse et d'apprentissage automatique. Enfin, vous appliquerez les meilleures pratiques de sécurité, de performance et de gestion des coûts au fonctionnement d'Amazon EMR.

Objectif opérationnel :

Savoir construire des solutions d'analyse de données par lots à l'aide d'Amazon EMR.

Objectifs pédagogiques : 

À l'issue de cette formation AWS Analyse de données vous aurez acquis les connaissances et les compétences nécessaires pour : 

• Comparer les caractéristiques et les avantages des entrepôts de données, des lacs de données et des architectures de données modernes
• Concevoir et mettre en œuvre une solution d'analyse de données par lots
• Identifier et appliquer les techniques appropriées, notamment la compression, pour optimiser le stockage des données
• Sélectionner et déployer les options appropriées pour ingérer, transformer et stocker les données
• Sélectionner les types d'instances et de nœuds, les clusters, la mise à l'échelle automatique et la topologie réseau appropriés pour un cas d'utilisation particulier
• Comprendre comment le stockage et le traitement des données affectent les mécanismes d'analyse et de visualisation nécessaires pour obtenir des informations commerciales exploitables
• Décrire comment sécuriser les données au repos et en transit
• Surveiller les charges de travail analytiques afin d'identifier et de résoudre les problèmes
• Identifier les meilleures pratiques de gestion des coûts

Public :

Ce cours AWS Analyse de données s'adresse aux ingénieurs de plateforme de données et architectes et opérateurs qui construisent et gèrent des pipelines d'analyse de données.

Prérequis :

Pour suivre cette formation AWS Analyse de données, il est recommandé de posséder au moins un an d'expérience dans la gestion de frameworks de données open source tels que Apache Spark ou Apache Hadoop.

Il est nécessaire d'avoir suivi la formation AWS : Notions techniques de base sur Amazon Web Services (IANT) ou de posséder les connaissances équivalentes.

Aperçu de l'analyse des données et du pipeline de données

Introduction à Amazon EMR

Pipeline d'analyse de données utilisant Amazon EMR (Ingestion et Stockage)

Analyse de données par lots haute performance avec Apache Spark sur Amazon EMR

Traitement et analyse de données par lots avec Amazon EMR et Apache Hive

Traitement des données sans serveur

Sécurité et surveillance des clusters Amazon EMR

Conception de solutions d'analyse de données par lots

Développement d'architectures de données modernes sur AWS