Accéder au contenu principal

Accueil Data Engineering

Cours

Concepts de streaming

DébutantNiveau de compétence

Actualisé 01/2025

Différenciez le traitement par lots et le streaming, la mise à l'échelle des systèmes de streaming et les applications concrètes.

Commencer le cours gratuitement

TheoryData Engineering

2 h

16 vidéos

47 Exercices

3,750 XP

6,833

Certificat de formation

Apprécié par des utilisateurs provenant de milliers d'entreprises

Former une équipe ?

Essayez pour les entreprises

Description du cours

Le streaming occupe aujourd’hui une place majeure dans le monde de la donnée et est utilisé par presque tous les secteurs, de l’industrie à la santé. Souhaitez-vous en savoir plus sur les concepts généraux derrière les pipelines de données et sur le fonctionnement de ces processus ?Ce cours propose une introduction générale aux concepts de streaming, notamment le batching, la mise en file d’attente et le traitement de flux, ainsi que leur place dans les cadres de traitement de données. Il présente des exemples concrets de mise en œuvre du streaming en production. Il s’agit d’une introduction générale à ces notions et aucun bagage approfondi en traitement de données n’est requis.

Prérequis

Understanding Data Engineering

1

Méthodes de traitement des données

Dans ce chapitre, vous découvrirez les notions de base du traitement par lots, centrées sur l’implémentation, la mise à l’échelle et les difficultés potentielles en situation réelle.

Introduction au traitement par lots

Caractéristiques d'un traitement par lots

Ordonnancement des lots

Mettre à l’échelle le traitement par lots

À l’échelle

Opposition horizontale

Problèmes liés aux traitements par lots

Problèmes liés aux traitements par lots

Scénarios de traitement par lots

Commencer le chapitre

2

Introduction au streaming

Vous apprendrez ici les bases du streaming, du traitement de données piloté par événements, ainsi que ses avantages par rapport au traitement traditionnel par lots.

Introduction à l’informatique événementielle

En cas d’événement…

Bienvenue à l’événement !

Mise en file d’attente

Caractéristiques d’une file (queue)

Mettre en file d’attente ou non

Diffusion de données dans un système unique

Ordre du flux de journaux

Options de journalisation

Traitement par lots vs streaming

Lot, file d'attente ou flux ?

Processeur de flux de journaux

Commencer le chapitre

3

Systèmes de streaming

Ce chapitre présente les concepts à l’origine des systèmes de streaming modernes, la façon de les mettre à l’échelle et certains écueils rencontrés lors de leur utilisation.

Introduction au streaming en temps réel

Temps réel ?

Est-ce bien du temps réel, cette fois ?

Mise à l’échelle verticale des systèmes de streaming

Raisons d’augmenter l’échelle

Pour mettre à l’échelle verticalement… ?

Mise à l’échelle horizontale des systèmes de streaming

Mise à l’échelle horizontale

Garanties SLA

Obstacles du streaming

Attributs du streaming

Types de problèmes

Défis du streaming

Commencer le chapitre

4

Cas d’usage réels

Dans ce dernier chapitre, vous découvrirez des systèmes de streaming courants et réfléchirez à la mise en œuvre du traitement de données en flux dans différents cas d’usage.

Systèmes de streaming populaires

Vérités sur le streaming

Croiser les flux...

Cas d’usage réel : service de musique en streaming

Composants d’un message

Répondez à ceci...

Cas d’usage réel : données de capteurs

Bon ordre des SLA

Considérations de mise à l’échelle des capteurs

Cas d’usage réel : centre de vaccination

Centre de vaccination – classer les zones

Un nouveau problème...

Félicitations !

Commencer le chapitre

Concepts de streaming

Cours
terminé

Obtenez un certificat de réussite

Ajoutez cette certification à votre profil LinkedIn, à votre CV ou à votre portfolio
Partagez-la sur les réseaux sociaux et dans votre évaluation de performanceS'inscrire maintenant

Rejoignez plus de 19 millions d'utilisateurs et commencez Concepts de streaming dès aujourd'hui !

Apprenez où que vous soyez avec l'application DataCamp

Progressez où que vous soyez grâce à nos cours conçus pour mobile et à nos défis quotidiens de 5 minutes.