Cursusaanbod
Introductie
- Apache Beam vs MapReduce, Spark Streaming, Kafka Streaming, Storm en Flink
Installeren en configureren Apache Beam
Overzicht van Apache Beam functies en architectuur
- Straalmodel, SDK's, de Lopers van de straalpijpleiding
- Back-ends voor gedistribueerde verwerking
Het Apache Beam Programming model begrijpen
- Hoe een pijplijn wordt uitgevoerd
Een voorbeeldpijplijn uitvoeren
- Een WordCount-pijplijn voorbereiden
- De pijplijn lokaal uitvoeren
Het ontwerpen van een pijpleiding
- Het plannen van de structuur, het kiezen van de transformaties en het bepalen van de invoer- en uitvoermethoden
De pijplijn maken
- Het schrijven van het driverprogramma en het definiëren van de pipeline
- Apache Beam klassen gebruiken
- Datasets, transformaties, I/O, datacodering, enz.
Uitvoeren van de pijplijn
- De pijplijn lokaal, op externe machines en in een openbare cloud uitvoeren
- Een hardloper kiezen
- Runner-specifieke configuraties
Testen en debuggen Apache Beam
- Typehints gebruiken om statisch typen na te bootsen
- Afhankelijkheden van pijplijnen beheren Python
Begrensde en niet-begrensde gegevenssets verwerken
- Vensters en triggers
Uw pijpleidingen herbruikbaar en onderhoudbaar maken
Nieuwe gegevensbronnen en sinks maken
- Apache Beam Bron- en Sink-API
Integratie Apache Beam met andere Big Data systemen
- Apache Hadoop, Apache Spark, Apache Kafka
Probleemoplossing
Samenvatting en conclusie
Vereisten
- Ervaring met Python Programming.
- Ervaring met de Linux command line.
Audiëntie
- Ontwikkelaars
Leveringsopties
PRIVÉGROEPSTRAINING
Onze identiteit draait om het leveren van precies wat onze klanten nodig hebben.
- Pre-cursusgesprek met uw trainer
- Aanpassing van de leerervaring om uw doelen te bereiken -
- Op maat gemaakte overzichten
- Praktische, praktische oefeningen met gegevens / scenario's die herkenbaar zijn voor de cursisten
- Training gepland op een datum naar keuze
- Gegeven online, op locatie/klaslokaal of hybride door experts die ervaring uit de echte wereld delen
Private Group Prices RRP from €4560 online delivery, based on a group of 2 delegates, €1440 per additional delegate (excludes any certification / exam costs). We recommend a maximum group size of 12 for most learning events.
Neem contact met ons op voor een exacte offerte en om onze laatste promoties te horen
OPENBARE TRAINING
Kijk op onze public courses