Cursusaanbod

Introductie

  • Apache Beam vs MapReduce, Spark Streaming, Kafka Streaming, Storm en Flink

Installeren en configureren Apache Beam

Overzicht van Apache Beam functies en architectuur

  • Straalmodel, SDK's, de Lopers van de straalpijpleiding
  • Back-ends voor gedistribueerde verwerking

Het Apache Beam Programming model begrijpen

  • Hoe een pijplijn wordt uitgevoerd

Een voorbeeldpijplijn uitvoeren

  • Een WordCount-pijplijn voorbereiden
  • De pijplijn lokaal uitvoeren

Het ontwerpen van een pijpleiding

  • Het plannen van de structuur, het kiezen van de transformaties en het bepalen van de invoer- en uitvoermethoden

De pijplijn maken

  • Het schrijven van het driverprogramma en het definiëren van de pipeline
  • Apache Beam klassen gebruiken
  • Datasets, transformaties, I/O, datacodering, enz.

Uitvoeren van de pijplijn

  • De pijplijn lokaal, op externe machines en in een openbare cloud uitvoeren
  • Een hardloper kiezen
  • Runner-specifieke configuraties

Testen en debuggen Apache Beam

  • Typehints gebruiken om statisch typen na te bootsen
  • Afhankelijkheden van pijplijnen beheren Python

Begrensde en niet-begrensde gegevenssets verwerken

  • Vensters en triggers

Uw pijpleidingen herbruikbaar en onderhoudbaar maken

Nieuwe gegevensbronnen en sinks maken

  • Apache Beam Bron- en Sink-API

Integratie Apache Beam met andere Big Data systemen

  • Apache Hadoop, Apache Spark, Apache Kafka

Probleemoplossing

Samenvatting en conclusie

Vereisten

  • Ervaring met Python Programming.
  • Ervaring met de Linux command line.

Audiëntie

  • Ontwikkelaars
 14 Uren

Leveringsopties

PRIVÉGROEPSTRAINING

Onze identiteit draait om het leveren van precies wat onze klanten nodig hebben.

  • Pre-cursusgesprek met uw trainer
  • Aanpassing van de leerervaring om uw doelen te bereiken -
    • Op maat gemaakte overzichten
    • Praktische, praktische oefeningen met gegevens / scenario's die herkenbaar zijn voor de cursisten
  • Training gepland op een datum naar keuze
  • Gegeven online, op locatie/klaslokaal of hybride door experts die ervaring uit de echte wereld delen

Private Group Prices RRP from €4560 online delivery, based on a group of 2 delegates, €1440 per additional delegate (excludes any certification / exam costs). We recommend a maximum group size of 12 for most learning events.

Neem contact met ons op voor een exacte offerte en om onze laatste promoties te horen


OPENBARE TRAINING

Kijk op onze public courses

Voorlopige Aankomende Cursussen

Gerelateerde categorieën