Curso de Construindo Pipelines de Dados com Apache Kafka

Este treinamento orientado por instrutor, ao vivo em Portugal (online ou no local), é destinado a desenvolvedores que desejam integrar o Apache Kafka com bancos de dados e aplicativos existentes para processamento, análise, etc.

Ao final deste treinamento, os participantes serão capazes de:

• Usar o Kafka Connect para ingerir grandes volumes de dados de um banco de dados em tópicos do Kafka.
• Ingerir dados de logs gerados por servidores de aplicativos em tópicos do Kafka.
• Tornar qualquer dado coletado disponível para processamento em fluxo.
• Exportar dados de tópicos do Kafka para sistemas secundários de armazenamento e análise.

Este treinamento orientado por instrutor (online ou presencial) é direcionado a engenheiros que desejam usar o Confluent (uma distribuição do Kafka) para construir e gerenciar uma plataforma de processamento de dados em tempo real para seus aplicativos.

Ao final deste treinamento, os participantes serão capazes de:

• Instalar e configurar a Plataforma Confluent.
• Usar as ferramentas e serviços de gerenciamento do Confluent para executar o Kafka com mais facilidade.
• Armazenar e processar dados de fluxo entrante.
• Otimizar e gerenciar clusters do Kafka.
• Segurar fluxos de dados.

Formato do Curso

• Aula interativa e discussão.
• Muitos exercícios e prática.
• Implementação prática em um ambiente de laboratório ao vivo.

Opções de Personalização do Curso

• Este curso é baseado na versão open source do Confluent: Confluent Open Source.
• Para solicitar um treinamento personalizado para este curso, entre em contato conosco para agendar.

In this instructor-led, live training in Portugal (onsite or remote), participants will learn how to set up and integrate different Stream Processing frameworks with existing big data storage systems and related software applications and microservices.

By the end of this training, participants will be able to:

• Install and configure different Stream Processing frameworks, such as Spark Streaming and Kafka Streaming.
• Understand and select the most appropriate framework for the job.
• Process of data continuously, concurrently, and in a record-by-record fashion.
• Integrate Stream Processing solutions with existing databases, data warehouses, data lakes, etc.
• Integrate the most appropriate stream processing library with enterprise applications and microservices.

Este curso é para arquitetos empresariais, desenvolvedores, administradores de sistemas e qualquer pessoa que deseja entender e utilizar um sistema de mensagens distribuídas de alto desempenho. Se você tiver requisitos mais específicos (por exemplo, apenas o lado da administração do sistema), este curso pode ser adaptado para melhor atender às suas necessidades.

Este treinamento ao vivo conduzido por instrutor em Portugal (no local ou remoto) é destinado a administradores de sistemas que desejam configurar, implantar, gerenciar e otimizar um cluster Kafka de nível empresarial.

No final desta formação, os participantes serão capazes de

• Configurar e administrar um cluster do Kafka.
• Avaliar os benefícios e desvantagens da implantação do Kafka no local versus na nuvem.
• Implantar e monitorar o Kafka usando várias ferramentas de ambiente no local e na nuvem.

Este treinamento ao vivo conduzido por instrutor em Portugal (online ou no local) é destinado a desenvolvedores de nível intermediário que desejam desenvolver aplicativos de big data com Apache Kafka.

No final desta formação, os participantes serão capazes de:

Desenvolva produtores e consumidores Kafka para enviar e ler dados de Kafka. Integre o Kafka com sistemas externos usando o Kafka Connect. Escreva aplicativos de streaming com Kafka Streams e ksqlDB. Integre um aplicativo cliente Kafka com o Confluent Cloud para implantações Kafka baseadas em nuvem. Ganhe experiência prática por meio de exercícios práticos e casos de uso do mundo real.

Este treinamento ao vivo conduzido por instrutor em Portugal (no local ou remoto) é destinado a engenheiros de dados, cientistas de dados e programadores que desejam usar os recursos Apache Kafka no fluxo de dados com Python.

No final deste treinamento, os participantes poderão usar Apache Kafka para monitorar e gerenciar condições em fluxos de dados contínuos usando a programação Python.

Este treinamento presencial, ministrado por um instrutor em Portugal (online ou no local), é voltado para testadores de software que desejam implementar medidas de segurança de rede em uma aplicação do Apache Kafka.

Ao final deste treinamento, os participantes serão capazes de:

• Implantar o Apache Kafka em um servidor baseado em nuvem.
• Implementar criptografia SSL para prevenir ataques.
• Adicionar autenticação ACL para rastrear e controlar o acesso dos usuários.
• Garantir que clientes confiáveis tenham acesso a clusters do Kafka com autenticação SSL e SASL.

Este treinamento ao vivo conduzido por instrutor em Portugal (no local ou remoto) é destinado a desenvolvedores de nível intermediário que desejam aprender os fundamentos do Kafka e integrá-lo com Spring Boot.

No final desta formação, os participantes serão capazes de

• Compreender o Kafka e a sua arquitetura.
• Aprender a instalar, configurar e montar um ambiente Kafka básico.
• Integrar o Kafka com Spring Boot.

O Kafka Streams é uma biblioteca client-side para construir aplicações e microserviços cujos dados são transmitidos para e de um sistema de mensagens Kafka. Tradicionalmente, o Apache Kafka dependia do Apache Spark ou Apache Storm para processar dados entre os produtores e consumidores de mensagens. Ao chamar a API do Kafka Streams dentro de uma aplicação, os dados podem ser processados diretamente no Kafka, eliminando a necessidade de enviar os dados para um cluster separado para processamento.

Neste treinamento conduzido por instrutor e ao vivo, os participantes aprenderão como integrar o Kafka Streams em um conjunto de aplicações Java de exemplo que transmitem dados para e do Apache Kafka para processamento de fluxo.

Ao final deste treinamento, os participantes serão capazes de:

• Compreender as características e vantagens do Kafka Streams em comparação com outros frameworks de processamento de fluxos
• Processar dados de fluxo diretamente dentro de um cluster Kafka
• Escrever uma aplicação ou microserviço em Java ou Scala que se integra com o Kafka e Kafka Streams
• Escrever código conciso que transforma tópicos de entrada do Kafka em tópicos de saída do Kafka
• Construir, empacotar e implantar a aplicação

Público-alvo

• Desenvolvedores

Formato do curso

• Parte palestra, parte discussão, exercícios e prática intensiva

Notas

• Para solicitar um treinamento personalizado para este curso, entre em contato conosco para agendar

Este treinamento ao vivo conduzido por instrutor em Portugal (no local ou remoto) é destinado a administradores de sistema de nível iniciante a intermediário que desejam aprender como gerenciar efetivamente os tópicos do Kafka para streaming e processamento de dados eficientes.

No final deste treinamento, os participantes serão capazes de:

• Compreender os fundamentos e a arquitetura do tópico Kafka.
• Criar, configurar e gerenciar tópicos do Kafka.
• Monitorar tópicos do Kafka para saúde, desempenho e disponibilidade.
• Implementar medidas de segurança para tópicos do Kafka.

Este treinamento ao vivo conduzido por instrutor em Portugal (no local ou remoto) é destinado a desenvolvedores que desejam implementar o processamento de fluxo Apache Kafka sem escrever código.

No final deste treinamento, os participantes serão capazes de:

• Instalar e configurar o Confluent KSQL.
• Configurar um pipeline de processamento de fluxo usando apenas comandos SQL (sem codificação Java ou Python).
• Realizar filtragem de dados, transformações, agregações, junções, janelamento e sessionização inteiramente em SQL.
• Conceber e implementar consultas interactivas e contínuas para ETL de fluxo contínuo e análise em tempo real.

Este treinamento ao vivo conduzido por instrutor em Portugal (online ou no local) é destinado a cientistas de dados que desejam usar a pilha SMACK para construir plataformas de processamento de dados para soluções de big data.

No final desta formação, os participantes serão capazes de

• Implementar uma arquitetura de pipeline de dados para processar big data.
• Desenvolver uma infraestrutura de cluster com Apache Mesos e Docker.
• Analisar dados com Spark e Scala.
• Gerenciar dados não estruturados com o Apache Cassandra.

Este treinamento ao vivo conduzido por instrutor em Portugal (no local ou remoto) é destinado a engenheiros de dados, cientistas de dados e programadores que desejam usar os recursos Spark Streaming no processamento e análise de dados em tempo real.

No final deste treinamento, os participantes poderão usar Spark Streaming para processar fluxos de dados ao vivo para uso em bancos de dados, sistemas de arquivos e painéis ao vivo.

Este treinamento ao vivo conduzido por instrutor em Portugal (no local ou remoto) é destinado a desenvolvedores que desejam transformar a arquitetura tradicional em uma arquitetura baseada em microsserviços altamente simultânea usando Spring Cloud, Kafka, Docker, Kubernetes e Redis.

No final desta formação, os participantes serão capazes de

• Configurar o ambiente de desenvolvimento necessário para a construção de microsserviços.
• Desenhar e implementar um ecossistema de microsserviços altamente concorrente usando Spring Cloud, Kafka, Redis, Docker e Kubernetes.
• Transformar serviços monolíticos e SOA em arquitetura baseada em microsserviços.
• Adotar uma abordagem DevOps para desenvolver, testar e liberar software.
• Garantir alta simultaneidade entre os microsserviços em produção.
• Monitorar os microsserviços e implementar estratégias de recuperação.
• Realizar o ajuste de desempenho.
• Aprenda sobre as tendências futuras na arquitetura de microsserviços.