A Ideia é mostrar o Apache Kafka em execução no Databricks
1 - Fazer o upload do arquivo do Kafka para o Databricks
2 - Iniciar o "zookeeper-server"
3 - Iniciar o "kafka-server"
4 - Iniciar o "kafka-consumer"
5 - Realizar a produção "kafka-producer" de alguns eventos para um topico
6 - Realizar o consumo e algumas transformações com o Spark
7 - Realizar a gravação dos dados que foram transformados em um arquivo "json" e também em um "topico" no kafka
Folders and files
| Name | Name | Last commit date | ||
|---|---|---|---|---|