Ir para conteúdo
  • Main
  • Feed do blog

lyamada-tech blog

Tag: spark streaming

Escrito por Luis Yamadadezembro 9, 2021

Spark Structured Streaming (on Amazon EMR) + Amazon MSK

https://itnext.io/getting-started-with-spark-structured-streaming-and-kafka-on-aws-using-amazon-msk-and-amazon-emr-91b1f2ef0162

Escrito por Luis Yamadanovembro 5, 2021

PySpark on AWS Lambda

Leveraging on Docker image using ECR and AWS Lambda to process Spark workloads PoC planned, soon on my GitHub 🙂 https://aws.plainenglish.io/spark-on-aws-lambda-c65877c0ac96

Escrito por Luis Yamadasetembro 9, 2020

Shuffling Apache Spark

Ver no Medium.com

Escrito por Luis Yamadaagosto 24, 2020

Série de 6 artigos sobre Tunning de jobs spark (custo/eficiência)

Escrito por Luis Yamadaagosto 24, 2020

Soluções para erros comuns de jobs Spark

Escrito por Luis Yamadajulho 29, 2020julho 29, 2020

Boas práticas (realmente aplicáveis) – Spark

https://www.bi4all.pt/en/news/en-blog/apache-spark-best-practices/

Escrito por Luis Yamadajunho 10, 2020

Tuning no código Spark

https://towardsdatascience.com/apache-spark-optimization-toolkit-17cf3e491992

Escrito por Luis Yamadajunho 10, 2020

Spark 3.0 – Preview

Escrito por Luis Yamadamaio 28, 2020

Pipeline (fast e batch) – Spark Streaming, HDFS, Cassandra

Crie um site ou blog no WordPress.com
Privacidade e cookies: Esse site utiliza cookies. Ao continuar a usar este site, você concorda com seu uso.
Para saber mais, inclusive sobre como controlar os cookies, consulte aqui: Política de cookies
  • Assinar Assinado
    • lyamada.tech.blog
    • Já tem uma conta do WordPress.com? Faça login agora.
    • lyamada.tech.blog
    • Assinar Assinado
    • Registre-se
    • Fazer login
    • Denunciar este conteúdo
    • Visualizar site no Leitor
    • Gerenciar assinaturas
    • Esconder esta barra
Crie um site como este com o WordPress.com
Comece agora