Estudo Sobre Spark nas Aplicações de Processamento de Log e Análise de Cliques

  • Luan Dopke SETREM
  • Dalvan Griebler SETREM

Resumo


O uso de aplicações de processamento de dados de fluxo contínuo vem crescendo cada vez mais, dado este fato o presente estudo visa mensurar a desempenho do framework Apache Spark Strucutured Streaming perante o framework Apache Storm nas aplicações de fluxo contínuo de dados, estas sendo processamento de logs e análise de cliques. Os resultados demonstram melhor desempenho para o Apache Storm em ambas as aplicações.

Referências

Bordin, M. V., Griebler, D., Mencagli, G., Geyer, C. F. R., and Fernandes, L. G. L. (2020). Dspbench: A suite of benchmark applications for distributed data stream processing systems. IEEE Access, 8:222900-222917.

Lu, R., Wu, G., Xie, B., and Hu, J. (2014). Stream bench: Towards benchmarking modern distributed stream computing frameworks. In 2014 IEEE/ACM 7th International Conference on Utility and Cloud Computing, pages 69-78.

van Dongen, G. and Van den Poel, D. (2020). Evaluation of stream processing frameworks. IEEE Transactions on Parallel and Distributed Systems, 31(8):1845-1858.
Publicado
10/05/2023
DOPKE, Luan; GRIEBLER, Dalvan. Estudo Sobre Spark nas Aplicações de Processamento de Log e Análise de Cliques. In: ESCOLA REGIONAL DE ALTO DESEMPENHO DA REGIÃO SUL (ERAD-RS), 23. , 2023, Porto Alegre/RS. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2023 . p. 85-88. ISSN 2595-4164. DOI: https://doi.org/10.5753/eradrs.2023.229298.