Estudo Sobre Spark nas Aplicações de Processamento de Log e Análise de Cliques
Resumo
O uso de aplicações de processamento de dados de fluxo contínuo vem crescendo cada vez mais, dado este fato o presente estudo visa mensurar a desempenho do framework Apache Spark Strucutured Streaming perante o framework Apache Storm nas aplicações de fluxo contínuo de dados, estas sendo processamento de logs e análise de cliques. Os resultados demonstram melhor desempenho para o Apache Storm em ambas as aplicações.
Referências
Bordin, M. V., Griebler, D., Mencagli, G., Geyer, C. F. R., and Fernandes, L. G. L. (2020). Dspbench: A suite of benchmark applications for distributed data stream processing systems. IEEE Access, 8:222900-222917.
Lu, R., Wu, G., Xie, B., and Hu, J. (2014). Stream bench: Towards benchmarking modern distributed stream computing frameworks. In 2014 IEEE/ACM 7th International Conference on Utility and Cloud Computing, pages 69-78.
van Dongen, G. and Van den Poel, D. (2020). Evaluation of stream processing frameworks. IEEE Transactions on Parallel and Distributed Systems, 31(8):1845-1858.
Lu, R., Wu, G., Xie, B., and Hu, J. (2014). Stream bench: Towards benchmarking modern distributed stream computing frameworks. In 2014 IEEE/ACM 7th International Conference on Utility and Cloud Computing, pages 69-78.
van Dongen, G. and Van den Poel, D. (2020). Evaluation of stream processing frameworks. IEEE Transactions on Parallel and Distributed Systems, 31(8):1845-1858.
Publicado
10/05/2023
Como Citar
DOPKE, Luan; GRIEBLER, Dalvan.
Estudo Sobre Spark nas Aplicações de Processamento de Log e Análise de Cliques. In: ESCOLA REGIONAL DE ALTO DESEMPENHO DA REGIÃO SUL (ERAD-RS), 23. , 2023, Porto Alegre/RS.
Anais [...].
Porto Alegre: Sociedade Brasileira de Computação,
2023
.
p. 85-88.
ISSN 2595-4164.
DOI: https://doi.org/10.5753/eradrs.2023.229298.
