Please use this identifier to cite or link to this item:
https://repositorio.ufu.br/handle/123456789/43211
Full metadata record
DC Field | Value | Language |
---|---|---|
dc.creator | Oliveira, Ingrid Iplinsky de | - |
dc.date.accessioned | 2024-08-30T17:24:57Z | - |
dc.date.available | 2024-08-30T17:24:57Z | - |
dc.date.issued | 2024-04-24 | - |
dc.identifier.citation | OLIVEIRA, Ingrid Iplinsky de Oliveira. Análise e processamento de dados usando Apache Kafka, Spark e Pinot. 2024. 46 f. Trabalho de Conclusão de Curso (Graduação em Sistemas de Informação) – Universidade Federal de Uberlândia, Uberlândia, 2024 | pt_BR |
dc.identifier.uri | https://repositorio.ufu.br/handle/123456789/43211 | - |
dc.language | por | pt_BR |
dc.publisher | Universidade Federal de Uberlândia | pt_BR |
dc.rights | Acesso Aberto | pt_BR |
dc.rights.uri | http://creativecommons.org/licenses/by-nc-nd/3.0/us/ | * |
dc.subject | Big Data | pt_BR |
dc.subject | Apache Kafka | pt_BR |
dc.subject | Apache Spark | pt_BR |
dc.subject | Apache Pinot | pt_BR |
dc.title | Análise e processamento de dados usando Apache Kafka, Spark e Pinot | pt_BR |
dc.title.alternative | Data analysis and processing using Apache Kafka, Spark and Pinot | pt_BR |
dc.type | Trabalho de Conclusão de Curso | pt_BR |
dc.contributor.advisor1 | Oliveira, Daniele Carvalho | - |
dc.contributor.advisor1Lattes | http://lattes.cnpq.br/0858402708122364 | pt_BR |
dc.contributor.referee1 | Ribeiro, Thiago Pirola | - |
dc.contributor.referee1Lattes | http://lattes.cnpq.br/8887726177714522 | pt_BR |
dc.contributor.referee2 | Molinos, Diego Nunes | - |
dc.contributor.referee2Lattes | http://lattes.cnpq.br/2451163675391898 | pt_BR |
dc.description.degreename | Trabalho de Conclusão de Curso (Graduação) | pt_BR |
dc.description.resumo | O volume de dados gerados pelos usuários tem crescido de forma exponencial. No entanto, muitas empresas enfrentam desafios na captura e análise dessas informações, o que impacta diretamente na geração de valor para seus negócios. Com isso o presente trabalho de conclusão de curso tem o objetivo de apresentar uma forma de realizar análise de dados no âmbito de Big Data, utilizando os softwares Apache Kafka para consumir os dados e distribuir dentro do ecossistema, o Apache Spark para realizar análises e filtragem dos dados e o Apache Pinot para fazer o armazenamento e possibilitar futuras consultas. E para a análise utilizou-se dados da Application Programming Interface (API) do Twitter disponibilizado na Kaggle, visando a variedade de dados e permitindo analisar tendências. Os resultados obtidos demonstram a viabilidade e eficácia da metodologia proposta. O sistema desenvolvido foi capaz de lidar com a ingestão e processamento de dados, demonstrando a escalabilidade e desempenho das ferramentas Apache Kafka, Apache Spark e Apache Pinot. Além disso, as análises realizadas forneceram insights valiosos sobre os dados do Twitter, destacando a capacidade do sistema em extrair informações relevantes. | pt_BR |
dc.publisher.country | Brasil | pt_BR |
dc.publisher.course | Sistemas de Informação | pt_BR |
dc.sizeorduration | 46 | pt_BR |
dc.subject.cnpq | CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::SISTEMAS DE COMPUTACAO::ARQUITETURA DE SISTEMAS DE COMPUTACAO | pt_BR |
Appears in Collections: | TCC - Sistemas de Informação (Monte Carmelo) |
Files in This Item:
File | Description | Size | Format | |
---|---|---|---|---|
AnáliseProcessamentoDe.pdf | 3.19 MB | Adobe PDF | View/Open |
This item is licensed under a Creative Commons License