Títulos Disponíveis
Título: ESTUDOS ESTRUTURAIS EM BIG DATA
Aluno: LUCAS BARBOSA BRANCALHÃO
Orientador: ALMIR ROGÉRIO CAMOLESI
Banca: CÉLIO DESIRÓ
Ano: 2024 Tipo: Monografia / TCC
Palavras-chave: 1. Data Lake. 2. Dados. 3. Ciência de Dados. 4. Python. 5. Big Data. 6. Análise. 7. Nuvem. 8. Arquitetura. 9. Terraform.
Resumo: Este projeto de conclusão de curso explora a integração de Apache Spark, Terraform e AWS Glue para a gestão eficiente de grandes volumes de dados com a utilização de um Data Lake. Ele detalha o Apache Spark e sua relação com Hadoop, o uso de Terraform para infraestrutura como código, e serviços da AWS como S3, Glue e Athena para processamento e catalogação de dados. Também são discutidas arquiteturas de dados, como Pipes and Filters e o modelo Medallion. A implementação prática usa Terraform para conectar à nuvem e automatizar processos com AWS Glue. O projeto reflete sobre a relevância dessas tecnologias no cenário atual de Big Data.
