bd_locadora_mysql

banco de dados MYSQL de uma locadora ficticia para a pratica da linguagem sql

challenge_forecast_weather_pyspark

Desafio de previsão do tempo usando pyspark

challenge_sql

Desafio de SQL publicado no curso da udemy "15 Days of SQL - A Complete Masterclass", No qual foi proposto na seção 13

conferencia-saldo-entre-sistemas

Conferência entre dois sistemas, um contabil e um operacional, ambos tem referências identicas, e é feito tal conferencia para podermos identificar os problemas de integração existentes todo inicio de mês. Nos casos abaixo, aplicamos varios recursos da biblioteca pandas, alem de utilizarmos varios recursos, como dataframes, listas e dicionarios, manipulando arquivos xlsx e retornando um relatorio também em xlsx que permite a conferência.

conferencia_notas_fiscais

Conferencia de notas fiscais entre uma planilha retirada do sistema, e um arquivo xml contendo as notas fiscais do mes, a fim de validar se todas as informações em ambas estão atuais através de uma comparação

databricks_brewery

emissao-de-faturas-com-python

etl_ocorrencias_aereas

Treinando um processo ETL usando python, com Dados extraídos do governo, sobre ocorrências aeronáuticas no qual foi solicitado recomendações para evitar ou minimizar acidentes.

gregorypierroti

hackerrank-tasks-sql

Repositório criado a fim de demonstrar minhas querys feitas em SQL e modelagem de dados

learn_spark

O repositório tem o intuito de mostrar algumas funções utilizando o spark, desde o básico, até windows functions e sparksql

poc-synapse

projectcovid19

Project About covid19 cases, using ETL Process with ADF, Dataflow, Databricks, HD insight, Azure devops, CI/CD and more

testando_pyarrow

Testes com pyarrow

teste_karhub

Realizando desafio proposto.