PySpark select, groupBy, sum, avg, min, max, orderBy e UDF

🤓 Com a alta demanda na industria de dados em busca de profissionais com habilidades de analytics, machine learning e engenharia de dados saber PySpark vai lhe render boas oportunidades não só apenas em uma nova oportunidade de emprego mas também na atual onde você poderá construir novas soluções de dados escaláveis e inovadoras.

📄 Código fonte do projeto:
- Link do Notebook: https://github.com/ademirmendonca/AnaliseMunicipiosBrasileiros_2010

🎲 Dataset utilizado no projeto:
- Link oficial do dado: http://blog.mds.gov.br/redesuas/wp-content/uploads/2018/06/Lista_Munic%C3%ADpios_com_IBGE_Brasil_Versao_CSV.csv
- Link dado tratado: https://raw.githubusercontent.com/ademirmendonca/DadosPublicos/main/Lista_Municipios.csv

🐧Linux para desenvolvimento com Python e PySpark com Dados:
- Montando máquina Linux para desenvolvimento DataScience, Analytics e Engenharia de dados: https://youtu.be/0e2Pd08PfYc
- Configurando ambiente PySpark com VSCode: https://youtu.be/6-SOZCThn98

📚Além disso, sugeri aqui embaixo alguns livros que podem ser interessantes em sua trilha de aprendizado:

✅ Learning PySpark Framework: https://amzn.to/399SqAm
✅ Essential PySpark for Scalable Data Analytics: A beginner's guide to harnessing the power and ease of PySpark 3: https://amzn.to/3964RNN
✅ Learning Spark: Lightning-Fast Data Analytics: https://amzn.to/3Mhkxeu
✅ Introdução à Programação com Python: Algoritmos e Lógica de Programação Para Iniciantes: https://amzn.to/3PKKshF
✅ Data Science Do Zero: Noções Fundamentais com Python: https://amzn.to/3lL8xqK
✅ Python Para Análise de Dados: Tratamento de Dados com Pandas, NumPy e IPython: https://amzn.to/38KB11j

––––––––––––––––––––––––––––––
Bongo by KV https://youtube.com/c/KVmusicprod
Creative Commons — Attribution 3.0 Unported — CC BY 3.0
Free Download / Stream: https://bit.ly/Bongo-KV
Music promoted by Audio Library https://youtu.be/pDiQewAmf9Y
––––––––––––––––––––––––––––––

🎵 Track Info:

Title: Bongo by KV
Genre and Mood: Ambient + Bright

———
Big Blues by Audionautix is licensed under a Creative Commons Attribution license (https://creativecommons.org/licenses/...)
Artist: http://audionautix.com/

––––––––––––––––––––––––––––––
Music: Parasail - Silent Partner https://youtu.be/MzO4zfNO0kQ
––––––––––––––––––––––––––––––
🎵 Copyright Free Music 🎧 No Copyright Music 🎶 Youtube Audio Library

#pyspark #dataanalytics #colab