https://github.com/ayresgneto/projeto-etl-twitter
Projeto ETL desenvolvido em Python 3.7.7: Extração de dados utilizando um crawler. Jupyter Notebook com transformação dos dados para uma melhor visualização analítica e carga em uma tabela do SGDB SQL Server,
https://github.com/ayresgneto/projeto-etl-twitter
Last synced: 3 months ago
JSON representation
Projeto ETL desenvolvido em Python 3.7.7: Extração de dados utilizando um crawler. Jupyter Notebook com transformação dos dados para uma melhor visualização analítica e carga em uma tabela do SGDB SQL Server,
- Host: GitHub
- URL: https://github.com/ayresgneto/projeto-etl-twitter
- Owner: ayresgneto
- Created: 2020-12-02T16:01:56.000Z (over 4 years ago)
- Default Branch: master
- Last Pushed: 2020-12-02T18:43:23.000Z (over 4 years ago)
- Last Synced: 2025-01-08T04:35:14.790Z (5 months ago)
- Language: Jupyter Notebook
- Homepage:
- Size: 14.6 KB
- Stars: 0
- Watchers: 1
- Forks: 0
- Open Issues: 0
-
Metadata Files:
- Readme: README.md
Awesome Lists containing this project
README
# Projeto-ETL-Twitter
Projeto ETL desenvolvido em Python 3.7.7: Extração de dados utilizando um crawler. Jupyter Notebook com transformação dos dados para uma melhor visualização analítica e
carga em uma tabela do SGDB SQL Server.
get_tweets.py: Crawler para extração de dados do Twitter
extract_analyze_tweets.ipynb: Jupyter notebook desenvolvido para realizar o play da extração. A limpeza, organização, tratamento, e carga dos dados extraídos em uma tabela do SGBD SQL Server
Tecnologias envolvidas:
Python 3.7.7,
SQL Server 2019,
SQL Management Studio,
API Twitter,
VSCode,
Jupyter Notebook