Ecosyste.ms: Awesome
An open API service indexing awesome lists of open source software.
https://github.com/vikktor93/global-air-pollution
This repository contains an initial data analysis of the global_air_pollution dataset. This dataset measures air quality levels in different cities around the world.
https://github.com/vikktor93/global-air-pollution
air-quality anaconda contaminants data-analysis-python data-science jupyter-notebook python python3
Last synced: 19 days ago
JSON representation
This repository contains an initial data analysis of the global_air_pollution dataset. This dataset measures air quality levels in different cities around the world.
- Host: GitHub
- URL: https://github.com/vikktor93/global-air-pollution
- Owner: Vikktor93
- License: mit
- Created: 2024-09-13T13:15:35.000Z (2 months ago)
- Default Branch: main
- Last Pushed: 2024-09-15T16:36:40.000Z (2 months ago)
- Last Synced: 2024-10-16T19:59:51.015Z (about 1 month ago)
- Topics: air-quality, anaconda, contaminants, data-analysis-python, data-science, jupyter-notebook, python, python3
- Language: Jupyter Notebook
- Homepage:
- Size: 2.22 MB
- Stars: 0
- Watchers: 1
- Forks: 0
- Open Issues: 0
-
Metadata Files:
- Readme: README.md
Awesome Lists containing this project
README
# Análisis de Datos del Dataset Global Air Pollution
Este repositorio contiene un análisis de datos inicial del dataset [Global Air Pollution][kaggle] de Kaggle, el cual mide los niveles de calidad del aire en distintas ciudades del mundo en función de varios contaminantes. El análisis está dividido en tres etapas, cada una implementada en un Jupyter Notebook: **Análisis Exploratorio**, **Limpieza de Datos**, y **Transformación de Datos**.
[kaggle]: https://www.kaggle.com/datasets/hasibalmuzdadid/global-air-pollution-dataset
## Descripción del Dataset
Este dataset incluye los valores de los principales contaminantes del aire:
- **CO AQI Value**: Índice de calidad del aire para monóxido de carbono.
- **Ozone AQI Value**: Índice de calidad del aire para ozono.
- **NO2 AQI Value**: Índice de calidad del aire para dióxido de nitrógeno.
- **PM2.5 AQI Value**: Índice de calidad del aire para partículas finas (PM2.5).
- **AQI Value**: Índice de calidad del aire general.
- **AQI Category**: Categoría que indica el nivel de contaminación del aire (Good, Moderate, Unhealthy, etc.).
El objetivo del análisis es identificar los contaminantes más importantes en diferentes ciudades, y preparar los datos para análisis futuros mediante procesos de limpieza, transformación, y visualización.
## Estructura del Repositorio
La estructura del proyecto es la siguiente:
```
global-air-pollution-analysis/
├── assets/ # Carpeta que contiene imágenes o activos para el README
│ └── banner.png # Imagen del banner utilizado en el README.md
├── data/ # Carpeta que contiene los datasets originales y limpios
│ ├── global_air_pollution.csv # Dataset original
│ └── dataset_clean.csv # Dataset limpio generado tras la limpieza de datos
├── notebooks/ # Notebooks de Jupyter con el análisis y transformación de datos
│ ├── 01_Analisis_Exploratorio.ipynb # Análisis exploratorio de los datos
│ ├── 02_Limpieza_de_Datos.ipynb # Limpieza de datos
│ └── 03_Transformacion_de_Datos.ipynb # Transformación de datos (Ingeniería de características, normalización, estandarización)
├── README.md # Archivo de documentación del proyecto
```
### 1. **Análisis Exploratorio (`01_Analisis_Exploratorio.ipynb`)**
En este notebook, se realiza una exploración inicial del dataset:
- Carga y revisión del contenido del dataset.
- Exploración de las distribuciones de las variables numéricas mediante histogramas.
- Identificación de posibles relaciones entre variables numéricas con un mapa de calor de correlación.
### 2. **Limpieza de Datos (`02_Limpieza_de_Datos.ipynb`)**
Este notebook se enfoca en limpiar el dataset para prepararlo para un análisis en la etapa de Transformación de Daots:
- Eliminación de valores nulos.
- Relleno de datos faltantes en columnas clave (por ejemplo, se completa la columna "Country" con el valor más frecuente).
- Eliminación de duplicados.
- Verificación de los tipos de datos y corrección de formatos, si es necesario.
### 3. **Transformación de Datos (`03_Transformacion_de_Datos.ipynb`)**
En este notebook se aplican técnicas de transformación de datos:
- **Ingeniería de características**: Se crea una columna llamada `Dominant_Pollutant`, que identifica el contaminante con el valor de AQI más alto en cada fila.
- **Normalización**: Las variables numéricas se escalan para estar en el rango de 0 a 1 utilizando **Min-Max Scaling**.
- **Estandarización**: Las variables numéricas se transforman para tener una distribución con media 0 y desviación estándar 1, utilizando **StandardScaler**.
Además, este notebook incluye visualizaciones que comparan las distribuciones antes y después de la normalización y estandarización mediante histogramas y scatter plots.
## Visualizaciones Clave
A lo largo del análisis, se generaron diversas visualizaciones para facilitar la comprensión de los datos:
- **Histogramas**: Para observar la distribución de las variables numéricas antes y después de las transformaciones.
- **Scatter Plots**: Para analizar la relación entre diferentes contaminantes.
## Requisitos
Para ejecutar los notebooks y replicar el análisis, necesitas instalar las siguientes dependencias:
`pip install numpy pandas matplotlib seaborn scikit-learn`
## Cómo Usar Este Repositorio
1. Clona este repositorio en tu desipositivo local:
`git clone https://github.com/Vikktor93/global-air-pollution.git`
2. Abre los notebooks en Jupyter Notebook, JupyterLab o tu IDE favorito.
3. Sigue los notebooks en el orden sugerido para entender todo el flujo del análisis.
## Licencia
Este proyecto está licenciado bajo la [MIT License][license]. Consulte [License][license] para obtener más información.
[license]: https://github.com/Vikktor93/global-air-pollution/blob/main/LICENSE