https://github.com/inzhenerka/dbt-scooters
Эталонный проект dbt для курса от Инженерки
https://github.com/inzhenerka/dbt-scooters
course dbt dwh postgresql scooters
Last synced: 3 months ago
JSON representation
Эталонный проект dbt для курса от Инженерки
- Host: GitHub
- URL: https://github.com/inzhenerka/dbt-scooters
- Owner: Inzhenerka
- Created: 2024-03-16T20:52:47.000Z (about 1 year ago)
- Default Branch: main
- Last Pushed: 2025-01-10T10:30:49.000Z (4 months ago)
- Last Synced: 2025-01-12T02:59:14.630Z (4 months ago)
- Topics: course, dbt, dwh, postgresql, scooters
- Homepage: https://inzhenerka.tech/dbt
- Size: 1.47 MB
- Stars: 4
- Watchers: 1
- Forks: 3
- Open Issues: 0
-
Metadata Files:
- Readme: README.md
Awesome Lists containing this project
README
# dbt_scooters
## Описание проекта
Проект на базе dbt, предназначенный для управления и трансформации данных,
связанных с использованием скутеров кикшеринга.
Позволяет выстроить аналитику данных о передвижениях и использовании скутеров.
## Каталог данных
Каталог dbt, который автоматически обновляется из ветки `main`:
https://inzhenerka.github.io/dbt-scooters
## Быстрый старт
1. Убедитесь, что у вас установлен Python и pip:
```bash
python --version
pip --version
```
2. Установите dbt и другие зависимости:
```bash
pip install -r requirements.txt
```
3. Клонируйте репозиторий, а затем перейдите в директорию проекта:
```bash
cd dbt_scooters
```
4. Активируйте PostGIS в базе PostgreSQL, если еще этого не делали:
```sql
create extension postgis schema public;
```
## Конфигурация
Обновите конфигурационный файл `~/.dbt/profiles.yml` с вашими данными доступа к базе данных.
## Основные команды dbt
- `dbt debug` - проверка подключения к хранилищу данных (проверка профиля)
- `dbt parse` - парсинг файлов проекта (проверка корректности)
- `dbt compile` - компилирует dbt-модели и создает SQL-файлы
- `dbt run` - материализация моделей в таблицы и представления
- `dbt test` - запускает тесты для проверки качества данных
- `dbt seed` - загружает данные в таблицы из CSV-файлов
- `dbt build` - основная команда, комбинирует run, test и seed
- `dbt source freshness` - проверка актуальности данных в источниках
- `dbt docs generate` - генерирует документацию проекта
- `dbt docs serve` - запускает локальный сервер для просмотра документации
## Полезные макросы
- `dbt run-operation create_role --args "name: finance"` - создание роли в базе (на примере роли "finance")