https://github.com/yandex-cloud-examples/yc-data-proc-to-data-proc
Совместная работа с таблицами в Yandex Data Processing с использованием Metastore.
https://github.com/yandex-cloud-examples/yc-data-proc-to-data-proc
data-proc metastore object-storage yandex-cloud yandexcloud
Last synced: about 1 year ago
JSON representation
Совместная работа с таблицами в Yandex Data Processing с использованием Metastore.
- Host: GitHub
- URL: https://github.com/yandex-cloud-examples/yc-data-proc-to-data-proc
- Owner: yandex-cloud-examples
- License: apache-2.0
- Created: 2024-03-08T08:58:19.000Z (over 2 years ago)
- Default Branch: main
- Last Pushed: 2025-06-04T14:07:30.000Z (about 1 year ago)
- Last Synced: 2025-06-04T21:04:35.976Z (about 1 year ago)
- Topics: data-proc, metastore, object-storage, yandex-cloud, yandexcloud
- Language: HCL
- Homepage: https://cloud.yandex.ru/ru/docs/data-proc/tutorials/dataproc-to-dataproc
- Size: 35.2 KB
- Stars: 0
- Watchers: 3
- Forks: 0
- Open Issues: 0
-
Metadata Files:
- Readme: README.md
- License: LICENSE
Awesome Lists containing this project
README
# Совместная работа с таблицами в Yandex Data Processing с использованием Metastore
Вы можете сохранять данные из кластера [Yandex Data Processing](https://yandex.cloud/ru/docs/data-proc) в бакет [Yandex Object Storage](https://yandex.cloud/ru/docs/storage) с помощью отдельного кластера Hive Metastore для хранения метаданных таблиц. Это позволит работать с сохраненными данными другому кластеру Yandex Data Processing, имеющему доступ к бакету и подключенному к тому же кластеру Metastore. Подготовка инфраструктуры для Yandex Data Processing и Object Storage через Terraform описана в [практическом руководстве](https://yandex.cloud/ru/docs/data-proc/tutorials/dataproc-to-dataproc), необходимый для настройки конфигурационный файл [dataproc-to-dataproc.tf](dataproc-to-dataproc.tf) расположен в этом репозитории.