https://github.com/yandex-cloud-examples/yc-data-proc-mysql-data-import
Импорт данных из Yandex Managed Service for MySQL в Yandex Data Processing с помощью Sqoop.
https://github.com/yandex-cloud-examples/yc-data-proc-mysql-data-import
data-proc mysql yandex-cloud yandexcloud
Last synced: 8 months ago
JSON representation
Импорт данных из Yandex Managed Service for MySQL в Yandex Data Processing с помощью Sqoop.
- Host: GitHub
- URL: https://github.com/yandex-cloud-examples/yc-data-proc-mysql-data-import
- Owner: yandex-cloud-examples
- License: apache-2.0
- Created: 2024-03-08T08:58:10.000Z (over 1 year ago)
- Default Branch: main
- Last Pushed: 2024-10-31T12:32:16.000Z (11 months ago)
- Last Synced: 2024-12-29T15:47:00.652Z (9 months ago)
- Topics: data-proc, mysql, yandex-cloud, yandexcloud
- Language: HCL
- Homepage: https://cloud.yandex.ru/ru/docs/tutorials/dataplatform/sqoop-mmy
- Size: 15.6 KB
- Stars: 0
- Watchers: 2
- Forks: 0
- Open Issues: 0
-
Metadata Files:
- Readme: README.md
- License: LICENSE
Awesome Lists containing this project
README
# Импорт данных из Yandex Managed Service for MySQL в Yandex Data Processing с помощью Sqoop
Утилита [Sqoop](https://yandex.cloud/ru/docs/data-proc/operations/sqoop-usage) позволяет импортировать данные из [Managed Service for MySQL](https://yandex.cloud/ru/docs/managed-mysql) в кластер [Yandex Data Processing](https://yandex.cloud/ru/docs/data-proc). В зависимости от конфигурации кластера Yandex Data Processing вы можете выполнить импорт в одно из следующих хранилищ:
* бакет [Yandex Object Storage](https://yandex.cloud/ru/docs/storage);
* директорию HDFS;
* Apache Hive;
* Apache HBase.
Подготовка инфраструктуры для виртуальной машины, Object Storage, Yandex Data Processing и Managed Service for MySQL через Terraform описана в [практическом руководстве](https://yandex.cloud/ru/docs/tutorials/dataplatform/sqoop-mmy), необходимый для настройки конфигурационный файл [clusters-mysql-data-proc-and-vm.tf](clusters-mysql-data-proc-and-vm.tf) расположен в этом репозитории.