Настройка облачной инфраструктуры

Создадим инфраструктуру в Yandex.Cloud с помощью Terraform

1. Сервисный аккаунт
2. Сеть
3. Объектное хранилище S3
4. Dataproc кластер
5. ВМ для доступа к кластеру

Посмотрим на автоматическую загрузку данных в S3 Зайдем на мастерноду Dataproc и загрузим данные в HDFS