Может кто-нибудь пояснить, как можно использовать том EBS в кластере EMR (кластер Transcient/по требованию).
Каковы преимущества использования тома EBS в EMR? поскольку EBS также будет удален с прекращением работы кластера EMR.
Я планирую настроить кластер EMR для запуска заданий ETL на основе искры и ищу некоторые входные данные, пожалуйста. Я могу пойти с EMRFS/S3, но просто интересно, почему у нас есть EBS в EMR.
Спасибо.
Некоторые типы инстансов EC2, поддерживаемые EMR, не имеют другого хранилища, кроме поддержки EBS (например, серии c4 и m4). В этом случае для использования с EMR инстансам потребуется EBS, и к каждому инстансу будет привязан объем по умолчанию в 10 ГБ, если вы не укажете больший объем.
Конечно, EBS также можно использовать с другими типами инстансов, которые уже включают хранилище, если вам требуется дополнительное хранилище сверх того, что предоставляет инстанс.
Дополнительные сведения об EMR и EBS см. на странице https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-storage.html
