Я периодически получаю сообщение об ошибке
DAG не удалось выполнить из-за VERTEX_FAILURE.
при выполнении запросов Hive через PyHive. По этой причине Hive работает в кластере EMR, где hive.vectorized.execution.enabled
имеет значение false
в файле hive-site.xml.
Я могу установить указанное выше свойство через конфигурацию подключения к Hive, и мой запрос успешно выполняется каждый раз, когда я его выполняю, однако я хочу подтвердить, что это устранило проблему и что это определенно тот случай, когда hive-site. xml игнорируется.
Может ли кто-нибудь подтвердить, является ли это ожидаемым поведением, или, в качестве альтернативы, есть ли способ проверить конфигурацию Hive через PyHive, поскольку я не смог найти способ сделать это?
Спасибо!