Impala на Hadoop 2.2.0 без CDH?

Я хочу протестировать и настроить Impala с моим дистрибутивом Hadoop 2.2.0, а не с Cloudera.

Я хочу знать, возможно ли использовать Impala без CDH, потому что я только читал, что Impala зависит от CDH.

Я пытаюсь следовать руководству в Impala Github — https://github.com/cloudera/impala. - и я внесу возможные изменения, чтобы заставить его работать.

Кто-нибудь уже сделал это? или это действительно невозможно?


person BAndrade    schedule 24.12.2013    source источник


Ответы (2)


Я думаю, что здесь есть две вещи, которые следует рассмотреть отдельно:

  1. Запуск Impala на Hadoop без CDH. Это возможна, хотя Cloudera не тестирует и не поддерживает ее. Однако другие дистрибутивы Hadoop включают Impala, например. Распространение MapR включает Cloudera Impala и Amazon объявила о поддержке Impala в Elastic MapReduce, и они оба проверили, что это работает со своими раздачами. Я предполагаю, что вы также не используете MapR, но я просто хочу сказать, что это возможно.
  2. Запуск Impala на Hadoop 2.2.0. Это также возможно, поскольку Первая бета-версия CDH5 включает Hadoop 2.2.0, поэтому Impala версии 1.2 и выше должны работать. Пожалуйста, убедитесь, что вы используете последнюю версию (на данный момент 1.2.3), потому что в последних второстепенных релизах есть ряд важных исправлений.

Так что да, это возможно, хотя установка, вероятно, не будет гладкой, и для этого варианта использования не так уж много помощи. Удачи!

person Matt    schedule 24.12.2013
comment
Спасибо... Я следую руководству и по ходу дела вношу изменения. Я постараюсь сделать туториал по установке Impala на Hadoop 2.2.0 без CDH и опубликую его в своем блоге на Medium. - person BAndrade; 26.12.2013
comment
@BAndrade У вас есть учебник сейчас? Если да, можете ли вы прокомментировать со ссылкой. Спасибо - person Peter; 31.07.2014

насколько я знаю, вы должны использовать CDH4, у других версий hadoop есть проблема совместимости. ps: CDH3 недоступен для запуска impala.

person user3132456    schedule 24.12.2013
comment
когда вы говорите о совместимости, импала не запускается, если не существует CDH4? что за проблема совместимости существует? - person BAndrade; 24.12.2013
comment
Это неправильно. Impala работает с небольшими изменениями. - person Ted Dunning; 28.12.2013