Oracle Data Integrator SQL для HDFS IKM возвращает ошибку

Я использую ODI (12.1.3.0.0). Я создал топологию для Oracle DB, и я создал топологию для HDFS с использованием файловой технологии, где, как мне кажется, проблема.

DataServer для HDFS, я оставил драйвер JDBC пустым и заполнил URL-адрес JDBC с помощью hdfs: // remotehostname: port

Физическая схема для HDFS, я заполнил и схему, и рабочую схему с помощью / my / path

Затем создали логическую схему и модель. После этого создал Datastore по модели с этими определениями. Имя: TestName Имя ресурса: TESTFILE.txt Формат файла: фиксированный

После всего этого был создан проект и мэппинг под проект.

Отображение

Наконец, когда я запускаю сопоставление, я вижу следующие ошибки:

ODI-1217: Session Oracle2HDFSMapping_Physical_SESS (15) fails with return code ODI-1298.
ODI-1226: Step Physical_STEP fails after 1 attempt(s).
ODI-1240: Flow Physical_STEP fails while performing a Add execute to Sqoop script-IKM SQL to HDFS File (Sqoop)- operation. This flow loads target table null.
ODI-1298: Serial task "SERIAL-MAP_MAIN- (10)" failed because child task "SERIAL-EU-GGUSER_UNIT (20)" is in error.
ODI-1298: Serial task "SERIAL-EU-GGUSER_UNIT (20)" failed because child task "Add execute to Sqoop script-IKM SQL to HDFS File (Sqoop)- (40)" is in error.
Caused By: java.io.IOException: Cannot run program "chmod": CreateProcess error=2, The system cannot find the file specified
    at java.lang.ProcessBuilder.start(ProcessBuilder.java:1047)
    at java.lang.Runtime.exec(Runtime.java:617)
    at java.lang.Runtime.exec(Runtime.java:450)
    at java.lang.Runtime.exec(Runtime.java:347)
    at oracle.odi.runtime.agent.execution.cmd.OSCommandExecutor.execute(OSCommandExecutor.java:54)
    at oracle.odi.runtime.agent.execution.cmd.OSCommandExecutor.execute(OSCommandExecutor.java:29)
    at oracle.odi.runtime.agent.execution.TaskExecutionHandler.handleTask(TaskExecutionHandler.java:52)
    at oracle.odi.runtime.agent.execution.SessionTask.processTask(SessionTask.java:203)
    at oracle.odi.runtime.agent.execution.SessionTask.doExecuteTask(SessionTask.java:114)
    at oracle.odi.runtime.agent.execution.AbstractSessionTask.execute(AbstractSessionTask.java:886)
    at oracle.odi.runtime.agent.execution.SessionExecutor$SerialTrain.runTasks(SessionExecutor.java:2198)
    at oracle.odi.runtime.agent.execution.SessionExecutor.executeSession(SessionExecutor.java:591)
    at oracle.odi.runtime.agent.processor.TaskExecutorAgentRequestProcessor$1.doAction(TaskExecutorAgentRequestProcessor.java:718)
    at oracle.odi.runtime.agent.processor.TaskExecutorAgentRequestProcessor$1.doAction(TaskExecutorAgentRequestProcessor.java:611)
    at oracle.odi.core.persistence.dwgobject.DwgObjectTemplate.execute(DwgObjectTemplate.java:203)
    at oracle.odi.runtime.agent.processor.TaskExecutorAgentRequestProcessor.doProcessStartAgentTask(TaskExecutorAgentRequestProcessor.java:800)
    at oracle.odi.runtime.agent.processor.impl.StartSessRequestProcessor.access$1400(StartSessRequestProcessor.java:74)
    at oracle.odi.runtime.agent.processor.impl.StartSessRequestProcessor$StartSessTask.doExecute(StartSessRequestProcessor.java:702)
    at oracle.odi.runtime.agent.processor.task.AgentTask.execute(AgentTask.java:180)
    at oracle.odi.runtime.agent.support.DefaultAgentTaskExecutor$2.run(DefaultAgentTaskExecutor.java:108)
    at java.lang.Thread.run(Thread.java:745)
Caused by: java.io.IOException: CreateProcess error=2, The system cannot find the file specified
    at java.lang.ProcessImpl.create(Native Method)
    at java.lang.ProcessImpl.<init>(ProcessImpl.java:385)
    at java.lang.ProcessImpl.start(ProcessImpl.java:136)
    at java.lang.ProcessBuilder.start(ProcessBuilder.java:1028)
    ... 20 more

Интересно, где я ошибся?


oracle hdfs sqoop oracle-data-integrator
person harunurhan    schedule 25.06.2015    source источник

Ответы (1)


arrow_upward
0
arrow_downward

Для файлового хранилища данных вам необходимо определить атрибуты (столбцы), открыв хранилище данных и перейдя на вкладку атрибутов. Если файл уже существует, вы можете реконструировать атрибуты, переименовать их и при необходимости изменить тип данных.

В сообщении об ошибке, которое вы получили для второй задачи, упоминается, что файл (созданный в первой задаче) не существует. Таким образом, может возникнуть проблема с первой задачей, вероятно, из-за отсутствия атрибутов в вашем хранилище данных.

Вот подробная статья о SQL To HDFS file (Sqoop) KM, написанная ODI A-Team: http://www.ateam-oracle.com/importing-data-from-sql-databases-into-hadoop-with-sqoop-and-oracle-data-integrationtor-odi/

person JeromeFr    schedule 29.06.2015