Вопросы по теме 'pdi'

Планирование задания в pentaho 5.1, настройка журнала для электронной почты
В версии pentaho [PDI (Kettle)] 5.1 после планирования задания я настроил электронную почту на преобразование в задание, если задание не выполняется, электронное письмо было отправлено на почту, где произошла ошибка. Если я хочу увидеть подробную...
1998 просмотров

Коммерческие расходы Pentaho Data Integration + хостинг на лазурном сервере
Я сделал несколько поисков в Google, но не смог найти четкого ответа. Сколько стоит PDI / чайник для коммерческого использования? Это потенциально бесплатно? Можно ли разместить его в Azure?
12861 просмотров
schedule 29.11.2022

Как отправить файл по почте шаг?
Существует условие, которое требует отправки нескольких писем в gmail, и это слишком часто. То есть через каждые 10 минут будет запускаться почта, показывающая успех и неудачу вместе с данными таблицы аудита, которая состоит из job_key, чтения строки,...
2228 просмотров
schedule 27.09.2022

Невозможно передать параметр, хранящийся в памяти, путем копирования строк на шаг результата в условие шага SQL
У меня есть сценарий в соответствии с двумя изображениями. Первое изображение: Это основная работа, и она имея 1 преобразование и задание, где при преобразовании я выбираю имя файла и сохраняю в копии строки для результата. Теперь задание будет...
766 просмотров
schedule 26.12.2023

Проблемы с запросом данных Cassandra с PDI 5.3
У меня есть установка Cassandra, которая содержит таблицу с не более чем 110 тыс. записей. У меня довольно много проблем с запросом данных с использованием PDI 5.3 (последняя версия). Я постоянно теряю память на стороне Кассандры. Учитывая, что...
153 просмотров
schedule 23.04.2023

Чайник Pentaho: динамические параметры и запрос
Я пытаюсь вставить данные в целевую БД из динамического источника данных, а также его запрос при получении данных. При этом столбцы и таблица для вставки могут различаться. Но дело в том, что столбцы и таблицы сохраняются как строки в таблице в...
6742 просмотров
schedule 10.06.2022

Найдите слово в текстовом файле с помощью Pentaho Kettle / Spoon / PDI
Я создаю сценарий сравнения / проверки данных, используя SQL и Spoon PDI. Мы перемещаем данные между двумя серверами и, чтобы убедиться, что у нас есть все данные, у нас есть SQL-запросы, показывающие дату, а затем количество переданных строк....
1087 просмотров
schedule 29.03.2023

не может получить вложение электронной почты в чайнике Pentaho
Я пытаюсь извлечь вложение электронной почты в чайнике (Pentaho PDI), используя «Ввод сообщений электронной почты», я просмотрел другие примеры, и все они следуют этому пример , здесь шаг ввода отличается от «получить почту (POP3 / IMAP)», и можно...
993 просмотров
schedule 29.05.2022

Сканирование всех столбцов из Hbase в Pentaho
Я новичок в Pentaho и HBase. Я хочу прочитать все столбцы из таблицы Hbase и загрузить их в плоский файл с помощью Pentaho. Главное, что столбцы в моей таблице Hbase не статичны. В некоторые дни я буду получать 30+ столбцов, а в некоторые дни это...
268 просмотров
schedule 05.07.2022

Pentaho PDI: окончательное значение вычисляемого поля предыдущей строки
Я попытался использовать шаг Analytik Query для доступа к некоторому вычисляемому полю предыдущей строки. Оказывается, все строки вычисляются параллельно, и что доступ к полям предыдущей строки дает вам текущее значение, которое они имеют во время их...
1527 просмотров
schedule 28.02.2023

Как запустить преобразование PDI с базой данных из Java?
Я пытаюсь запустить преобразование PDI с использованием базы данных (любой базы данных, но предпочтительнее не SQL) из Java. Я пытался использовать mongodb и cassandradb и получил недостающие плагины, я уже спрашивал здесь: Запуск PDI Kettle на...
3314 просмотров
schedule 05.03.2024

Соответствие шаблону для определения формата даты
Мой источник имеет разные форматы даты, как показано ниже, и я ищу алгоритм для определения шаблона исходной даты, опробованного в интеграции данных Pentaho с выбранным значением и нечеткими шагами. Столбец даты (строка) "20150210" "20050822--"...
237 просмотров
schedule 18.11.2023

Как подключить Pentaho 6.0 к Hadoop-Hive
Я пытаюсь подключить Pentaho к Hive, чтобы можно было выполнять запросы Hive через Pentaho. Я установил Pentaho 6.0 на свою Windows 7 (Professional 64bit). Я настроил Hadoop на «Bare metal server». Детали системы Hadoop следующие: Apache...
3260 просмотров
schedule 08.05.2023

BIGQUERY - Как установить соединение с Pentaho Data Integration (Spoon)?
Я пытаюсь получить доступ к BigQuery через Pentaho Data Integration, но мне это не удается. Метод аутентификации Google BigQuery: учетная запись службы с ключом .p12 Я загрузил и распаковал "зависимости для чайника.zip" в PDI_FOLDER / libswt /...
4466 просмотров
schedule 21.06.2022

Ошибка при настройке начального репозитория в Pentaho Kettle
Настраиваю пентахо в первый раз. Он может видеть mysql, но когда я пытаюсь настроить начальный репозиторий, он выдает эту ошибку: org.pentaho.di.core.exception.KettleAuthException: Incorrect password or login Кажется, нужен пароль...
922 просмотров
schedule 30.12.2022

Как работает шаг оболочки пентахо и как пентахо регистрирует выходные данные шага оболочки
Я пытаюсь прочитать код Pentaho DI. Особенно мне очень интересно понять механизм регистрации и ожидания заданий Pentaho DI, пока не завершится шаг оболочки. Может ли кто-нибудь помочь мне с деталями. Я не смог получить необходимую информацию на...
1719 просмотров
schedule 15.09.2022

Динамический разбор XML в Pentaho Kettle
Я довольно давно использую парсер STAX в Pentaho Kettle. Но вдруг у меня возникла странная ситуация. Раньше файлы XML имели предопределенные уровни, такие как: <A> <TRADE a="1" b="2"> <TRADE a="3" b="4">...
914 просмотров
schedule 15.07.2023

ошибка при запуске pan.bat в командной строке
со ссылкой на мой предыдущий пост, вот ссылка Я все еще сталкиваюсь с некоторыми ошибками. Я попытался запустить другой файл .ktr, он успешно запустился, но когда я пытаюсь запустить "pivot_inject_etl_metadata.ktr", он выдает следующую ошибку....
1095 просмотров
schedule 17.04.2023

Pentaho PDI (Spoon): очень медленный вывод таблицы MySQL (~ 2000 строк/с)
Шаг вывода моей таблицы ужасно медленный (~ 2 000 строк в секунду) по сравнению с вводом (100 000–200 000 строк в секунду). Сервер MySQL не является проблемой, используя собственный MySQL, например. с шагом «Выполнение сценария SQL» я получаю что-то...
1787 просмотров
schedule 31.01.2024

PDI Kettle — как указать ObjectId для соответствия запроса в выводе MongoDB
Используя вывод PDI Kettle MongoDB, я пытаюсь обновить документ mongodb, запрашивая поле _id (ObjectId). Если я передам переменную _id как строку на шаг вывода MongoDB, окончательный созданный запрос будет выглядеть так: Modifier update...
1119 просмотров
schedule 21.07.2022