Вопросы по теме 'pentaho-data-integration'

Чайник: как получить максимальную дату для каждой группы строк
Я читаю лист Excel с помощью Kettle, и этот лист имеет три поля: код, описание и дату. Пример : 1 - description A - 01/JAN/2013 2 - description A - 15/JAN/2013 3 - description A - 04/JAN/2013 4 - description B - 02/JAN/2013 5 - description B -...
4979 просмотров
schedule 02.02.2024

Pentaho: - Как запускать файлы .kjb в PHP
У меня есть требование ниже. Мы хотим создать одну страницу PHP и запускать файлы Pentaho .kjb со страницы PHP. Если мы нажмем кнопку RUN, тогда PHP должен сделать вызов Pentaho, а затем должны выполниться файлы .kjb. Может ли кто-нибудь...
1497 просмотров

Я хочу улучшить производительность Pentaho для загрузки данных
У меня есть 4 миллиона записей, которым требуется ежедневная загрузка данных из источника в цель, и мы каждый день выполняем усечение. Это занимает около 9 часов, так как есть около 10 таблиц, загружающих 4 миллиона записей каждый день. Не могли бы...
1035 просмотров
schedule 24.04.2023

Ошибка при экспорте поля clob из оракула в текстовое поле в базе данных Azure.
У меня есть поле CLOB в таблице Oracle, в которой хранится файл PDF. Когда я пытаюсь экспортировать это поле в базу данных SQL Server в Azure, я получаю эту ошибку: 2017/01/19 11:14:32 - ImpostoRenda 2.0 - ERROR (version 6.1.0.1-196, build 1 from...
614 просмотров

Как подключить данные QuickBooks (QODBC) через Pentaho (Kettle) для ETL?
Я пытаюсь подключить данные приложения QuickBooks (QODBC) через Pentaho (Kettle) для процесса ETL. Хотелось бы знать, как мы можем подключить данные приложения QuickBooks (QODBC) через Pentaho.
384 просмотров

Левое внешнее соединение сбрасывает строки в Pentaho DI
У меня есть два набора данных (файлы csv), которые я ввожу в преобразование Pentaho DI с помощью шага «ввод файла CSV». В файле A есть столбец joincol , значения которого отображаются в файле B в столбце joincol . Я хочу оставить соединение данных...
810 просмотров

Чайник или PDI: используйте одно и то же соединение с БД между разными шагами
У меня есть несколько подключений к БД в трансформации Kettle (Pentaho Data Integration). Есть несколько шагов поиска и шагов вывода таблицы. Они должны использовать одно и то же соединение с БД. Я ищу способ изменить соединение с БД на шаге и...
1130 просмотров

Spoon - прочитать код SQL из txt файла и выполнить в БД
Я учусь разрабатывать ETL с помощью Pentaho Spoon, я еще довольно нуб. Вместо того, чтобы хранить операции SQL внутри своего файла, я хотел бы иметь их в своих собственных файлах .sql. Это упрощает отслеживание изменений в Subversion, и в случае...
337 просмотров

Генерация последовательных строк в Пентахо
Как создать последовательные строки в Pentaho Spoon? У меня есть текстовый файл, и я использую шаг «Образцы строк», чтобы выбрать каждую третью строку из текстового файла. Но проблема с «Sample Rows» в том, что мне приходится вручную вводить...
1161 просмотров

Как сопоставить входные данные с выходными полями из Excel в CSV в Pentaho?
Как сопоставить входные данные с выходными полями из Excel в CSV в pentaho? Как это преобразовать в пентахо? Где отображать значения входных и выходных столбцов, так как позиции и имена у входных и выходных данных различаются.
1273 просмотров

Сделать DB INSERT на основе метаданных ввода текстового файла
Я разрабатываю ETL и должен выполнить некоторые процедуры для его мониторинга. В начале я должен сделать INSERT в БД, чтобы создать запись, сообщающую имя файла и дату и время начала процесса. Этот запрос вернет PK записи, и его необходимо...
366 просмотров

Pentaho Flow Input- ›Output-› Вход не работает
У меня есть шаг ввода таблицы, который извлекает некоторые данные из таблицы A. Данные передаются на шаг вставки / обновления в таблицу B. Для каждой вставленной / обновленной строки я хочу выполнить другой ввод таблицы в таблице C, используя одно...
525 просмотров

Ошибка с акцентами при запуске Transformation Kettle Pentaho
У меня проблема с акцентами при использовании интеграции данных pentaho для переноса данных с сервера sql на postgresql, но только в некоторых случаях увеличивает один символ. Тип данных в Sql Server - это тип Varchar (MAX), а PostgreSQL - это тип...
682 просмотров

Ошибка Дженкинса Пентахо
У меня есть задание PDI Kitchen на моем сервере, которое я запускаю через скрипт с помощью Crontab на моем сервере Ubuntu 14.04, и все работает нормально. Теперь я пытаюсь запланировать его с помощью Jenkins (установленного на том же сервере) и...
630 просмотров

преобразовать строковое значение в формат ate в java-скрипте
У меня проблема с преобразованием строкового значения даты в допустимый формат даты в pentaho-data-itegration. Может ли кто-нибудь помочь мне преобразовать строковую дату'08-март-2017 'в формат даты (2017-03-08 00:00:00 ) в пентахо.
684 просмотров

Pentaho: я не могу записывать данные из Pentaho в BigQuery
Я использую драйвер JDBC Starschema для подключения Pentaho к BigQuery. Я могу успешно получать данные из BigQuery в Pentaho. Однако я не могу записывать данные из Pentaho в BigQuery. Возникает исключение при вставке строк в BigQuery, и кажется,...
605 просмотров

Pentaho Импортировать уникальные записи в базу данных
Я новичок в Pentaho Spoon, и я хотел бы импортировать записи файла csv в таблицу базы данных. Однако в таблицу базы данных следует импортировать только уникальные записи. Вот почему мне нужно сравнивать КАЖДУЮ запись со всеми записями таблицы базы...
308 просмотров

Извлечь почтовое вложение и переместить в целевую папку
Мой клиент хочет отправить файл данных Excel (.xlsx) по почте Outlook. И я хочу извлечь это вложение и поместить его в папку в «сети» для дальнейшей обработки. Я хочу использовать Pentaho для этого процесса. Почта приходит --> Вложение извлечено...
549 просмотров

Объединить две коллекции монго с условием запроса в пентахо
У меня проблема с запросом двух коллекций и объединением результатов для формирования другой коллекции. Коллекция1: { "ResourceCost" : 0.0032258065, "ResourceId" : "i-08c35f123eea43f30", "Unit" : "USD", "billdate" :...
294 просмотров

2 почти идентичных выбора в одной и той же таблице БД занимают совершенно разное время для выполнения
на Рождество у меня есть один вопрос, с которым я действительно изо всех сил пытаюсь найти подсказки о том, как с ним справиться. У меня есть одна БД отчетов, она заполнена данными из спутниковых баз данных на многих небольших машинах. Выборки...
75 просмотров