Вопросы по теме 'pdi'

ClassCastException в шаге чайника
У меня есть шаг Kettle, который использует пользовательский тип данных под названием Geometry. У меня есть следующие строки кода, которые получают метаинформацию из первой строки: geometryInterface =...
763 просмотров
schedule 18.09.2022

Pentaho ETL: соединение базы данных и ввод таблицы
Мне нужно записать данные таблицы базы данных в текстовый файл с некоторым преобразованием. Доступны два шага для извлечения данных из таблицы, а именно: ввод таблицы и соединение с базой данных. Я не вижу большой разницы между ними, кроме "внешнего...
4836 просмотров
schedule 18.02.2022

Таблица существует ступенька в чайнике Pentaho
Я хочу использовать шаг «Таблица существует», чтобы проверить, существует ли определенная таблица, если нет, то создайте ее. Созданное мной преобразование (для копирования данных из входной базы данных в выходную базу данных) Table Input...
4115 просмотров
schedule 09.03.2022

Копирование / перемещение файлов в PDI / Spoon дает ошибку "не файл"
Я пытаюсь автоматизировать еженедельное создание базы данных. В качестве первого шага в этом процессе мне нужно получить набор файлов из сетевого расположения M:\ . Процесс выглядит следующим образом: Удалите все, возможно, оставшиеся старые...
2463 просмотров
schedule 09.04.2022

передача параметров из CDE в PDI pentaho
У меня есть сценарий передачи параметров из pentaho cde с использованием чайника в интеграцию данных pentaho, а затем обновление таблицы с использованием переданного параметра в PDI. Как я могу передать параметр и получить переданный параметр в PDI?...
2160 просмотров
schedule 30.11.2023

Создание таблицы из файла .csv с помощью PDI Kettle
Я новичок в PDI и работаю с PDI Kettle, у меня есть 40 файлов .csv с разным количеством столбцов, я хочу создать таблицы из этих файлов за одно преобразование, я использовал «ввод файла CSV». шаг для выбора файла и шаг «Вывод таблицы» для создания...
3023 просмотров
schedule 29.03.2022

Kettle Row Count в интеграции данных Pentaho
Может ли кто-нибудь привести пример, с помощью которого я могу СЧИТАТЬ количество строк, введенных до и после преобразования \ Job из таблицы.
1365 просмотров
schedule 13.05.2024

Дублирование строки в базе данных со списком на входе
Я хочу дублировать строку ввода базы данных на основе списка. Ввод: у меня есть строка JSON, которая в настоящее время сортируется в БД по полям. "product": [{"startDate": "2015-02-01T00:00:00Z", "modifiedOn": "2015-03-17T14:12:46.758Z",...
30 просмотров

Интеграция данных Pentaho (PDI) Как использовать массовый загрузчик postgresql? Моя трансформация бежит вечно
Я новичок в PDI, я использую PDI 7, у меня есть ввод Excel с 6 строками, и я хочу вставить его в postgresDB. Моя трансформация: EXCEL INPUT -> Postgres Bulk Loader (всего 2 шага). Условие 1. Когда я запускаю преобразование, массовая загрузка...
5027 просмотров

Как передать параметры условной даты на шаг ввода таблицы?
Мне нужно основывать свои SQL SELECT на нескольких преобразованиях в задании на параметрах даты, и у меня возникают проблемы, чтобы заставить его работать. План таков: иметь параметры begin_date и end_date при следующем условии: если это 1-е число...
2251 просмотров
schedule 26.11.2023

PDI - Чтение файлов CSV, если отсутствует поле/данные, перейдите к следующему файлу
Я новичок в PDI и все еще узнаю об этом. Я пытаюсь создать преобразование, которое будет читать весь CSV-файл из одной папки, проверять правильность данных файла, то есть нет строк с отсутствующим/ошибочным/неправильным форматом, а затем сохранять...
1248 просмотров
schedule 31.08.2022

Нормализация групп столбцов в Pentaho Data Integration
У меня есть следующая таблица ввода (счета с платежными планами): account_number upfront_amount hour_price unlock_amount a1 10 2 150 a2 10 2 150 a3...
604 просмотров
schedule 19.02.2023

PDI - Как реализовать шифрование rijndael CBC в чайнике?
У меня есть несколько CSV-файлов, содержащих транзакции продажи. Файл поступил из другого отдела в другом штате и зашифрован из соображений безопасности. Он зашифрован с использованием шифрования CBC в режиме Rijndael-128. Мне нужно расшифровать...
142 просмотров
schedule 01.07.2023

Входная нить чайника
Когда я запускаю преобразование в Kettle с табличным вводом, если я получаю доступ к списку процессов моей базы данных, я вижу более одного процесса, работающего с MySQL моего шага ввода таблицы. Итак, мой вопрос: чайник использует потоки для...
102 просмотров
schedule 18.06.2023

Pentaho JavaScript JSON — объединить объекты json в существующий документ JSON на основе ключей
В основном то, что я пытаюсь сделать, это создать документ Json, все части которого разбиты на более мелкие части Json, все строки, содержащие ключи, необходимые для вставки меньших битов Json в правильную структуру json. Моя проблема начинается с...
224 просмотров
schedule 14.12.2022

PDI: есть ли способ заменить строки, разделенные запятыми, в таблице ввода SQL, где столбец?
Я пытаюсь заменить строку, разделенную запятыми, в запросе WHERE COLUMN IN внутри таблицы ввода в PDI. У меня есть строковый запрос = ("автомобиль", "велосипед"), и я хочу подставить в SELECT * FROM транспортные средства, где элемент находится в ?....
67 просмотров
schedule 10.01.2023

Pentaho MS-SQL устанавливает IDENTITY_INSERT a00 ON для вывода таблицы
PDI 9.0 Простое задание Соединение с MS SQL Ввод таблицы -> tableouput таблица tableouput: CREATE TABLE [dbo]. [a00] ([ProductID] [int] NOT NULL [IDENTITY (1,1)] [1] .. Мне нужно явно написать IDENTITY в SSMS. Я запускаю set IDENTITY_INSERT...
333 просмотров
schedule 03.02.2024

Подключение к MSSQL из Kettle PDI
Я пытаюсь настроить подключение к серверу MSSQL в Pentaho Kettle и заставить его использовать аутентификацию NTLM. Я успешно подключился к указанному серверу базы данных i dBeaver, используя метод аутентификации NTLM. Вот как я настроил...
195 просмотров
schedule 25.12.2022

Pentaho DI: сопоставьте поток формул с потоком значений. Возможен ли поиск?
У меня есть поток из таблицы БД, содержащий правила (формулы), которые я хотел бы сопоставить с потоком с данными в соответствии со значением столбца Имя. Скажем так (правила - это просто фиктивные примеры, а не часть вопроса): Data:...
65 просмотров

Pentaho Transformation Executor не передает параметры успешно
См. 2 примера, прикрепленных по этой ссылке . Пример 1: TEMP1.ktr и TEMP2.ktr Пример 2: PARENT.ktr и CHILD.ktr Я пытаюсь передать несколько параметров в ktr, исправленный в Transformation Executor, и, имея меньшее количество полей, он может...
270 просмотров