Публикации по теме 'data-integration'


Для чего был создан YepCode?
Узнайте историю YepCode и почему мы идем против потока NoCode. В этой статье мы объясним вам, почему мы создали YepCode. Вы готовы? Что ж, если вы дочитали до этого места, Zapier, IFTTT или Tray, вероятно, вам знакомы . Не поймите нас неправильно. Это отличные инструменты автоматизации NoCode . Но это всего лишь инструменты для неспециалистов. Очень красивый и простой в использовании, но с ограничениями . Мы не сомневаемся, что, если вы знаете, как использовать код, вы..

Вопросы по теме 'data-integration'

Когда объединять несколько приложений, чтобы упростить интеграцию их данных?
Краткая версия: У нас есть несколько команд, каждая из которых разрабатывает несколько приложений. Им нужно поделиться некоторыми данными. Должны ли мы объединить эти приложения в одно более крупное, чтобы упростить интеграцию данных, или мы...
928 просмотров

Очистка HTML на шаге ложки PDI (пользовательский класс java)
Привет, я использую шаг HTTP Client , чтобы получить исходный код веб-сайта. Мне нужно соскрести определенную часть одной строки. пример строки: <a href="....." ......>TEXT I WANT</a> поэтому я решил использовать UDJC в PDI и...
1506 просмотров
schedule 09.03.2022

Разделитель вывода текстового файла Pentaho
Я использую шаг Text file output в Pentaho Kettle для извлечения данных из sql и помещения их в файлы CSV. Я указал запятую в качестве разделителя содержимого. Но иногда я получаю файлы со значениями, разделенными точкой с запятой. Кто-нибудь еще...
1404 просмотров
schedule 10.03.2023

Работа с большими файлами CSV в Ruby
Я хочу проанализировать два CSV-файла базы данных MaxMind GeoIP2, выполнить объединение на основе столбца и объединить результат в один выходной файл. Я использовал стандартную рубиновую библиотеку CSV, она очень медленная. Я думаю, что он...
1928 просмотров
schedule 25.04.2022

Дополнить CSV метаданными из базы данных
Я искал легкое масштабируемое решение для обогащения CSV-файла дополнительными метаданными из базы данных. Каждая строка в CSV представляет элемент данных, а столбцы — метаданные, принадлежащие этому элементу. В основном у меня есть экстракт CSV,...
262 просмотров
schedule 24.03.2023

Подсчитайте количество строк для каждого файла вместе с именем файла в Talend.
Я создал задание, которое считывает данные из файла и на основе уникальных данных определенных столбцов разбивает набор данных на множество файлов. Я могу выполнить требование с помощью следующей работы: Теперь из этого задания, которое...
5188 просмотров
schedule 18.12.2022

Как справиться с медленно меняющимся измерением в Amazon Redshift с помощью Pentaho?
Поскольку Amazon Redshift оптимизирован для чтения, а не для записи, как я могу управлять процедурой медленно меняющегося измерения с помощью инструмента ETL, в моем случае Pentaho Data Integration? Поскольку инструмент ETL будет выполнять...
1870 просмотров

Добавить строку в таблицу отношений «многие ко многим» после создания строки с помощью Talend
Я использую Talend Open Studio для интеграции данных, чтобы создать задание, которое должно выполнять следующие действия: Получить строку из таблицы1 Если строки с определенным значением нет в таблице 2: добавить строку в таблицу2 добавить...
510 просмотров
schedule 02.04.2022

informatica-powercenter-лучший способ реализовать логику SQL «между»
Мне нужно реализовать SQL statment с более чем одним подзапросом в Informatica PowerCenter. В одном из них я застрял, потому что я бы использовал, как предложено в другом ответе, 2 Source Qualifier, а затем компонент Joiner, но мне нужно иметь...
964 просмотров

В чем реальная польза от использования GraphQL?
Я читал в Интернете статьи о преимуществах graphql, но пока не смог найти ни одного преимущества. Одно из наиболее распространенных преимуществ, упомянутых в этих статьях, приведено ниже? Нет перевыборки с GraphQL. Сокращение количества...
759 просмотров
schedule 30.10.2023

Как изменить данные в столбце в SAS Data Integration?
У меня есть существующее решение ETL со встроенной интеграцией данных SAS, где один из столбцов изначально настроен на все нулевые значения. Я хочу заполнить этот столбец фактическими данными. Исходный столбец в этой таблице был настроен на...
332 просмотров
schedule 10.07.2023

Как использовать Pentaho Denormalizer Step с внедрением метаданных
Я хочу денормализовать приведенные ниже данные. Ввод Ввод Требуемый результат col1 col2 col3 col4 aaa bbb ccc ddd Я думаю, что в Pentaho мы можем использовать этап внедрения метаданных с этапом денормализатора для...
81 просмотров