Вопросы по теме 'azure-data-factory-2'

Проблемы с использованием средства извлечения ключевых фраз и анализа тональности с помощью U-SQL через аналитику озера данных Azure в озере данных Azure
Я пытаюсь использовать когнитивные службы Microsoft с озером данных и столкнулся с проблемой при попытке получить ключевые фразы и тональность из текста в столбце файла CSV. Я проверил, правильно ли отформатирован файл и правильно ли читается (я...
183 просмотров

M требуется параметр Validation Error
У меня есть несколько конвейеров копирования в фабрике данных Azure (v2). До сегодняшнего дня они работали нормально. Теперь всякий раз, когда я пытаюсь опубликовать изменения, я получаю следующую ошибку проверки: M требует параметра И, конечно...
148 просмотров
schedule 06.05.2022

Фабрика данных Azure версии 2: копирование или действие хранимой процедуры для слияния SQL
У нас есть несколько шагов слияния таблиц БД в нашем решении фабрики данных Azure v2. Мы объединяем таблицы в одном экземпляре базы данных Azure SQL Server. Исходные и целевые таблицы находятся в разных схемах БД. Источники определяются либо как...
1128 просмотров

Фабрика данных Azure: для каждого элемента () не существует значения для определенного атрибута.
У меня есть для каждого действия, у которого есть хранимая процедура (SP), в которой я, очевидно, ввожу значения с помощью item (). Теперь предположим, что входными значениями SP являются item (). A, item (). B и item (). C Вопрос: Для некоторых...
2935 просмотров

Фабрика данных Azure: как обновить параметр (флаг) конвейера внутри конвейера
Я инициализировал параметр конвейера, скажем флаг, значением («истина»). Теперь внутри конвейера я хочу обновить значение флага на основе некоторого условия. Итак, допустим, у меня есть веб-активность внутри конвейера, я хочу обновить значение...
596 просмотров

Синтаксическая ошибка в запросе SOQL фабрики данных Azure WHERE LastModifiedDate ›= datetime
Я работаю в фабрике данных Azure V2 , пытаюсь запросить у объекта Salesforce, где LastModifiedDate в объекте больше или равен недавней дате. Я получаю синтаксические ошибки в чрезвычайно простых запросах SOQL, которые отлично работают в Salesforce...
1288 просмотров

Дата начала передачи веб-API DataFactory по расписанию
Я использую фабрику данных Azure V2 и пытаюсь передать запланированное время начала и окончания (от триггера таймера) к вызову API. Это невозможно или я упустил трюк? Спасибо Один маршрут, которым я следовал. И еще через установку...
41 просмотров
schedule 21.02.2022

Фабрика данных Azure: как работает экспорт переменных U-SQL в следующий блок конвейера?
У меня есть конвейер в моей фабрике данных Azure с U-SQL -> ForEach -> Интернет ..настройка потока. Мой U-SQL в конечном итоге выполнит «выборку» одного столбца, и я хочу вызвать API для каждой из выбранных строк в одном столбце. Могу я...
81 просмотров
schedule 01.05.2023

как создать связанный сервис с adla
Я пытаюсь создать связанный сервис для аналитики озера данных Azure, и он показывает такую ​​ошибку [{"code":9512,"message":"Failed to connect to ADLA account 'miniprojectanalytics' with error 'The client '8899dd6a-45b1-4955-a3b9-7b3a95dd6dfa'...
347 просмотров
schedule 24.08.2023

Set-AzureRmDataFactoryV2IntegrationRuntime: метод не найден
Когда я пытаюсь выполнить команду «Set-AzureRmDataFactoryV2IntegrationRuntime», я постоянно получаю ошибку ниже. Set-AzureRmDataFactoryV2IntegrationRuntime: метод не найден: «Newtonsoft.Json.Serialization.IAttributeProvider...
538 просмотров

Как вызвать ошибку при выполнении действий в ADFV2?
У меня есть дочерний конвейер, который получает инструкции из управляющего файла с использованием набора данных. Эти инструкции определяют, из какого каталога копировать файлы. Сначала этот дочерний конвейер проверяет наличие файла с помощью...
5017 просмотров
schedule 26.11.2022

Фабрика данных Azure v2 Ненулевые столбцы в приемнике
Я пробую фабрику данных Azure версии 2 и хочу передавать данные из источника SQL в приемник Oracle. Моя проблема в том, что у меня есть несколько столбцов Not Null в моих таблицах Oracle, которые указывают, например, дату и время загрузки набора...
1399 просмотров

Повторяющееся имя столбца в источнике хранилища таблиц в фабрике данных Azure
Настройка: 1. У меня есть таблица хранения таблиц Azure со следующей схемой. PartitionKey RowKey TimeStamp [Generated By Azure table storage automatically] DataField1 TimeStamp [Field added by code] Я добавил эту таблицу в качестве...
1045 просмотров

Фабрика данных Azure v2 - неправильное копирование года из паркета в базу данных SQL
У меня странная проблема с фабрикой данных Azure v2. Есть задание Spark, которое выполняется и создает файлы паркетов в качестве выходных данных, а действие копирования ADFv2 затем берет выходной паркет и копирует данные в базу данных SQL Azure. Все...
1218 просмотров

Получение имени файла большого двоичного объекта в действии копирования данных
Я загружаю файлы json из веб-API и сохраняю их в хранилище больших двоичных объектов, используя действие копирования данных и двоичную копию. Затем я хотел бы использовать другое действие копирования данных, чтобы извлечь значение из каждого файла...
1076 просмотров

Перезагрузить узел с помощью задачи VSTS или шаблона ARM?
У меня есть фабрика данных v2 с пакетной учетной записью, пулом и одним узлом. Похоже, узел застрял в состоянии «ожидания запуска задачи», и поэтому все мои расписания перестали работать. У меня нет возможности перезагрузить узел через...
80 просмотров

Динамическая обрезка данных до 4000 символов при копировании в ADW с помощью фабрики данных Azure.
Я получаю следующую ошибку при копировании данных из большого двоичного объекта в хранилище данных Azure: "errorCode": "2200", "message":...
2438 просмотров

Установка параметра связанной службы во время выполнения в конвейере фабрики данных
Как передать параметры во время выполнения в связанную службу в фабрике данных? У меня есть параметр, определенный и используемый в моем определении службы, связанной с функциями Azure, но я не уверен, как установить его во время вызова в моем...
917 просмотров

Промежуточные таблицы в БД против области хранения
Обычно в рабочем процессе ETL на локальном сервере SQL через SSIS мы загружаем данные из любого места в промежуточные таблицы, а затем применяем проверку и преобразования, чтобы загрузить / объединить их в таблицы хранилища данных нижестоящего уровня....
1116 просмотров

Как программно отслеживать сообщения об ошибках/
У меня есть действие «Поиск» с выводом «Ошибка», которое выполняет действие «Хранимая процедура». Действие хранимой процедуры регистрирует сбой. Как программно получить имя действия поиска с ошибкой, а также сообщение об ошибке, как во входных...
44 просмотров
schedule 08.03.2023