Повторяющееся имя столбца в источнике хранилища таблиц в фабрике данных Azure

Настройка:
1. У меня есть таблица хранения таблиц Azure со следующей схемой.

PartitionKey
RowKey
TimeStamp [Generated By Azure table storage automatically]
DataField1
TimeStamp [Field added by code]

Я добавил эту таблицу в качестве источника в свою фабрику данных.

Проблема
Когда я пытаюсь опубликовать этот набор данных, появляется сообщение об ошибке The name 'TIMESTAMP' is duplicated in 2 Schema

Я попытался удалить код TimeStamp из structure данных. Но ошибка все еще сохраняется.

Пожалуйста, предложите любой способ импортировать этот набор данных.


azure-data-factory-2 azure-data-factory azure-table-storage
person Shaswat Rungta    schedule 24.10.2018    source источник
comment
Как вы удалили сгенерированный код TimeStamp? Просто установите для них null значение не будет действовать, они все еще существуют и могут быть сопоставлены фабрикой данных Azure.   -  person Jay Gong    schedule 25.10.2018
comment
я имел в виду свойство структуры в шаблоне руки фабрики данных   -  person Shaswat Rungta    schedule 25.10.2018

Ответы (1)


arrow_upward
1
arrow_downward

Вы использовали инструмент визуального создания ADF? Просто проверьте дублированный столбец и нажмите кнопку удаления, чтобы сработать.

В случае, если вы сказали, что уже удалили столбец, но ошибка все еще существует, я подозреваю, что вы снова импортируете схему перед публикацией каким-либо образом, поэтому изменение структуры схемы отменяется. Если это не так, опишите подробнее.

person Li Liu    schedule 25.10.2018
comment
Теперь это звучит так просто. Не уверен, как я пропустил опцию удаления. Спасибо @Li - person Shaswat Rungta; 25.10.2018
comment
Пока мы занимаемся этим, у меня также есть столбец, содержащий строковый json. [В основном сложный объект был сериализован как строка]. Когда я импортирую это, файл csv портится. У вас есть какие-нибудь рекомендации по этому поводу? - person Shaswat Rungta; 25.10.2018
comment
Файл csv портится в основном из-за того, что он плохо разбирается. Не уверен, поможет ли это, но приятно проверить формат файла doc. - person Li Liu; 26.10.2018