web-dev-qa-db-ja.com

Azure Data Factoryはforeachの値からデータを取得します

Blob内のコンテナーから値を取得するルックアップアクティビティを使用しました。検索アクティビティに接続されているforeachアクティビティがあります

enter image description here

そして設定の下でそれは値を持っています：

@activity('LookupMessageType').output.value

このforeachアクティビティ内で実行される別のコピーアクティビティがあります。 cosmos DBからAzure Data Lakeにデータをコピーします。
enter image description here

これは、ソースデータセットのクエリです。

select c.Tag, data.assetTag, data.timestamp, data.jsonVersion, data.messageType, data.speed from c join data in c.data
where (data.speed>  item().speed_Value) AND
(data.timestamp >= '@{formatDateTime(addhours(pipeline().TriggerTime, -1), 'yyyy-MM-ddTHH:mm:ssZ' )}' 
AND data.timestamp < '@{formatDateTime(pipeline().TriggerTime, 'yyyy-MM-ddTHH:mm:ssZ' )}')

このパイプラインを実行するとエラーが発生します。

{
    "errorCode": "2200",
    "message": "Failure happened on 'Source' side. ErrorCode=UserErrorDocumentDBReadError,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=DocumentDb operation failed: Message: {\"errors\":[{\"severity\":\"Error\",\"location\":{\"start\":231,\"end\":235},\"code\":\"SC2005\",\"message\":\"'item' is not a recognized built-in function name.\"}]}\r\nActivityId: *redacted*, documentdb-dotnet-sdk/1.21.1 Host/64-bit MicrosoftWindowsNT/6.2.9200.0.,Source=Microsoft.DataTransfer.ClientLibrary.DocumentDb,''Type=Microsoft.Azure.Documents.BadRequestException,Message=Message: {\"errors\":[{\"severity\":\"Error\",\"location\":{\"start\":231,\"end\":235},\"code\":\"SC2005\",\"message\":\"'item' is not a recognized built-in function name.\"}]}\r\nActivityId: redacted, documentdb-dotnet-sdk/1.21.1 Host/64-bit MicrosoftWindowsNT/6.2.9200.0,Source=Microsoft.Azure.Documents.Client,''Type=System.Runtime.InteropServices.COMException,Message=Exception from HRESULT: 0x800A0B00,Source=,'",
    "failureType": "UserError",
    "target": "Copy Data1"
}

アイテムは組み込みの関数名ではないということです。 foreachアクティビティの値を使用して、ソースを照会したい。

さらに、ここに私の動的ファイルパスのコンテンツがあります

@concat('test_', item().speed, '.csv')

クエリで静的な値を使用している場合、この式で目的の動的ファイル構造を取得します：data.speed> 500

azureazure-cosmosdbazure-data-factory
7
MAK

そこで、クエリの何が問題なのかを見つけました。

where (data.speed> item().speed_Value)

私は使わなければなりませんでした

where (data.speed> @{item().speed_value})
10
MAK