Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
如何将翻滚窗口参数传递到数据工厂 UI 中的数据工厂管道?
我已经定义了一个管道Azure Data Factory使用翻滚窗口触发器 如下所示 我希望我的活动能够接收翻滚窗口参数 trigger outputs windowStartTime and trigger outputs windowE
Azure
azuredatafactory
azuredatabricks
获取元数据活动 ADF V2
谁能解释一下 ADF V2 中新引入的获取元数据活动有什么用 实际上 learn microsoft com 中提供的信息不足以理解此 Activity 的用途 获取元数据活动的主要目的是 验证任何数据的元数据信息 当数据准备好 可用时触发
Azure
azuredatafactory
Azure 数据工厂 - 从 Data Lake Gen 2 JSON 文件中提取信息
我有一个 ADF 管道 将原始日志数据作为 JSON 文件加载到 Data Lake Gen 2 容器中 我们现在想要从这些 JSON 文件中提取信息 我正在尝试找到从所述文件中获取信息的最佳方法 我发现 Azure Data Lake A
json
azuredatafactory
azuredatalake
azuredatalakegen2
执行带有开始日期和结束日期的azure数据工厂foreach活动
我有一个 json 文件 它包含开始日期和结束日期 我需要使用 azure 数据工厂 foreach 迭代此开始日期和结束日期 据我所知 foreach 期望项目 集合 数组 但就我而言 我只有两个项目 即开始日期和结束日期 我想运行数据工
Azure
azuredatafactory
Azure 数据工厂 V2 中的 LeaseAlreadyPresent 错误
我在管道中收到以下错误使用 Rest API 复制活动作为来源和Azure 数据湖存储第 2 代作为水槽 message 失败发生在 Sink 端 ErrorCode AdlsGen2OperationFailed Type Microso
azuredatalake
azuredatafactory
azureblobstorage
Azure 数据工厂活动副本:使用 @pipeline().TriggerTime 评估接收器表中的列
使用数据工厂 V2 我尝试实现从一个 Azure SQL 数据库到另一个数据库的数据流复制 我已将源表的所有列与接收器表映射 但在接收器表中我有一个空列 我想在其中输入管道运行时 有谁知道如何在接收器表中填充此列而不将其出现在源表中 下面是
Azure
azuresqldatabase
azuredatafactory
如何使用 Azure 数据工厂将数据从追加变量活动复制到 csv 文件
如何使用 Azure 数据工厂将数据从附加变量活动复制到 csv 文件 我有文件名数组存储在附加变量活动中 我想将所有这些文件名存储在数据湖位置的 CSV 文件中 欲了解更多信息 请参阅此如何使用 ADF 比较文件夹 Datalake 内的
Azure
ETL
azuredatafactory
Azure 数据工厂中的当前日期参数
我在 Azure DataFactory 上下文中有一个管道 该管道有一个数据集 它是一个元数据表 并且该元数据表需要定期更新 我可以在查找活动中使用查询来更新表 我需要更新的列包含上次触发的日期 所以 我想问是否有任何方法可以获取当前日期
parameters
azuredatafactory
如何将 WebJob 集成到 Azure 数据工厂管道中
我正在尝试将 WebJob 集成到 ADF 管道中 webjob 是一个非常简单的控制台应用程序 namespace WebJob4 class ReturnTest static double CalculateArea int r do
azurewebjobs
azuredatafactory
azureblobstorage
使用 Azure 数据工厂将数据加载到 Snowflake 时遇到问题
我正在尝试使用 Azure 数据工厂将一个小数据表从 Azure SQL 导入到 Snowflake 中 通常我使用这种方法不会有任何问题 https learn microsoft com en us azure data factory
在 Azure 数据工厂中执行 python 脚本
我将数据存储在 blob 中 并且编写了一个 python 脚本来执行一些计算并创建另一个 csv 如何在 Azure 数据工厂中执行此操作 你可以使用Azure 数据工厂 V2 自定义活动 https learn microsoft co
Azure
azurestorage
azuredatafactory
当 Azure 数据工厂管道仍在运行时停止运行
我有一个Azure Data Factory Pipeline 我的触发器已设置为每 5 分钟一次 有时我的 Pipeline 需要 5 分钟以上才能完成其工作 在这种情况下 触发器再次运行并创建管道的另一个实例 并且同一管道的两个实例在我
triggers
azuredatafactory
如何在 Azure 数据工厂 - Databricks 中使用 continuation_token 获取 ADF Pipeline 运行详细信息的下一页?
我在用 adf client pipeline runs query by factory resourceGroupName 工厂名称 过滤器参数 的方法azure mgmt datafactory DataFactoryManageme
python
Azure
azuredatafactory
azuredatabricks
SQL Server 抱怨无效的 json
我正在使用 Azure 数据工厂和 Azure SQL 数据库编写 ETL 工具 数据工厂捕获映射数据流的输出并将其作为字符串插入到 SQL Server 表 Audit OperationsEventLog 的 StatusMessage
json
sqlserver
azuredatafactory
如何在Web Activity中使用数据集和linkedServices?
有人能给我一个关于使用这两个属性的完整示例吗 而且里面有一些奇怪的东西官方示例 https learn microsoft com en us azure data factory control flow web activity bod
azuredatafactory
.net Core:如何从 C# 代码传递参数并运行 Azure 数据工厂管道?
我在用Microsoft Azure 管理 DataFactories net 核心包 我使用以下代码来获取访问 C net core 中的 azure 数据工厂管道所需的令牌 public static void RunDataFacto
c
Azure
ASPNETCore
NetCore
azuredatafactory
Azure 数据工厂复制数据速度很慢
源数据库 Azure VM D16s v3 上托管的 PostgreSQL 目标数据库 Azure VM D4s v3 上托管的 SQL Server 开发人员版本 源数据库大小约为1TB 目标数据库为空 现有架构与源数据库相同 吞吐量仅为
Azure
azuredatafactory
如何在Azure数据工厂中传递不记名令牌API
我有一个 API 它具有授权和不记名令牌 我在邮递员中进行了测试 它正在工作 但是 当我在 ADF 中使用 Web 活动时 它不起作用 我在 URL 部分传递 url 创建新标头 输入授权并指定值 Bearer token 出现以下错误 E
Azure
azuredatafactory
Azure Synapse Analytics - 运行数据流时出现异常
使用 Synapse Analytics Workspace 的预览和相关的 Synapse Studio 我创建了一个数据流 该数据流只需将 parquet 文件从 Datalake gen2 存储加载到 SQL 池内的表中 运行仅包含此
azuredatafactory
azuresynapse
通过 ADF 将记录加载到 Dynamics 365
我正在 Azure 数据工厂中使用 Dynamics 连接器 TLDR 此连接器是否支持加载需要传入父记录密钥的子记录 例如如果我想创建一个contact并将其附加到父级account 我更新插入一条带有 null 的记录contactid
dynamicscrm
azuredatafactory
commondataservice
xrmtoolbox
1
2
3
4
5
6
7
»