创建具有多个链接服务的通用数据工厂

杰克

用例:创建一个通用数据工厂,该工厂可以从不同的 Azure Blob 容器中读取数据,这些容器具有平面文件到 Azure SQL 中。我创建了一个数据管道,它使用存储过程来填充 Azure SQL 表。

问题:我遇到的问题是我想从我的代码中执行这个数据工厂并动态更改数据库和 blob 容器并使用这个新参数执行相同的数据工厂。Azure SQL 端的表名将保持不变,而 Blob 存储中的文件名也将保持不变。更改将是预先知道的容器或容器内的文件夹名称。

请帮助我或指出什么可以帮助我实现这一目标,以及是否可以实现这一目标。

布山

您需要使用参数化数据集和链接服务。在您的数据工厂管道上定义参数(您希望从代码中传递,例如容器名称或文件夹名称、SQL azure 的连接字符串和 blob 存储的连接字符串)。定义后 - 您需要将这些值一直向下传递,直到链接服务

即像这样的管道参数>数据集参数>链接服务参数

在此处输入图片说明

本文收集自互联网,转载请注明来源。

如有侵权,请联系 [email protected] 删除。

编辑于
0

我来说两句

0 条评论
登录 后参与评论

相关文章

为 Azure 数据工厂链接服务创建多个环境参数

具有多个构造函数签名的C ++通用工厂?

两个或多个数据工厂之间的链接服务

如何使用Zenject创建具有多个参数的工厂?

创建具有多个链接的url文件

具有通用输出的 Kotlin 工厂类

如何从一个通用数据集创建具有不同类类型的多个数据集?

如何创建具有多个通用类型参数的类型

Terraform:数据工厂中的 Blob 链接服务

具有不同返回类型的通用数据服务

创建具有多个记录的数据框

在mvc中访问具有多个通用数据的对象

在Azure数据工厂中创建SnowFlake链接服务时出现索引超出范围错误

创建具有通用数据类型的列?

具有通用包含的 EntityFramework 通用服务

Visual Studio 2015 SQL Server项目。管理具有对多个数据库的引用的链接服务器

每个键具有多个数据元素的链接列表

具有多个链接到同一模型的数据建模

具有通用服务的服务结构

创建具有依赖项的多个子项的服务

使用DryIoc创建具有多个服务注册的单例

在Azure数据工厂中动态更改链接的服务/数据集

创建具有多个数据框的熊猫数据框

具有未知实现类的通用工厂

具有通用接口实现的Java工厂继承

具有抽象工厂的数据访问对象模式,通过泛型类型创建

AngularDart:具有多个集合的内存数据服务

具有多个数据的Angular 5共享服务

如何自动检查 Azure 数据工厂链接服务的连接