adfbinaryloader:adf示例项目演示如何在prem文件夹位置获取通用文件并将其加载到Azure存储中 源码

创建一个“自动加载器”以从本地摄取到Azure存储 在云中启动任何数据解决方案时,首先要开始的工作之一就是将数据加载到Azure存储中。一个常见的任务是创建一个流程,以允许用户将数据上传到Azure中以自动进行进一步的下游分析。可能是任何东西– Databricks,SQL,甚至直接是Power BI。想象一下一个场景,其中有一个Power BI报表可以从本地刷新,而我想通过简单地将文件移动到Azure来加快每日刷新的速度。今天,我们将在Azure中创建一个通用文件加载器,该文件加载器将复制到本地的文件共享中的所有内容加载到Azure存储Blob中。处理流程如下所示: 先决条件: Windows服务器(本地或Azure)具有文件共享,该文件共享使用要上传的文件列表创建并安装了自托管的集成运行时 创建一个Azure数据工厂实例 流水线仅由几个活动组成:“获取元数据”活动和每个循环的“复制数