从Azure Data Lake向SQL Server提取数据的最佳方法

Question

我正在寻找一种最佳的编程方式，将数据从Azure Data Lake提取到MSSQL数据库，该数据库安装在Azure中的VM上。

目前我正在考虑以下选项：

• Azure Data Factory
• SSIS（Using Azure Data Lake Store Connection Manager）
• 用户定义的输出器Example1，Example2
• 自定义C＃代码，用于读取Azure Data Lake数据并将其插入SQL Server DB

我错过了其他任何好方法吗？

Answer 1

数据工厂v2（目前处于公开预览中），还支持hosting SSIS为您提供数据工厂和ssis选项。

对于许多方案而言，并不一定是个好主意，但Azure Logic Apps同时具有data lake store connector和SQL Server connector，这在诸如按计划编写大量小文件或触发器等方案中非常有用

您也可能不需要完全使用c＃而是使用PowerShell，数据存储库和SQL服务器都有powershell模块。