我在 Azure“数据工厂”中设置了一个管道,目的是从存储中获取平面文件并将它们加载到 Azure SQL DB 中的表中。
此管道的模板指定我需要一个开始和结束时间,本教程将其设置为 1 天。
我试图理解这一点。如果它是 Linux 中的 CRON 作业或 Windows Server 中的计划任务,那么我只需告诉它何时开始(即每天早上 6 点),不管它需要多长时间才能完成。
这让我想到了几个相关的问题:
- 为什么我需要指定结束时间?
- 如果我不知道运行需要多长时间怎么办?
- 如果将来设置得太远,是否会冒数据管道无法及时完成的风险?
- 如果我设置得太早,管道会破裂吗?
- 为什么它被硬编码为日期而不是频率(即它说使用这种格式 - “2014-10-14T16:32:41Z”)
我发现了一个先前的问题,它对如何进行频率而不是硬编码日期有所了解,但是我上面的问题仍然没有得到解决方案的回答。