xml - 使用 Azure 数据工厂的 XML 文件

Question

我已使用 Azure 数据工厂中提供的最新 xml 文件系统支持功能，使用复制活动将 2 GB xml 文件转换为 csv，但最终导致内存异常。但是，如果我使用较小的文件，例如：500 mb 的文件，则该文件会在 1 小时内得到处理，而没有任何并行性 a 或 DIU。即使我使用并行度、DIU 或块大小的所有排列组合，2 GB 文件也不会被转换？难道我做错了什么。如果有人可以提出解决方案，那将非常有帮助。

问候，桑迪普

Answer 1

如果您遇到标准复制活动的问题，我建议您尝试使用数据流将 XML 转换为 CSV。我还建议您提供内存优化的集成运行时来执行您的数据流活动。