![如何配置 Azure 数据工厂来处理更大的文件?](https://linux22.com/image/787549/%E5%A6%82%E4%BD%95%E9%85%8D%E7%BD%AE%20Azure%20%E6%95%B0%E6%8D%AE%E5%B7%A5%E5%8E%82%E6%9D%A5%E5%A4%84%E7%90%86%E6%9B%B4%E5%A4%A7%E7%9A%84%E6%96%87%E4%BB%B6%EF%BC%9F.png)
我有一个 Azure 数据工厂管道,它从 Blob 存储中读取 100 MB CSV,并将其插入具有大量空间 (200 GB) 的 Azure SQL DB。我还有一个相同文件的 1 MB 版本,只是删除了大部分数据,作为测试版本。
当我使用完整文件运行管道时,出现错误:DF-Executor-InternalServerError。它没有提供其他有用的信息。
但是,当我运行简短版本时,它运行得很好。结合关于此错误的其他一些讨论,我认为问题只是我需要增加执行/计算机资源和/或超时时间。我只是不确定我应该在链中的哪个位置执行此操作。
有人遇到过类似的事情吗?