我遇到了一个需求,其中第一部分涉及读取Azure blob存储中的blob文件(即csv),并根据少数列的不同组合将文件数据拆分为多个文件。该要求的第二部分涉及将多个文件写入/上载到单独目标文件夹中的Azure blob存储。
我能够将blob文件拆分为多个文件,但无法将分区文件写入/上载到azure blob存储。是否有可能将文件写入blob存储。我们将非常感谢您的帮助。
是否考虑过使用Azure数据工厂管道来按计划触发ML实验。这可以用来创建多个输出文件,并将它们输出到blob。https://docs.microsoft.com/en-us/azure/data-factory/concepts-pipelines-activities您可以尝试使用多个容器来存储您的输出:https://docs.microsoft.com/en-us/azure/storage/blobs/storage-python-how-to-use-blob-storage