批处理任务是否可以读取文件共享上的文件？

Question

我有一个文件共享（你猜对了）很多文件。我想创建一个批处理作业，它将挂载这个文件共享和读入每个文件并且并行处理每个文件（每个作为批处理任务）。

这是可能的与蟒蛇和蔚蓝批次？展示如何做到这一点的任何教程都很棒。

Answer 1

您可以通过以下两种方法之一来完成此操作。请注意，以下内容仅适用于Linux。 Windows用户需要使用User Identities稍微不同的方法。

1. 使用池的StartTask对象在计算节点级别挂载文件共享。请参阅Azure File documentation关于如何在Linux上为您的发行版执行此操作。启动任务可以是：
   • 直接挂载文件共享，即调用mount -t cifs ...。这将通过重新启动工作，因为StartTask每次重新启动时都会重新运行。
   • 修改/etc/fstab以将条目添加到自动安装。请注意，您必须使此操作具有幂等性，因为StartTask每次重新启动时都会重新运行。
2. 使用作业的JobPreparationTask对象在作业级别挂载文件共享。您在此处指定的命令仅对该作业下的每个任务运行一次。您应该也可以指定作业的清理份额JobReleaseTask至unmount。

确保，在任何你选择的路径，即适当抬高权限给该过程可以进行安装或修改/etc/fstab任务（通常是超级用户）等。

如果使用第一个选项，那么挂载将始终可用于计算节点，无论是否需要它的作业都在该节点上运行。每种方法都有优点和缺点。您的要求，无论是合规还是技术（例如）都可以帮助您选择。