FME教程：文件批量提取工具，从大量文件中批量提取指定文件的实现思路，文件批量复制

GIS工具开发

已于 2024-05-19 01:57:05 修改

阅读量5.9k

点赞数

分类专栏： FME 文章标签： FME 文件复制提取批量工具

于 2022-09-26 15:00:51 首次发布

本文链接：https://blog.youkuaiyun.com/tylkhx/article/details/127053550

版权

FME 专栏收录该内容

36 篇文章

订阅专栏

在工作中可能会遇到从大量文件复制部分文件处理的需求，比如从数万份文件中，找到数千份文件并复制出来。今天便利用FME实现一个文件夹中有大量的子文件夹，要从中批量复制指定的子文件夹数据出来，并保持子文件夹下内部的目录层级不变。关注薇信工众号：“GIS工具乐园”，回复“FME”，获取模板及示例数据下载链接。

☛ FME系列视频教程推荐 ☚

全文查看链接：文件批量提取工具，从大量文件中批量提取指定文件的实现思路

一、实现效果

实现由txt文件指定要提取的子文件夹名，然后从源文件中批量提取指定的子文件夹数据，当txt文件指定要提取的子文件夹名在源文件中没有找到时，将相应的子文件夹名输出到提示信息中，便于核对处理，详情见下图，

图1 实现效果

二、实现过程

1.数据读取

调用文件读模块和text读模块，分别读取源文件信息和要提取的子文件夹名，如下图所示。

图2 源文件

图3 要提取的子文件夹名

图4 读取数据

2.文件路径标准化

由于在使用的过程中，不同的电脑读取的文件路径的分隔符存在差异，可能出现“/”或“\”，为了便于后续对文件路径信息的提取出来，需要预先对文件路径的分隔符进行标准化处理，统一替换成“/”，如下图所示。

图5 文件路径标准化

3.提取子文件夹名及合成输出路径

因为是要根据txt文本中指定的子文件夹名来提取文件，故需要从读取到的文件路径中提取子文件夹名出来，用于后续挂接使用。这里使用了StringReplace、AttributeCreator、AttributeSplitter、AttributeManager等转换器进行子文件夹名及合成输出路径，如下图所示。

图6 提取子文件夹名及合成输出路径

4.分离出要提取的文件

使用FeatureMerger转换器将文件与txt文本中的子文件夹名进行挂接分离出来要提取的文件，如下图所示。

图7 分离出要提取的文件

5.复制文件

使用PythonCaller转换器，将要提取的文件复制到输出目录，代码如下。

图8 复制文件

6.输出提示信息

因为txt文本可能有部分指定的子文件夹在源文件数据中不存在，为便于核对检查，故将第四步在挂接中，未能挂接上文件的数据单独输出到txt文件，如下图所示。

图9 输出提示信息

三、工具使用

工具使用时，按图10所示选择相应的选项，点击“运行”按钮即可，输出成果如图11所示。

图10 运行界面

图11 输出成果

四、总结

在实际工作中遇到的文件提取情形是多种多样的，有匹配文件名的，有根据shp数据中的多个字段匹配的，还有输出目录层级要按特定层级组织的……等等，虽然具体要求不一样，但是其核心都是一样的，可以参照本文案例，先找到源文件与要提取的数据信息之间的关联关系，并利用关联关系进行挂接，然后根据实际要求组装好输出路径，最后复制文件即可。关注微行公众号：“GIS工具乐园”，持续更新开发技巧分享哦。