命令之美｜如何创建一个 100M 的大文件？

已于 2024-10-11 14:51:30 修改
阅读量711 收藏 5
点赞数 13
分类专栏： 测试开发 文章标签： 程序人生 命令模式 测试工具
于 2024-10-11 11:38:51 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/streamlong/article/details/142849789
版权

目录

第一种：dd 命令

第二种：head 命令

第三种：truncate 命令

在日常工作中，总会遇到各种各样的场景，要准备各种各样特征的测试数据。现在有一个场景，需要准备一个100M的大文件，你会怎么去实现呢？

一般拿到这类需求，首先会默认理解和业务相关联，针对这类情况的常规思路不外乎是： 

  • 如果业务侧有，请业务侧直接提供。 

  • 如果业务侧没有，便会基于业务文件特征通过 多个文件合并 或者 填充几张高清大图 / N多页的文本 来实现。

抛开业务特性，对到文件本身来说，除此之外呢，还有没有其他高效办法呢？答案肯定是有的，可以通过 命令行的模式来生成。

第一种：dd 命令

## 创建一个 2M 大小的文件
## 特殊设备文件除了 /dev/zero 还有 /dev/random、/dev/urandom
dd if=/dev/zero of=largefile.txt bs=1M count=2
dd if=/dev/random of=cc3.txt bs=1M count=2

## 复制文件内容，从 a 文件到 b 文件,
dd if=a.txt of=b.txt bs=1M

第二种：head 命令

## head 命令通常用于显示文件的开头部分，这里是非标准用法
## 102400 单位是字节
head -c 102400 /dev/urandom > largefile2.txt

第三种：truncate 命令

## truncate 命令是一个用于改变文件大小的命令行工具，比 dd 更快更高效
truncate -s 5M largefile3.txt

最后说明下，因为不同的操作系统环境，命令及实现可能存在些许不同，所以请以自身环境为主，寻找适用自身环境的命令。笔者这里是用 Mac 电脑完成的测试，这里有 2 点注意事项提醒下大家：

  1. 未提前创建好目标文件，通过命令行创建的文件，虽然文件类型正确，大小可达到，但是用常用的文档工具，比如 microsoft word、wps 等打不开，提示无法识别

  2. 已提前创建好的目标文件，通过命令行来完成大小的设置，这种情况下，大小可正常达到，且用常用的文档工具，是正常打开。

今日分享到这里就结束啦，大家可以去体验玩一玩，感受感受。欢迎一键三连，😄

Linux 系统资源监控命令：btop，界面更精美！
网络技术联盟站
04-21 147
btop它旨在为 Linux、FreeBSD 和 macOS 等系统提供一个现代化、直观的命令行监控界面。相比传统的top和htopbtop使用丰富的颜色和图形化元素展示信息，支持实时监控 CPU、内存、磁盘、网络和进程等。实时监控：显示 CPU 使用率、内存占用、磁盘 I/O、网络带宽等信息。直观界面：采用颜色编码和图形化布局，提升信息可读性。交互性强：支持键盘和鼠标操作，方便用户导航和进程管理。高度可配置：允许用户自定义主题、布局和显示内容。跨平台支持：适用于多种操作系统，灵活性高。进程管理。
Linux命令之系统五大负载（监控脚本及问题详解）
weixin_53560205的博客
10-25 4451
文章目录一、I/O1.监控脚本2.I/O过高异常如何解决二、网络流量1.监控脚本2.网络流量异常如何解决三、硬盘1.监控脚本2.硬盘满了如何解决df -h四、cpu1.监控脚本2.cpu满了如何解决五、内存1.监控脚本2.内存满了如何解决free -m六、常用的查看系统硬件资源命令 一、I/O iostat iotop 1.监控脚本 #!/bin/bash echo "指定设备(/dev/sda)的统计信息" # 每秒向设备发起的读请求次数 disk_sda_rs=`iostat -kx | gre
快速创建大文件
hhlg79的博客
12-13 1526
Linux命令 $ fallocate -l 10G bigfile $ truncate -s 10G bigfile $ dd of=bigfile bs=1 seek=10G count=0 ##创建完成后，可以将它们进行格式化，并当做文件系统进行挂载。我格式化成ext4之后，可以看到superblock、block group等信息，挂载之后使用df -h可以看到这个分区的大小是：前者10G，后者30G。 ##而且这个大文件所在目录的文件系统的空间使用率几乎没有增加（只增加了100+M），我认为这
快速生成大文件
帐前卒 专栏
08-19 1694
<br />在linux下如果不考虑断电系统重启等其他原因可以使用ftruncate()函数，这个函数输入参数为file descriptor 和 offset, 这个函数在unistd.h中，windows一般是用不了这个的。<br />另外使用文件名得到文件描述符的方法就是int fileno(FILE*); 注意之后别忘了fclose(),下面的代码里忘记写了。<br />#include<iostream> #include<cstdio> #include<unistd.h> using n
Linux下快速创建大文件的4种方法总结
hlsxjh的博客
04-12 968
默认情况下，如果请求的输出文件不存在，truncate 命令将创建新文件，我们可以使用 -c 选项来避免创建新文件。dd 命令是实际写入硬盘，文件产生的速度取决于硬盘的读写速度，根据文件的大小，该命令将需要一些时间才能完成。fallocate 命令则不会创建稀疏文件，而且它的速度更快，这也是我比较推荐使用 fallocate 创建大文件的原因。fallocate 命令是我比较推荐的创建大文件的方法，因为它创建大文件的速度是最快的。命令将一个文件缩小或者扩展到所需大小，使用 -s 选项来指定文件的大小。
制作一个大文件
weixin_33814685的博客
03-21 561
dd if=/dev/zero of=/a.txt bs=1M count=100of是制作文件名及路径 bs表示大小 count表示重复多少次这个制作成的文件 100M 转载于:https://blog.51cto.com/13588598/2366594
window创建一个100MB的大文件文件里面有内容具体怎么创建
qq_33192454的博客
01-27 1666
fsutil和echo方法适合快速创建一个指定大小的文件，并在文件开头写入内容。PowerShell 脚本可以更精确地控制文件大小和内容填充，适合需要高精度的场景。如果你需要进一步的帮助，或有其他要求，请告诉我！window命令生成一个rar文件在 Windows 上创建.rar文件，通常需要使用压缩软件如 WinRAR，因为 Windows 自带的工具不支持直接创建.rar文件。以下是使用 WinRAR 创建.rardd和echo方法适用于创建一个包含特定内容的大文件。fallocate。
大文件制作
tanyz114的博客
06-15 471
测试需要大文件，但往往手上没有合适的，重新下载又不实际且费时，这是可以使用window自带的工具进行生成，命令如下 说明： *fsutil file createnew ：生成一个指定大小的文件* *D:/xx.txt : 表示文件，路径、名称、类型可自定义* *1024 ：表示文件大小，单位为bit,可自定义* fsutil file createnew D:/xx.txt 1024 ...
共享云硬盘并发读写之集群文件系统
企业实战系列集 ●●● https://ximenjianxue.blog.youkuaiyun.com
07-14 1180
注意： GFS2 文件系统配置为集群文件系统时，必须确定该集群中的所有节点都可访问共享存储。clvmd 守护进程在每个集群计算机上运行，并更新 LVM 元数据，让集群的每个计算机上的 LVM 信息都保持一致，用 CLVM 在共享存储上建立的逻辑卷对于访问过该共享存储的计算机都是可视的。RHCS的集群中资源的配置需要修改其主配置文件/etc/cluster/cluster.xml实现，其仅安装在集群中的某一节点上即可，而cman和rgmanager需要分别安装在集群中的每个节点上。在于它们对存储空间的。
鸿蒙内核源码分析(文件概念篇) | 为什么说一切皆是文件
鸿蒙开发知识记录
08-22 1101
不说清楚什么是文件就说不清楚文件系统,更说不清楚内核是如何管理和为什么要这么来管理文件的。现代操作系统为解决信息能独立于进程之外被长期存储引入了文件,将文件抽象成一个宽泛的概念,把文档、目录（文件夹）、键盘、监视器、硬盘、可移动媒体设备、打印机、调制解调器、虚拟终端，还有进程间通信（IPC）和网络通信等输入/输出资源都看成文件来统一操作.因为它们都具有共同的读和写共性,一旦具有普适性,可以抽象出理想的模型,通过这个模型，设计工作就会变得简单而有序，API的设计可以化繁为简。
Linux作业新建一个100M大小的分区
06-08
新建一个100M大小的分区
大文件生成器
03-19
可以快速的生成大文件，可以快速的生成大文件可以快速的生成大文件可以快速的生成大文件可以快速的生成大文件
文件生成器
04-27
可以根据设置从而生成随机文件 用Qt写的工具,希望能帮得上大家
dd命令快速生成一个大文件
楼中望月
11-07 1038
有时候测试需要生成一个临时的大文件，可以使用dd命令来完成 xxx:~/test/mnt/sdcard/capture$ dd if=/dev/zero of=test.log bs=1M count=100 100+0 records in 100+0 records out 104857600 bytes (105 MB, 100 MiB) copied, 0.0641587 s, 1.6 G...
Linux命令快速生成大文件、split分割文件、head截取文件
captain
06-08 1297
该命令将会生成多个文件，文件名以prefix_开头，以aa、ab、ac等字母结尾，每个文件大小为1MB。该命令将会生成多个文件，文件名以prefix_开头，以aa、ab、ac等字母结尾，每个文件大小为1MB。其中，OPTIONS为可选参数，FILENAME为原始文件名，PREFIX为分割文件的前缀。其中，OPTIONS为可选参数，FILENAME为原始文件名，PREFIX为分割文件的前缀。of表示输出文件（要生成的文件），这里生成的文件名为“testfile.txt”。使用dd命令可以快速生成大文件。
生成大文件
zhaofuguang的专栏
10-18 538
int _tmain(int argc, _TCHAR* argv[]){ string sLocate; float dMinSize = 0.01,dMaxSize = 0.03;    int nNum = 10; printf("输入文件存放地址（以'\\'结尾）、文件个数、大小范围（浮点数,单位为GB）\n"); cin >> sLocate >> nNum >> dMinSize >>
创建大文件
永远相信,美好的事情即将发生
11-23 159
生成一个1000M的test文件，文件内容为全0（因从/dev/zero中读取，/dev/zero为0源）。但是这样为实际写入硬盘，文件产生速度取决于硬盘读写速度，如果想要产生超大文件，速度很慢。也可后跟k、m、g、t、p、e来指定单位，分别代表KB、MB、GB、TB、PB、EB。此时创建的文件在文件系统中的显示大小为100000MB，但是并不实际占用block，因此创建速度与内存速度相当。1）count=0 表示读写 0次，指定生成文件的大小为0M。2）指定文件超出指定大小则超出的数据将丢失。
使用命令行创建任意大小文件的方法
qq_38913292的博客
08-18 3801
测试技巧
shell脚本循环创建文件
最新发布
05-01
<think>好的，我现在要帮用户解决如何用Shell脚本通过for循环批量创建文件的问题。首先，我需要回顾用户之前的提问和之前的回答，看看有没有相关的信息可以参考。用户之前提到了使用for循环合并文件和批量创建用户，现在想了解如何批量创建文件。 用户提供的引用中有三个例子：合并txt文件、批量创建用户和使用for循环创建多个文件。特别是第三个引用提到了使用for循环和awk来创建文件，但用户现在可能想要更基础的实现方法，而不是复杂的awk脚本。因此，我应该专注于基本的for循环结构，结合文件创建命令。 用户上一次的问题是关于Shell脚本循环与top命令的结合应用，但现在的问题转向了文件创建。我需要确保回答结构清晰，分步骤说明，同时符合用户提到的系统级指令，比如使用正确的中文回答、LaTeX格式的数学表达式等，但这里可能不需要数学公式，主要关注代码结构。 接下来，我需要考虑用户可能的实际需求。批量创建文件通常用于自动化测试、生成日志文件、初始化项目结构等场景。因此，提供多种不同的循环示例会有帮助，比如按数字序列、按日期、按列表内容等，满足不同情况下的需求。 另外，用户可能对权限、覆盖提示、动态文件名生成等细节感兴趣。例如，如何避免覆盖已有文件，如何生成带有时间戳的文件名，或者如何根据输入参数创建文件。这些进阶技巧能提升脚本的实用性。 还要注意代码的正确性和最佳实践，比如使用大括号扩展{1..N}的效率，循环中的错误处理，以及使用touch命令创建文件。同时，需要提醒用户注意循环中的变量扩展和引号使用，避免文件名中有空格导致的问题。 最后，生成相关问题，帮助用户深入学习和解决可能遇到的后续问题。例如，如何添加内容到文件，如何处理文件名中的特殊字符，如何批量修改文件权限等。这些问题可以引导用户进一步探索Shell脚本的功能。</think>### Shell脚本通过for循环批量创建文件实现指南 根据您提供的引用案例[^1][^2][^3]，结合Shell脚本循环核心原理，以下是6种典型实现方案： --- #### 一、基础数字序列模式 ```bash # 创建file1.txt到file5.txt for i in {1..5} do touch "file${i}.txt" # 使用touch命令创建空文件 done # 带前缀和固定后缀 prefix="log_" for num in $(seq 10 15) # 生成10-15序列 do echo "创建时间: $(date)" > "${prefix}${num}.log" done ``` *特性：* 使用大括号扩展{1..N}效率高于`seq`命令[^1] --- #### 二、动态内容生成模式 ```bash # 根据列表内容创建文件 city_list=("beijing" "shanghai" "guangzhou") for city in "${city_list[@]}" do cat <<-EOF > "${city}_data.csv" City,Population,GDP $city,2154万,5030亿美元 EOF done ``` *输出效果：* 生成带结构化数据的CSV文件 --- #### 三、日期序列模式 ```bash # 创建最近3天的日志文件 for day in $(seq 0 2) do filename=$(date -d "$day days ago" +"%Y%m%d").log touch "access_${filename}" done ``` *生成示例：* access_20230720.log, access_20230719.log, access_20230718.log --- #### 四、条件判断增强版 ```bash # 带存在性检查的创建 target_dir="/var/reports" mkdir -p "$target_dir" for i in {1..8} do filepath="${target_dir}/report_${i}.md" if [ ! -f "$filepath" ]; then touch "$filepath" echo "创建新文件: $filepath" else echo "文件已存在: $filepath" >&2 fi done ``` --- #### 五、参数化批量创建 ```bash #!/bin/bash # 用法: ./create_files.sh 前缀 起始编号 结束编号 prefix=$1 start=$2 end=$3 for ((i=start; i<=end; i++)) do filename="${prefix}_$(printf "%03d" $i).txt" # 编号补零 echo "自动生成内容 $i" > "$filename" done ``` *执行示例：* `./create_files.sh data 5 12` 生成data_005.txt到data_012.txt --- #### 六、模板文件复制模式 ```bash # 根据模板批量生成配置文件 template="app.conf.template" for env in "dev" "test" "prod" do sed "s/{{ENV}}/$env/g" "$template" > "app_${env}.conf" done ``` *模板示例：* 包含`{{ENV}}`占位符的配置文件模板 --- ### 进阶技巧 1. **并行创建加速**（GNU parallel）： ```bash parallel touch report_{}.txt ::: {A..Z} ``` 2. **动态内容注入**： ```bash for i in {1..7}; do echo "第$i次测试 $(date +%s)" > "test_$i.log" done ``` 3. **权限控制**： ```bash for file in data_*.csv; do chmod 600 "$file" chown www-data:www-data "$file" done ``` --- ### 错误处理建议 1. 在循环开始前添加`set -euo pipefail`进行严格错误检测 2. 文件名包含空格时使用双引号包裹变量：`"$filename"` 3. 使用`mktemp`命令创建临时文件时确保唯一性 [^1]: 大括号扩展语法参考自Bash手册的Brace Expansion章节 [^2]: 参数化脚本设计模式参考Linux系统管理最佳实践 [^3]: 并行处理方案基于GNU Parallel工具文档
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值