[shell学习和积累]遍历文件及嵌入二进制文件

最新推荐文章于 2024-05-27 14:38:23 发布
原创 最新推荐文章于 2024-05-27 14:38:23 发布 · 916 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#shell #二进制 #脚本 #c++

本文介绍了一种使用Shell脚本从大量Log文件中提取数据并将其存储到MySQL数据库的方法。该过程涉及利用C++来处理字符串，最终生成用于插入数据库的SQL语句。



         目的
      为了对大量log文件进行数据提取，并存入mysql，所以用了shell脚本进行。其中字符串处理部分有c++完成
       
        下面是代码
       
        其中./createInsertSql得位置就是 二进制文件 得填充位置。
       （初学，有更好的建议，请指点哈）
使用shell和awk批量处理二进制数据
liujian88的专栏
12-10 5009
接到个任务，需要批量处理10万个HDCP key的二进制文件，需要把前320个字节的十六进制的和相加，并且用65536减去和，然后将所得结果写到二进制文件特定的位置（具体是0x140h和0x141h),高位在前，低位在后 如下图1红色部分所示。
如何将二进制文件嵌入Linux shell 脚本中
weixin_42236449的博客
08-12 1581
将二进制文件嵌入Linux shell 脚本中
shell脚本中嵌入二进制文件
smile的专栏
02-28 6820
<br />最近有人问我，一个集群监控软件的安装文件特别“诡异”，说脚本里有“乱码”却能执行，是怎么回事？我看了才发现这个东西原来是典型的脚本嵌套代码的模式，这里就讲讲吧。反正好久没写东西了。<br /><br />某些比较“拽”的单位在发布Linux软件时以一种特殊的形式发布，即在shell脚本中嵌入二进制字符，从而使脚本变得极其诡异，让某些初学者感觉惊奇。其实，这个原理戳穿了非常简单，就是在运行脚本时将二进制代码导出成一个程序，再执行之就可以。（不过这种行为其实，是违反Linux社区的精神的，像我这种人
shell脚本读写二进制文件
最新发布
江上清风山间明月的博客
05-27 1819
Flutter是一个由Google开发的开源UI工具包，它可以让您在不同平台上创建高质量、美观的应用程序，而无需编写大量平台特定的代码。这些示例展示了如何在Shell脚本中读取和写入二进制文件的基本方法。在Shell脚本中处理二进制文件时，可以使用一些常用的命令和工具来读取和写入二进制数据。可以组合使用上述工具来实现更复杂的操作。例如，读取文件中的部分数据，进行修改后再写回文件。等命令来读取二进制文件的内容并以可读的格式显示。命令来读取和修改二进制文件的特定部分。命令来写入二进制数据到文件。
python循环遍历文件夹_python - 读取二进制文件并循环遍历每个
weixin_39927408的博客
11-23 323
在Python中读取二进制文件并在每个字节上循环Python 3.5中新增的是file.read1模块，该模块具有一种特殊的方法，可以将文件作为字节读入，从而允许我们迭代字节。 我认为这是一个体面的（如果快速和肮脏）答案：import pathlibfor byte in pathlib.Path(path).read_bytes():print(byte)有趣的是，这是提到file.read1的...
把shellcode转为2进制,比如shell[]="\xXX"此种形式的文件将字符\xXX转换为2进制文件
07-08
在给定的压缩包文件`211324.exe`中，如果它包含了一个转换后的Shellcode二进制文件，那么这个文件可能是一个Windows可执行程序，里面嵌入了Shellcode，等待在适当的条件下触发执行。不过，分析具体的内容需要使用反...
pdfium-binaries：of PDFium的二进制分发
01-30
在C、C++或CShell等编程语言中，可以直接调用这些二进制文件提供的API来处理PDF文档。 PDFium起源于Google的Chromium项目，其目的是为了实现一个高效且跨平台的PDF阅读和解析引擎。这个库支持多种操作系统，包括...
Groovy 1.8.0二进制版本发布
其二进制包中通常包括 groovysh（交互式 shell）、groovyConsole（图形化编辑器）、Groovyc 编译器、Grab 依赖管理工具等实用程序，极大地方便了学习和调试过程。特别是 Grab 功能，基于 Grape（Gradle Ant Project ...
使用stitch工具通过source指令合并Shell脚本
这意味着stitch是以函数式的方式封装其核心逻辑：给定一个入口脚本文件，它会自动遍历所有被`source`引用的子文件，并按深度优先或广度优先的顺序进行内容嵌入。在整个处理流程中，stitch必须维护一个已处理文件的...
文件系统、
weixin_50866517的博客
04-24 1398
文件系统文件文件命名文件结构文件类型文件访问文件属性文件操作目录一级目录系统层次目录系统层次目录系统目录操作文件系统的实现文件系统布局引导块超级块空闲空间块碎片inode文件的实现连续分配链表分配使用内存表进行链表分配inode目录的实现共享文件共享文件日志文件系统日志文件系统文件系统的管理和优化磁盘空间管理块大小记录空闲块磁盘配额文件系统备份物理转储和逻辑转储文件系统的一致性文件系统性能高速缓存块提前读减少磁盘臂运动磁盘碎片整理 文件 文件命名 文件结构 文件类型 文件访问 文件属性 文件操作 目录 一
在shell脚本中嵌入二进制可执行程序
cvMat的博客
06-18 3858
**思路：**将二进制可执行程序添加到shell 末尾，运行shell 时，在将该二进制可执行程序导出来，然后执行导出的二进制程序。 先准备shell 脚本 [root@liumin 123]# cat test.sh #!/bin/sh prog_name="./test.exe" rm -f ${prog_name} sed "1,/^### END OF THE SCRIPT###/d" "$0" > ${prog_name} #导出二进制程序 chmod u+x ${prog_na
python读二进制文件遍历_使用python反向读取二进制文件
weixin_28807463的博客
01-30 569
从这个问题中我可以看出代码中有几点需要改进。首先，while循环在Python中很少使用，因为使用for循环或使用一些内置函数几乎总是有更好的方法来表达相同的内容。在我想代码纯粹是为了培训目的。否则，我会首先问真正的目标是什么(因为知道了问题，更好的解决方案可能与第一个想法大不相同)。在这里的目标是获得seek的位置。你知道大小，你知道块大小，你想倒退。Python中有一个内置的生成器，名为ran...
bash命令读取二进制文件并转化为hex
zhoudekuai的专栏
01-02 4414
在无操作系统支持的项目中要存储一个xml文件的压缩文件供外部读取，所以想把压缩文件先生成数组再由gcc编译。 #!/bin/sh zip a.zip a.xml echo "unsigned short xml[] = {" > a.c hexdump -v sourcefile | cut -d“ “ -s -f 2-16 | sed s/[0-9a-f][0-9a-f][0-9
sed 功能详解
wanglei_11的博客
02-27 688
sed 功能详解
SHELL脚本内嵌入二进制可执行程序
wy
07-09 2449
# 在SHELL脚本中可以嵌入二进制可执行程序 # 思路：将二进制可执行程序添加到SHELL末尾，运行时再将该二进制可执行程序导出，然后执行导出的二进制程序 # ---------------------------------- Example # 先准备SHELL脚本 [root@localhost ~]# cat test.sh #!/bin/sh prog_name="./test.exe" sed "1,/^# END OF THE SCRIPT/d" "$0" > ${prog_n.
shell 脚本实现二进制文件数据的异或(xor)操作
bruce_wen的专栏
02-04 5115
源码： #!/bin/sh#get file lengthfile_len=`ls -l $1 | awk {print $5;}`> $3count=0until [ "$count" -ge "$file_len" ]do        #get one byte data        temp_buffer=`hexdump  -x -s $count  -n 1
Linux的Shell
weixin_37709708的博客
05-25 585
Linux将shell独立于OS核心程序之外，使得用户可以在不影响OS本身的情况下进行修改，更新版本或添加新的功能。 OS的shell介于OS和Kernel之间，负责将user命令解释成OS可以接受的指令，然后由OS来执行这些指令，并将OS执行的结果以user可以了解的方式反馈给user。 在Shell中，ls命令下Tab键可以进行命令补全，shell会自动查找出最符合的命令名称。 history命令可以查看当前的命令记录。如果要查看最近执行的命令，则可以使用history n命令，n表示需要查看的最近执.
shell脚本读写文件/case/二进制处理/循环/参数/字符分割等基本操作
cy413026的博客
11-10 5034
目录 1.输入参数处理 1.1 $1~$9 加shift 1.2getopt 2.读写文件 2.1 读写文本文件 2.1.1读文本 2.1.2 写文本 2.2读写和显示二进制 2.2.1 写二进制 2.2.2显示二进制 ​ 2.2.3 读二进制 3.字符串的分割 合并 1.输入参数处理 在shell中可以用$1~$9来get 参数超过9个参数需要用shift，也可以用read命令get参数，也可以用getopt解析参数。 如果要实现如下参数解析： test.sh -i a.
shc：将shell脚本封装为二进制程序
是歪门哥啊
03-13 1831
脚本的好处是便捷、高效，拿起来就可以写，写完就能跑，都不用编译 但坏处也显而易见，一些敏感的、不想让外人知道的东西都是明文写在里面的，所以，在这推荐一款神奇的脚本封装程序——shc ： 作者是位长得有几分像皮克的帅气西班牙人 下载地址 下载后解压，一顿简单操作即可使用： tar xzvf shc.tar.tgz cd shr/ make && make install 贴...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值