一次解决 青龙面板互助、容器ck数量上限 Argument list too long报错问题的教程

已于 2022-02-24 18:56:33 修改
阅读量1.8w 收藏 30
点赞数 2
CC 4.0 BY-SA版权
文章标签： 容器 服务器 linux
于 2021-12-18 17:31:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/FishBean/article/details/122014826

交流群QQ群550894783

这篇文章已启用，看文章：

青龙互助+轮换工具人+Argument list too long问题解决 教程_FishBean的博客-优快云博客

青龙面板+xdd-plus+若兰 全套教程在另一个文章发布啦 有需要的可以看我主页。

1. 针对青龙v2.10.8版本以前教程  在群文件下载jdCookie.js task_before.sh 和 code.sh 三个文件 （QQ群550894783）（文件不需要改动 ）

三个文件都放在 /root/容器名/config 文件夹下

2. 加定时 在青龙面板添加任务

点击确定就可以啦

2.青龙v2.10.8及以后版本教程

1.把文件code.sh、task_before.sh 、jdCookie.js 复制 到/ql/config目录下

2.继续把jdCookie.js 复制到 /ql/deps 目录下，确保更新脚本库后，魔改版本会被覆盖过去（注意把映射目录增加 ./data/deps:/ql/deps） 参考教程在docker容器上添加新的映射卷 - 宋海宾 - 博客园 (cnblogs.com)

3.去青龙后台添加任务 命令填写：task /ql/config/code.sh 其他自定义
 

其他
出现code.sh线程过多，等几个四五个小时再试

或者code.sh里改一下线程大小 重启青龙容器  还是不行就等待

由于code和task_before.sh只归纳整理一部分脚本的互助码(详见脚本内chinese关键词)。其他活动脚本要么不需要互助，要么内置助力，所以不在归纳范围。比如faker3的东东农场等脚本内置了互助代码，所以也会出现上述提示。凡是不在归纳范围的活动脚本运行时看到以上提示，均可无视。

内部互助的活动脚本是用不了车头模式等自定义互助模板的！

《Python基础教程》内容总览篇（持续更新中）
weixin_43178406的博客
08-26 30万+
大家好，我是爱编程的喵喵。双985硕士毕业，现担任全栈工程师一职，热衷于将数据思维应用到工作与生活中。从事机器学习以及相关的前后端开发工作。曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为优快云博客专家、人工智能领域优质创作者。喜欢通过博客创作的方式对所学的知识进行总结与归纳，不仅形成深入且独到的理解，而且能够帮助新手快速入门。个人精心开设的《Python基础课程》专栏订阅量接近900，帮助不少同学解决了Bug。
Cygwin，NDK编译动态库时报Argument list too long错误
xulaoban的专栏
05-14 4538
用在cygwin用ndk-r8c编译一个鬼火的动态链接库时报错： /cygdrive/f/android-ndk-r8c-windows/android-ndk-r8c/toolchains/arm -linux-androideabi-4.6/prebuilt/windows/bin/arm-linux-androideabi-ar: Argument list too long。 坑爹啊
青龙互助+轮换工具人+Argument list too long问题解决 教程（2022年3月2日更新）
FishBean的博客
02-24 6830
青龙互助+轮换工具人+Argument list too long问题解决 小白教程
/bin/cat: Argument list too long
热门推荐
lamp专栏
03-21 2万+
因做一个统计，下载了一个星期的统计日志， 有2000多个文件，每一个文件里面的格式都是一样的， 得先把这些日志文件进行合并， 然后再放到hadhoop上面去运算，问题就这样产生了， 这些日志文件都放在logdeal目录下，我想用 cat/logdeal/* > merge.lst文件里面。 结果就产生了/bin/cat: Argument list too long 这个错误，googl
青龙面板QLDependency项目依赖安装问题分析与解决指南
gitblog_07266的博客
06-05 547
青龙面板QLDependency项目依赖安装问题分析与解决指南 问题现象描述 在使用OpenWrt系统的Docker环境中部署青龙面板时，部分用户可能会遇到npm依赖安装失败的情况。典型错误表现为控制台输出以下信息： npm error code EUNSUPPORTEDPROTOCOL npm error Unsupported URL Type "link:": link:...
解决一个青龙容器ck数量上限教程 青龙面板 docker
m0_58177544的博客
11-23 5890
必看： 更多教程资源：www.unke.ren 交流群：414757610 前言： 感谢两位大佬： 魔改版大佬：https://gist.github.com/fzls/14f8d1d3ebb2fef64750ad91d268e4f6 互助脚本大佬：https://t.me/update_help/45 教程： 第一、以下是青龙v2.10.8版本以前教程 1.先下载互助脚本和魔改文件：点击下载 提取密码：unke 2.将下载文件上传到青龙映射目录/ql/config下 3.修改上传
“Argument list too long”解决方法
08-20 1万+
1. 背景 Linux下使用cp，mv，rm等命令时经常会碰到“Argument list too long”错误，这主要是因为这些命令的参数太长，即文件个数过多。 2. 解决方案 “Argument list too long”这个问题的解决主要会用到两个命令，find和xargs。 2.1 问题：要删除test文件夹下以jpg结尾的文件。 命令1为： find test/ -name "*.jpg" | xargs -i rm {} 命令2为： find test/ -name "*.
Argument list too long" 問題
土哥的BLOG
01-04 1362
昨 天升級 Email Server 的 SquirrelMail，當我將舊版本 SquirrelMail 下面的 data 目錄資料複製到新版本時，出現了 "Argument list too long"，然後找了找，發現原來在 Linux 下用 cp, mv, rm 這些指令時，如果輸入的檔案數目太多會出現 "Argument list too long" 錯誤。  H)?qaoE  
环境配置—批量删除时提示/usr/bin/rm: Argument list too long问题
u013889591的专栏
07-29 1469
在Linux系统中，rm命令是删除文件和目录的常用工具。然而，当需要删除大量文件时，可能会遇到一些限制，尤其是参数列表过长的问题。这是因为在执行命令时，参数列表需要存储在内存中，而系统对内存中可存储参数的数量有限制。
bash: /usr/bin/cp: Argument list too long Linux 系统大量数据移动复制出错
wendell 的博客
11-18 3868
bash: /usr/bin/cp: Argument list too long Linux 系统大量数据移动复制出错
apk反编译后回编失败--java.io.IOException: error=7, Argument list too long
写代码的美少年
02-23 2927
前不久做逆向工程(可不是去破解人家应用哟，安卓聚合渠道的拆包业务)，回编代码的时候失败了。即便是拿原包反编译，什么都不做，也是回编失败，以至于我差点出现心里阴影。还以为现在apk加固这么牛逼，可以让你反编译后无法回编~~囧 当然，经过排查，还是能找到问题所在的: Caused by: java.io.IOException: Cannot run program "/var/folders...
tasklist
03-13
tasklist
linux脚本报错参数太多,linux批量操作时提示Argument list too long解决方法
weixin_31132687的博客
05-03 2813
第一种情况：在实际使用过程中，若一个目录下文件或文件夹太多，在执行“*” 命令时 会提示Argument list too long，如rm -rf /tmp/*命令下。解决方案：ls | xargs ­n 10 rm ­rf lsSSH执行以上命令，输出所有的文件名(用空格分割) xargs就是将ls的输出，每10个为一组(以空格为分隔符)，作为rm ­rf的参数 也就是说将所有文件名10个为一...
运维实战案例之“Argument list too long”错误与解决方法
weixin_34357887的博客
10-22 256
当Linux下试图传递太多参数给一个系统命令时，就会出现”Argument list too long”错误。这个是Linux系统一直以来都有的限制。查看这个限制可以通过命令“getconf ARG_MAX”来实现，如下图所示：这是Centos6版本的一个最大值，而在Centos5.x中，这个值相对较小，如下图所示：所以这个问题更多时候是发生在linux低版本中。要处理这...
Linux下出现 “Argument list too long”错误的解决
最实用的Linux博客
02-10 4032
 原贴:http://www.linuxidc.com/Linux/2008-02/11043.htmLinux下出现 “Argument list too long”错误的解决mv [a-l]* ../directory2mv [m-z]* ../directory2这是4种方法里最简单的,但是远非理想的方法。你必须有办法平均分割文件，而且对于文件数目极多的情况，需要输入N遍
shell运行报 too many arguments错误
weixin_33804990的博客
07-19 932
有时候shell在运行的时候可能会报toomanyarguments错误，出现这种错误的一般情况是出现了多值问题，也就是一个变量可能有多个值了。 例：#!/bin/sh echo"Isitmorning?Pleaseansweryesorno" readtimeofday if[$timeofday="yes"];then ech...
关于青龙、xdd-plus的一些常见问题解答
FishBean的博客
01-13 1万+
关于青龙、xdd-plus的一些常见问题解答
青龙面板打不开解决办法
jiuyani的博客
05-20 1万+
原因是cdn 自己修改一下就可以了 进入文件夹etc找到hosts \etc\hosts 把这二个添加： 104.16.88.20 cdn.js delivr.net 直接复制在最后一行，就可以解决问题了 或者 1. 登陆linux 2. 进入青龙容器 docker exec -it qinglong bash 3. 备份原来的index.html文件防止改错了不可用 cp dist/index.html dist/index.html.bak 4. 替换cdn sed -...
青龙面板使用教程，以及安装
qq_46506007的博客
05-19 8141
青龙面板的安装与使用，定时任务脚本
Linux系统执行Python 脚本调sql脚本报错argument list too long错误如何解决
最新发布
07-29
<think>我们正在处理一个Linux环境下执行Python脚本调用SQL脚本时出现的“argument list too long”错误。这个错误通常发生在命令行参数过长时，Linux系统对命令行参数的长度有限制。 根据引用[1]的内容，我们有一个脚本示例，其中使用了Python和数据库操作。虽然引用[1]没有直接展示调用SQL脚本，但我们可以借鉴其处理方式。 错误原因： 在Linux中，当执行一个命令时，传递给命令的参数（包括环境变量）的总大小超过了系统限制（通常由`ARG_MAX`决定），就会引发“argument list too long”错误。在调用SQL脚本时，如果SQL脚本非常大或者包含大量的参数，就可能出现这个问题。 解决方案： 1. 检查并优化参数：减少传递给命令的参数数量或长度。 2. 使用文件传递参数：将参数写入文件，然后通过文件读取参数，而不是直接通过命令行传递。 3. 使用管道或重定向：将数据通过管道传递给命令，而不是作为参数传递。 4. 调整系统参数：增大`ARG_MAX`限制，但这需要系统权限，且不推荐，因为可能影响系统稳定性。 具体到我们的场景：Python脚本调用SQL脚本。假设我们使用类似以下的方式调用： subprocess.call(['sqlite3', 'database.db', '<', 'large_script.sql']) 或者 subprocess.call(['mysql', '-u', 'user', '-p', 'dbname', '<', 'large_script.sql']) 但是，如果SQL脚本文件非常大，或者我们在命令行中传递了大量的参数（比如大量的INSERT语句作为参数），就会导致问题。 我们可以考虑以下方法： 方法1：使用重定向（输入重定向）来传递SQL脚本文件 在命令行中，我们通常用`<`将文件重定向到命令的标准输入。但是注意，在subprocess模块中，我们不能直接使用shell的重定向符号，除非设置`shell=True`（不推荐，因为安全风险）。我们可以使用以下方式： ```python with open('large_script.sql', 'r') as sql_file: subprocess.call(['mysql', '-u', 'user', '-p', 'dbname'], stdin=sql_file) ``` 这样，SQL脚本通过文件句柄传递给子进程的标准输入，避免了命令行参数过长。 方法2：将SQL命令拆分成多个小文件，分批执行。 方法3：如果是因为SQL脚本本身过大，考虑优化SQL脚本，比如使用LOAD DATA INFILE（在MySQL中）代替大量的INSERT语句。 方法4：使用其他方式传递数据，例如如果数据是从Python生成，可以考虑使用管道将数据传递给数据库命令行工具，逐行处理或批量处理。 示例代码（使用Python生成数据并导入到MySQL，避免一次性传递大量数据）： 如果数据是由Python生成的，我们可以边生成边通过管道传递给mysql命令： ```python import subprocess # 启动mysql进程，并打开管道到其标准输入 mysql_process = subprocess.Popen(['mysql', '-u', 'user', '-p', 'dbname'], stdin=subprocess.PIPE) # 生成SQL语句并写入管道 for i in range(large_number): # 生成一条SQL语句，注意要符合MySQL的语法 sql_line = f"INSERT INTO table VALUES ({i}, 'data');\n" mysql_process.stdin.write(sql_line.encode()) # 关闭管道，等待完成 mysql_process.stdin.close() mysql_process.wait() ``` 但注意，这种方法如果数据量极大，可能会占用较多内存，建议分批次写入（比如每1000条提交一次）。 另外，如果使用SQLite，也有类似的批量操作方式。 方法5：使用数据库API的批量操作功能，而不是通过命令行工具。例如，使用Python的MySQLdb或sqlite3模块，直接连接数据库，然后执行SQL语句，这样就不会有命令行参数限制的问题。 例如，使用sqlite3模块： ```python import sqlite3 conn = sqlite3.connect('database.db') cursor = conn.cursor() with open('large_script.sql', 'r') as f: # 注意：如果文件很大，可以分块读取执行，或者使用executescript（如果脚本包含多条语句） cursor.executescript(f.read()) conn.commit() ``` 或者逐行执行： ```python with open('large_script.sql', 'r') as f: for line in f: # 忽略空行和注释 if line.strip() and not line.strip().startswith('--'): cursor.execute(line) conn.commit() ``` 使用这种方法，我们完全避开了命令行参数长度的限制。 总结：推荐使用数据库API直接操作数据库（方法5）或者使用标准输入重定向（方法1）来避免“argument list too long”错误。 注意：如果使用标准输入重定向，确保SQL脚本文件不会过大导致内存不足。如果文件非常大，建议使用数据库API并分块处理。 相关问题： 1. 如何查看Linux系统的ARG_MAX限制？ 2. 在Python中，使用subprocess模块时，如何安全地传递大量数据给子进程？ 3. 使用Python的数据库API（如sqlite3）执行大型SQL脚本时，如何优化内存使用？</think>### Linux执行Python脚本调用SQL脚本时出现"argument list too long"错误的解决方案 当在Linux系统中执行Python脚本调用SQL脚本时出现"argument list too long"错误，这通常是由于命令行参数或环境变量总大小超过系统限制造成的。Linux内核默认限制为$2MB$（可通过`getconf ARG_MAX`查看）。以下是逐步解决方案： #### 1. **使用输入重定向替代命令行参数**（推荐） 将SQL脚本内容通过标准输入传递，避免作为命令行参数： ```python import subprocess # 原始问题代码（可能导致错误） # subprocess.call(["mysql", "-u", "user", "-p", "dbname", "<", "large.sql"]) # 修正方案：使用文件句柄重定向 with open("large.sql", "r") as sql_file: subprocess.call( ["mysql", "-u", "user", "-p", "dbname"], stdin=sql_file # 通过标准输入传递SQL内容 ) ``` #### 2. **分批执行SQL语句** 对于巨型SQL文件，分割后分批执行： ```python import sqlite3 CHUNK_SIZE = 1000 # 每批执行的语句数 conn = sqlite3.connect("database.db") cursor = conn.cursor() with open("large.sql") as f: statements = [] for line in f: if line.strip().endswith(";"): statements.append(line) if len(statements) >= CHUNK_SIZE: cursor.execute("".join(statements)) statements = [] if statements: cursor.execute("".join(statements)) conn.commit() ``` #### 3. **使用数据库API直接执行** 完全避免命令行调用，改用Python数据库接口： ```python import MySQLdb # 或 import sqlite3 conn = MySQLdb.connect(host="localhost", user="user", password="pass", db="dbname") with open("large.sql") as f: sql = f.read() # 自动分批执行 for statement in sql.split(";"): if statement.strip(): conn.cursor().execute(statement) conn.commit() ``` #### 4. **临时提高系统限制（需root权限）** 临时调整内核参数（重启后失效）： ```bash # 查看当前限制 $ getconf ARG_MAX # 临时提高限制（例如设为4MB） $ sudo sysctl -w kernel.arg_max=4194304 ``` #### 5. **优化SQL脚本结构** 减少SQL语句冗余： - 用`INSERT INTO ... VALUES (...), (...), ...`代替多个单行INSERT - 使用`LOAD DATA INFILE`(MySQL)或`.import`(SQLite)直接导入CSV - 删除不必要的空格和注释 > **关键原因**：当Python通过`subprocess`调用外部命令时，整个命令（包括参数和环境变量）必须符合Linux内核的`ARG_MAX`限制。直接使用数据库API可彻底规避此限制[^1]。 ---
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

beansqq

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值