- 博客(38)
- 资源 (15)
- 收藏
- 关注
原创 k8s nginx-ingress 配置 gzip 和 cache control
ngx_http_gzip_module模块是一个过滤器,它使用" gzip "方法来压缩响应,这常有助于将传输数据的大小减少一半甚至更多。在nginx 中需要通过 gzip on | off;来开启或停止,在ingress 中欧你还需要在configmap 中 配置 use-gzip: trueCache-Control HTTP报头字段保存请求和响应中的指令(指令),这些指令控制浏览器和共享缓存中的缓存, 开启该功能可以提利用本地的缓存文件,提高web访问效率。
2024-08-12 15:15:18
1379
原创 书生大模型实战营第三期_L2-Lagent 自定义你的 Agent 智能体(81班1101作业)
首先通过命令创建工具文件,这里我以天气API为例然后在该文件中写下如下代码import os@tool_api"""一个天气查询API。可以根据城市名查询天气信息。Args:"""else:Args:Returns:"""data = [f'数据观测时间: {now["obsTime"]}',f'温度: {now["temp"]}°C',f'体感温度: {now["feelsLike"]}°C',f'天气: {now["text"]}',
2024-08-09 15:03:07
895
原创 书生大模型实战营第三期_OpenCompass 评测 InternLM-1.8B 实践(81班1101作业)
开源可复现:提供公平、公开、可复现的大模型评测方案全面的能力维度:五大维度设计,提供 70+ 个数据集约 40 万题的的模型评测方案,全面评估模型能力丰富的模型支持:已支持 20+ HuggingFace 及 API 模型分布式高效评测:一行命令实现任务分割和分布式评测,数小时即可完成千亿模型全量评测多样化评测范式:支持零样本、小样本及思维链评测,结合标准型或对话型提示词模板,轻松激发各种模型最大性能灵活化拓展:想增加新模型或数据集?
2024-08-03 10:50:54
995
原创 书生大模型实战营第三期_Xtuner微调(81班1101作业)
随后用xtuner convert 命令进行格式转换(pth->hf),获得学习到的adapter 参数。2、大部分的任务可以共用虚拟环境,这样能够减少配置环境的时间。用xtuner convert merge 命令合并预训练模型以及adapter模型,获得最终模型。1、环境配置是最容易踩的坑,务必选择cuda12.2的镜像,否则会出现奇怪的错误。用 xtuner train 命令,微调个人小助手,训练速度较快,约10分钟完成。测试时发现模型会生成无意义的语句,甚至难以停机。这里模型出现严重的过拟合现象。
2024-08-03 10:24:31
197
原创 书生大模型实战营第三期_LlamaIndex RAG 实践(81班1101作业)
【代码】书生大模型实战营第三期_LlamaIndex RAG 实践(81班1101作业)
2024-07-25 16:06:36
232
原创 书生大模型实战营第三期_LangGPT结构化提示词编写实践(81班1101作业)
【代码】书生大模型实战营第三期_LangGPT结构化提示词编写实践(81班1101作业)
2024-07-25 16:01:23
247
原创 书生大模型实战营第三期_8G 显存玩转书生大模型 Demo(81班1101作业)
【代码】书生大模型实战营第三期_8G 显存玩转书生大模型 Demo(81班1101作业)
2024-07-25 15:53:25
820
原创 书生大模型实战营第三期_作业四(书生大模型全链路开源体系)(81班1101作业)
这一部分通过视频课程学习了书生·浦语大模型全链路开源体系的概况。
2024-07-25 15:38:21
178
原创 书生大模型实战闯关-L0 Python(81班1101作业)
首先是学习基础知识:包括linux命令,conda命令,git使用方法,ssh功能等。作业2是用vscode ssh连接开发机并debug,参加书生大模型实战营,学习大模型的知识。L0的作业是用ssh进行端口映射。
2024-07-13 10:11:03
227
原创 Linux搭建自己的云盘
作为一个续费的会员,对百度云盘很失望,上传的文件,总是下载失败。对360云盘也很失望,收费太贵,容量太小。网上搜了一下,决定自己搭建一个云盘。经过调试,网页端、电脑端、手机端都OK,速度很快,还不错。方法分享给大家:一、准备工作虚拟主机一台,centos7系统,软件选择seafile,官网地址:https://www.seafile.com/download/二、安装首先下载一键安...
2024-02-19 11:01:58
521
1
原创 Docker 控制容器日志大小的方法
使用 Docker,您可以将应用程序及其依赖项一起封装到一个容器中,并确保它们可以在不同的环境中顺利运行。在使用 Docker 过程中,控制容器日志大小是一种有用的技巧,可以防止容器日志过大导致磁盘空间不足。在启动容器时,可以使用 --log-opt 参数设置日志驱动程序的选项。当日志文件达到 10MB 时,Docker 会自动轮换日志文件,保留最新的 3 个日志文件。这里的配置与前面的 --log-opt 参数相同,将为所有容器限制日志文件大小。1. 使用 --log-opt 参数限制容器日志大小。
2023-11-30 10:07:13
1694
原创 使用kubectl config控制多个k8s集群
在pipeline中的CD环节,有时候需要部署到不同的K8S集群,比如开发环境、测试环境、生产环境。此时可以使用kubectl config来进行多个集群的管理。我们已经完成了配置的拷贝,但是为了便于管理,我们需要对这些配置中的命名进行修改规范;我们要修改这两个配置文件,并着重关注三大要素:集群、上下文、用户;
2023-10-31 09:37:16
284
1
原创 git 免密码配置
git config --global --replace-all uesr.email"你的 git 的邮箱"git config --global --replace-all user.name"你的 git 的名称"git config --global user.email "xxxx@xxx.com(新的邮箱)"修改密码git config --global user.password "xxxx(新的密码)"git config --global user.name "xxxx(新的用户名)"
2023-10-27 16:15:51
178
原创 liunx 文件权限及对应数字
文件权限由三个部分构成,分别为读取4r写入2w执行1x最前面加d是指对目录设置的权限,否则为对一般文件设置的权限。如。
2023-10-12 10:16:36
275
原创 GIT HTTP设置记住密码
需注意:第二种方式如果用户名/密码中有@符号会出错,所以urlencode进行处理,处理后@符号会变为%40,问题解决。git clone http://账号:密码@git.test.com.cn/root/xx.git。修改仓库中.git/config文件。#自定义时间,单位:秒-eg:1天。#全局设置记住密码 默认15分钟。#http中默认携带。
2023-08-04 11:35:28
1067
1
原创 Nginx 安全配置
Nginx 是一个高性能的 HTTP 和反向代理服务,使用非常广泛,目前很大一部分网站均使用了 Nginx 作为 WEB 服务器,Nginx 虽然非常强大,但是安全防护的配置及恶意访问默认是没用做基础配置的。
2023-07-10 14:28:28
2292
1
原创 linux 系统下添加普通帐号,有权限运行docker
使用阿里云提供的系统时,有时候 /etc/sudoers 找不到,可能是为了安全。保存时,可能提示没有权限,使用" :wq!建议使用visudo来解决问题。3、上面二步,不行再给普通用户授权权限。2、将普通用户加入docker组。1、增加普通用户docker。
2023-06-21 17:30:56
1096
原创 Linux Nginx 的并发连接数和连接状态
nginx的运行进程数 ps -ef | grep nginx | wc -l。TIME_WAIT 1057 (处理完毕,等待超时结束的请求数)SYN_RECV:一个连接请求已经到达,等待确认。LAST_ACK 5 (正在等待处理的请求数)SYN_SENT:应用已经开始,打开一个连接。TIME_WAIT:另一边已初始化一个释放。ITMED_WAIT:等待所有分组死掉。FIN_WAIT1:应用说它已经完成。FIN_WAIT2:另一边已同意释放。LAST_ACK:等待所有分组死掉。
2023-03-15 17:27:17
689
原创 DOCKER权限设置:LINUX新增用户添加ROOT权限
如果,在修改/etc/sudoers 文件,你该错误了,会导致使用不了sudo命令,使用vim也打不开该文件了;(这样是所有的用户都可操作docker,这样不安全,但是如果安全性要求不高,就可这样做)
2023-03-13 16:41:31
3695
原创 mysql 索引使用率监控
where条件和order by使用相同的索引,并且order by的顺序和索引的顺序相同,并且order by的字段都是升序或者降序。其实比较多应用场景是当索引正在工作,Handler_read_key的值将很高,这个值代表了一个行将索引值读的次数,很低的值表明增加索引得到的性能改善不高,因为索引并不经常使用。在关系数据库中,索引是一种单独的、物理的对数据库表中一列或多列的值进行排序的一种存储结构,它是某个表中一列或若干列值的集合和相应的指向表中物理标识这些值的数据页的逻辑指针清单。
2023-02-23 10:31:35
628
原创 Linux下创建与解压zip, tar, tar.gz和tar.bz2文件
所以,你现在应该考虑在你的备份脚本中使用你在这里学到的压缩方式备份你基本的规则文件以减小你备份文件的大小。zip可能是目前使用得最多的文档压缩格式,它最大的优点就是在不同的操作系统平台,比如Linux, Windows以及Mac OS,上使用。它在压缩时不会占用太多CPU的,而且可以得到一个非常理想的压缩率。它的好处就是它只消耗非常少的CPU以及时间去打包文件,他仅仅只是一个打包工具,并不负责压缩。缺点:是支持的压缩率不是很高,而tar.gz和tar.gz2在压缩率方面做得非常好。
2022-11-18 11:26:05
1492
原创 nginx服务器常见错误代码500、501、502、503、504、505
nginx服务器常见错误代码500、501、502、503、504、505
2022-06-17 17:28:14
6165
原创 文件已经删除,但是空间未释放
【问题现象】Linux系统中在磁盘空间占满时,普遍的做法是查看磁盘中占用空间较大的文件有哪些,然后对占用空间较大,而且删除后不会影响业务正常运行的文件进行删除。但是有时会出现,明明大文件已经进行了删除,但是磁盘空间仍然未进行释放的现象。【排查步骤】1、查看磁盘空间状态通过df -h命令查看磁盘空间状态显示根分区空间已满[root@test ~]# df -hFilesystem Size Used Avail Use% Mounted on/dev/sda2 9.8G .
2021-02-15 12:55:21
673
原创 学习笔记(01):高并发下的Nginx性能优化实战-nginx命令
高并发下的Nginx性能优化实战、解读Nginx的核心知识、掌握nginx核心原理?通过本期课程将解答我们的疑惑。
2020-02-13 19:47:42
80
audit-plugin-mysql-5.7-1.1.11-985-linux-x86_64
2022-04-09
CrazyCrypt_2.1_Password_Generator.zip
2019-11-29
某企业订单管理系统源码
2013-07-04
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人