OpenSource
文章平均质量分 67
后续全部开源,不再收费,只需关注我即可,也可顺便关注我的视频号,感谢。
小李飞刀李寻欢
视频号:小明哥直播间
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
kauditd0 病毒/挖矿程序完全清除方法初试
整个处理过程最好在断网的情况下进行,以防病毒与控制服务器通信。完成所有步骤后,重启服务器并再次使用top命令确认CPU/GPU使用率是否已恢复正常。✅ 紧急必做:SSH密钥登录 + 改端口 + 防火墙白名单。✅ 系统加固:更新系统 + 安装Fail2ban + 权限最小化。✅ 持续监控:定期检查进程/端口 + 查看日志 + 安全扫描。最重要的一点安全是一个持续的过程,而非一劳永逸的设置。养成定期查看日志和系统状态的习惯,是守护服务器安全最关键的一环。原创 2025-09-26 11:31:45 · 875 阅读 · 0 评论 -
SCRM与SaaS的区别
SCRM 可以是 SaaS 的,也可以是本地部署的;但 SaaS 不一定是 SCRM,它可以是 CRM、ERP、OA、财务系统等等。如果你有具体场景,比如“我想买 SCRM,但不知道是选 SaaS 还是本地部署”,我可以帮你分析利弊。原创 2025-09-04 17:02:02 · 389 阅读 · 0 评论 -
MongoDB /redis/mysql 界面化的数据查看页面App
输入MongoDB的账号密码即可读取数据,可访问数据。原创 2025-08-26 18:34:38 · 520 阅读 · 0 评论 -
logger级别及大小
级别选择生产环境:通常使用INFO或WARN。测试/预发布环境:可以使用DEBUG来排查问题。开发环境:可以使用DEBUG或TRACE。大小管理必须配置滚动策略,绝不能放任日志无限增长。根据应用日志量和磁盘空间,合理设置(如100MB-1GB)和maxHistory(如保留7-30天)。设置作为最后的安全网,防止误算导致磁盘爆满。日志清理推荐使用日志框架自带的maxHistory和机制自动删除旧日志,而不是依赖外部Cron作业,这样管理更清晰、更可靠。原创 2025-08-21 14:03:13 · 821 阅读 · 0 评论 -
python与JavaScript的区别
(按常用维度划分)defclassimportyield{};原创 2025-08-13 17:19:57 · 1339 阅读 · 0 评论 -
GPT-OSS模型评测最佳实践:推理速度与基准测试指南
通过以上步骤,我们成功地使用 EvalScope 测试了 GPT-OSS 模型的推理速度和基准测试能力。GPT-OSS 模型在推理速度和基准测试上表现出色,适合用于生产环境和高性能需求的场景。————————后续补充——————————相关技术群:868373192,277356808。转载 2025-08-11 11:04:35 · 600 阅读 · 2 评论 -
大厂算法面试经验-横扫千军万马
2025年大厂算法岗面试核心趋势与备战指南 摘要:本文梳理了2025年头部互联网企业算法岗面试的最新动态。数据显示,算法与数据结构(占比31%)和大模型技术(25.9%)成为考察重点,动态规划、Transformer架构及LoRA微调技术等高频考点频现。各企业差异化明显:腾讯侧重工业场景实现,字节关注多模态交互,阿里聚焦电商搜索优化。建议应聘者采用STAR-L框架展示项目经验,优先掌握动态规划状态方程设计、XGBoost特征重要性等核心技能,同时注重大模型技术与业务场景的结合能力。目前算法岗高阶职位年薪50原创 2025-08-04 10:58:55 · 1847 阅读 · 0 评论 -
redis 7.4安装笔记
此安装方法适用于生产环境,提供了必要的安全配置和服务管理。加Q group请备注(进后请告知):来自优快云。maxmemory 4gb # 根据服务器内存设置。# 获取最新稳定版 Redis(请替换为最新版本)# 开放 Redis 端口(默认 6379)# 最大内存限制(根据服务器内存设置)# 测试编译结果(可选但推荐)# 绑定内网 IP(安全必须)# 配置 redis.conf。# 禁用危险命令(安全加固)# 设置密码(安全必须)# 应返回: PONG。# 编译 Redis。# 创建配置文件目录。原创 2025-07-23 10:28:29 · 1149 阅读 · 0 评论 -
MySQL安装包安装方法
本文详细介绍了在不同操作系统上使用安装包安装MySQL的方法:Windows系统通过MSI安装包图形化安装,需设置root密码;macOS系统使用DMG安装包,需注意保存临时密码;Linux系统(Ubuntu/CentOS)分别使用DEB/RPM包命令行安装,需配置仓库和密码。文章还提供了验证安装的方法和常见问题解决方案,如忘记密码、防火墙设置等,并建议安装后立即进行安全配置。原创 2025-07-18 10:23:34 · 1245 阅读 · 0 评论 -
mongodb-org-server_8.0.11_amd64.deb 这个文件怎么安装
本文介绍了安装mongodb-org-server_8.0.11_amd64.deb的步骤及常见问题解决方法。首先通过dpkg检查依赖关系,然后安装MongoDB服务器并启动服务。针对可能出现的依赖缺失(如libssl1.1)、系统兼容性等问题提供了具体解决方案,包括手动安装依赖包或改用官方APT源安装。文中还给出了安全建议,如启用身份验证、限制网络访问和定期备份数据。最后强调如果8.0.11版本存在兼容性问题,建议使用MongoDB官方支持的稳定版本(如6.0)。原创 2025-07-17 14:31:27 · 666 阅读 · 0 评论 -
MongoDB 与MySQL 及es的区别
MongoDB与MySQL的对比分析表明两种数据库各有适用场景:MongoDB适合灵活schema、高并发写入和文档嵌套,而MySQL更适合固定结构、强一致性和复杂关联查询。MongoDB社区版采用SSPL许可证开源,企业版收费。替代方案建议包括CouchDB、Elasticsearch等。ES与MongoDB的核心差异在于ES专注于搜索分析,而MongoDB侧重通用存储,二者常以互补架构配合使用。技术选型需根据具体业务需求决定,如搜索场景可选ES,事务需求则需MySQL或MongoDB企业版。原创 2025-07-17 11:35:55 · 1852 阅读 · 0 评论 -
如何确定磁盘之前有没有使用过?
本文介绍了6种专业方法检测磁盘使用历史:1)通过file/parted命令检查文件系统签名;2)使用gdisk/fdisk扫描分区表;3)借助strings/testdisk查找数据残留;4)查看SMART数据中的通电时间和写入量;5)检查系统挂载日志;6)分析NVMe健康状态。综合判断标准为:若同时无文件系统、分区表、数据残留且通电时间为零,则为新磁盘;反之则被使用过。最后警告:使用sgdisk可彻底擦除磁盘数据,但会永久删除所有内容(非高级运维人员慎操作)。全文提供了详细的bash命令参考。原创 2025-07-15 15:18:21 · 467 阅读 · 0 评论 -
2025 年最新对口型大模型及技术特点
2025年口型同步技术最新进展概览 LatentSync1.5(字节/北交)通过端到端潜在扩散模型优化中文唇形匹配,显存需求低至20GB;EmoDubber(CVPR2025)首创情绪可控配音架构,支持实时表情生成;SeaweedAPT2(字节)实现1080p实时交互视频生成;Gemma3n(谷歌)侧重端侧多模态处理;MuseTalk因技术争议被撤回。各模型在中文优化、实时性、交互性等方面各有侧重,开发者可根据场景需求选择,中文创作推荐LatentSync1.5,交互场景适合SeaweedAPT2。当前技术原创 2025-07-09 15:59:32 · 2254 阅读 · 3 评论 -
下载es中index下的title字段全部数据的代码
【代码】下载es中index下的title字段全部数据的代码。原创 2025-07-09 14:33:58 · 290 阅读 · 0 评论 -
字节Bagel多模态大模型解读二
启用CoT后,WISE基准分数从0.52→0.70(表6),智能编辑分从44.9→55.3(表8)。(IntelligentBench):44.9分,大幅领先开源模型30分(图12)。:大学习率(1e-4)加速生成收敛,小学习率(2.5e-5)微调理解任务(图6)。:生成任务数据量需4倍于理解任务(4:1),因MSE损失对数据量更敏感(图5)。(GEdit-Bench):7.39分,优于Step1X-Edit(7.09)。:88分(LLM重写后),远超Janus-Pro(80分)和SD3(74分)。原创 2025-06-20 11:24:09 · 1263 阅读 · 0 评论 -
字节Bagel多模态大模型解读
本文是一篇关于多模态预训练模型BAGEL的论文,由来自字节跳动、深圳先进技术研究院、莫纳什大学、香港科技大学和加州大学圣克鲁兹分校的研究人员共同撰写。BAGEL是一个开源的基础模型,支持多种模态的理解和生成,包括文本、图像和视频。该模型在大规模交错的多模态数据上进行了预训练,展现出了复杂的多模态推理能力,并在多个标准基准测试中显著超越现有的开源统一模型。原创 2025-06-20 11:16:04 · 1043 阅读 · 0 评论 -
使用kubeadm部署Kubernetes(k8s)集群的步骤
(至少1台master和1台worker节点)推荐操作系统:Ubuntu 20.04/22.04, CentOS 7/8, RHEL 7/8硬件要求:2GB以上RAM2核以上CPU20GB以上磁盘空间swapoff -a并注释掉/etc/fstab中的swap行确保唯一主机名确保时间同步确保各节点网络互通。原创 2025-06-10 15:31:24 · 1333 阅读 · 0 评论 -
MCP agent初步
MCP(Modular Control Platform)通常指一种模块化控制平台,用于管理和协调分布式系统中的任务。MCP Agent 是其核心组件,负责执行指令、收集数据或与其他服务交互。通过 HTTP 请求与 MCP Servers 交互,通常使用 JSON 格式传输数据。以上方法覆盖了多数 MCP Servers 的交互场景,具体实现需参考对应服务器的文档。部分 MCP Servers 提供命令行接口,适用于脚本化操作。用于需要持续双向通信的场景,如实时监控。适用于高性能场景,需预先定义。原创 2025-06-03 14:21:57 · 705 阅读 · 0 评论 -
Docker疑难杂症解决指南
通过以上大纲,可以系统地解决Docker使用过程中遇到的各种疑难杂症,确保应用在容器化环境中的稳定运行。原创 2025-05-22 18:18:15 · 209 阅读 · 0 评论 -
我的创作纪念日
专注领域:推荐算法与NLP,语音识别与降噪,图像生成,检索,大模型。1,333,448 总访问量。原创 2025-03-25 09:41:08 · 231 阅读 · 0 评论 -
numpy 计算两组向量是否相等,以及在一定误差内相等
如果你需要更灵活的误差检查,可以使用函数,并结合numpy.all来检查所有元素是否在一定误差内相等。# 自定义误差检查print(close) # 输出: True:检查两个数组是否完全相等。:检查两个数组在一定误差内是否相等。:检查两个数组的每个元素在一定误差内是否相等。:检查两个数组的每个元素是否相等。根据你的需求选择合适的方法来检查向量是否相等或近似相等。原创 2024-12-03 15:09:03 · 489 阅读 · 0 评论 -
faiss 报错Faiss assertion ‘err == CUBLAS_STATUS_SUCCESS‘ failed in void faiss::gpu::runMatrixMult(fais
尝试了重装cuda及driver,还有nvcc都没解决问题,包括如下采用conda安装的方法都没成功。方法就是直接pip安装faiss-gpu=1.7.3。后来发现这是Ubuntu的bug,采用。# 安装faiss的GPU 版本。原创 2024-11-29 17:02:07 · 991 阅读 · 0 评论 -
Ubuntu nvidia-cuda-toolkit 升级
通过以上步骤,你应该能够成功升级并确保其与 NVIDIA 驱动程序兼容。如果在升级过程中遇到问题,建议查阅相关文档或寻求社区支持。原创 2024-11-28 11:20:59 · 1714 阅读 · 0 评论 -
python 获取现在时间的年月日时分秒
print(f"当前时间是: {year}年{month}月{day}日 {hour}时{minute}分{second}秒")对象,该对象包含了当前的日期和时间信息。你可以通过访问该对象的属性来获取具体的年、月、日、时、分和秒。formatted_time = now.strftime("%Y年%m月%d日 %H时%M分%S秒")模块来获取当前的日期和时间,包括年、月、日、时、分和秒。要将上述结果形成一个字符串,你可以使用字符串格式化方法。分别表示年、月、日、时、分和秒。# 提取年、月、日、时、分、秒。原创 2024-11-19 10:59:03 · 2133 阅读 · 0 评论 -
E: Unable to locate package libaio-devE: Unable to locate package libgoogle-perftools-devE: Unable
group 868373192 second group 277356808The error messages you're seeing indicate that the package manager () is unable to find the packages , , , and . This can happen for a few reasons, such as the packages not being available in the default repositories f原创 2024-11-08 11:37:35 · 1095 阅读 · 0 评论 -
anaconda 安装笔记Ubuntu20
在 Ubuntu 20.04 上安装 Anaconda 的特定版本(例如 4.2)可以通过以下步骤完成。请注意,Anaconda 4.2 是一个较旧的版本,可能不包含最新的功能和安全更新。如果你需要最新的功能和安全性,建议安装最新版本的 Anaconda。原创 2024-11-08 11:26:17 · 601 阅读 · 0 评论 -
faiss里面SQ量化4bit是啥意思?具体举例并解释
4-bit SQ量化是一种通过将浮点数映射到4-bit整数来减少存储和计算开销的技术。虽然它会引入一定的精度损失,但在许多情况下,这种损失是可以接受的,尤其是在需要处理大规模数据集时。8bit量化呢?8-bit量化(8-bit Scalar Quantization)是另一种常见的量化技术,它将浮点数向量转换为8-bit整数向量。与4-bit量化相比,8-bit量化提供了更高的精度,因为它使用更多的比特来表示每个浮点数。原创 2024-11-07 17:04:18 · 1442 阅读 · 0 评论 -
Mac电脑如何解压rar压缩包
是最简单且免费的选择,适合大多数用户。Keka也是一个很好的免费选择,支持多种压缩格式。是一个付费选项,但提供了强大的功能。终端方法适合喜欢使用命令行的用户。原创 2024-11-07 11:08:58 · 6277 阅读 · 0 评论 -
vm.max_map_count 表示啥意思啊?通俗易懂点,有单位么?262144表示啥意思?
是 Linux 内核的一个参数,用于限制一个进程可以拥有的最大内存映射区域数量。Elasticsearch 需要较高的值来处理大量数据文件。通过临时或永久设置的值,你可以解决 Elasticsearch 启动失败的问题。是一个无单位的整数值,它表示一个进程可以拥有的最大内存映射区域数量。这个值是一个纯粹的计数,没有单位。Elasticsearch 需要处理大量的数据文件,并且为了高效地访问这些数据,它会使用内存映射技术。原创 2024-11-01 17:57:52 · 1570 阅读 · 0 评论 -
nltk.download(‘averaged_perceptron_tagger_eng‘)下载数据失败
2,直接下载上述地址,或者git clone上述主页地址即可,或者gitee也可,或者直接下载zip文件。3,将下载的数据解压,放到nltk.data.path 下面。1,在github上找到该数据地址,比如在这里面。原创 2024-10-29 16:06:31 · 2211 阅读 · 0 评论 -
大模型分析:不要空腹喝咖啡
**建议**:如果你经常出现这种情况,建议早餐吃得丰富一些,避免空腹喝咖啡。- **建议**:如果这种情况经常发生,建议你进行全面的健康评估,包括检查血糖水平、甲状腺功能等,以排除其他潜在的健康问题。- **建议**:如果你经常依赖咖啡因来提神,建议逐渐减少摄入量,培养良好的睡眠习惯,以避免咖啡因依赖和崩溃。- **原因**:有些人对咖啡因的耐受性较低,摄入咖啡因后可能会出现不适症状,如心悸、焦虑、乏力等。- **建议**:如果你对咖啡因敏感,建议减少咖啡的摄入量,或者选择低咖啡因或无咖啡因的饮品。原创 2024-10-24 17:22:59 · 349 阅读 · 0 评论 -
处理txt文件,每行是一个字符串,要求将每行字符串len小于2的行去掉
`awk` 和 `sed` 都是强大的文本处理工具,适用于不同的场景。`^` 表示行首,`$` 表示行尾,`.\{2,\}` 表示至少两个字符。- `length($0) >= 2`:`$0` 表示当前行,`length($0)` 计算当前行的长度。- 接受两个参数:`input_file` 和 `output_file`,分别表示输入文件和输出文件的路径。- `input_file` 是输入文件的路径,`output_file` 是输出文件的路径。- `-n`:禁止自动打印模式空间的内容。原创 2024-10-24 10:21:00 · 668 阅读 · 0 评论 -
python数据numpy进行L2范数归一化
1. **`np.linalg.norm(array, axis=1, keepdims=True)`**: 计算每一行的L2范数。L2归一化的目标是将向量的每个元素除以向量的L2范数(即向量的欧几里得长度)。- 如果向量的L2范数为0(即向量全为0),则归一化操作会导致除以0的错误。2. **`array / l2_norms`**: 将数组的每一行除以对应的L2范数,得到归一化后的数组。2. **`vector / l2_norm`**: 将向量的每个元素除以L2范数,得到归一化后的向量。原创 2024-10-23 15:30:08 · 2451 阅读 · 0 评论 -
大模型与地球物理结合的研究方向
**多源数据融合**:利用多模态学习模型(如Transformer)将不同类型的地球物理数据(如地震、重力、电磁等)进行融合,提高数据解释的准确性。- **地震波形分析**:利用深度学习模型(如卷积神经网络,CNN)对地震波形数据进行分类和识别,帮助识别地震事件、震源机制和地下结构。- **虚拟实验平台**:利用生成模型和虚拟现实技术,创建地球物理实验的虚拟平台,帮助学生和研究人员进行实验和模拟。- **数据同化**:通过深度学习模型进行数据同化,将观测数据与模拟数据结合起来,提高模拟结果的精度。原创 2024-10-23 13:39:59 · 713 阅读 · 0 评论 -
大模型LLM微调的数据集及使用方法
通过以上步骤,你可以使用公开数据集进行大型语言模型的微调。关键步骤包括数据加载、预处理、模型微调和评估。使用 Hugging Face 的 Transformers 库可以简化这些步骤,快速实现模型的微调。原创 2024-10-23 10:35:59 · 1825 阅读 · 0 评论 -
labelstudio 标注方法及个人部署服务
2. **标注**:根据项目的配置,使用 Label Studio 提供的标注工具进行标注。首先,你需要收集大量的文本数据,这些数据可以是公开的问答数据集、论坛帖子、新闻文章、书籍等。- **标注配置**:根据你的需求配置标注任务。- **优化配置**:根据服务器的性能调整 Label Studio 的配置,如并发任务数、内存限制等。标注完成后,你可以使用标注好的问答对数据训练一个大模型。- **标注工具**:使用 Label Studio 提供的标注工具进行标注,避免手动输入错误。原创 2024-10-23 10:20:57 · 3820 阅读 · 0 评论 -
fairseq 安装包python
你遇到的错误是由于在安装 `fairseq` 包时,构建过程中找不到 `fairseq/version.txt` 文件。- 有时,问题可能是由于 `setuptools` 与正在安装的包之间的不兼容性引起的。你可以尝试创建一个新的虚拟环境并在其中安装 `fairseq`。如果这些步骤都不能解决问题,你可能需要联系 `fairseq` 社区或在他们的 GitHub 仓库中打开一个问题,详细描述你遇到的问题。- 检查 `fairseq` GitHub 仓库中是否有与你尝试安装的版本相关的已知问题或拉取请求。原创 2024-10-12 16:01:40 · 1912 阅读 · 0 评论 -
windows后台服务或者开机自启动方案(2)
1. 创建 Windows 服务: 你可以编写一个 Windows 服务应用程序,或者使用现有的工具将你的应用程序注册为 Windows 服务。1. 创建 PowerShell 脚本: 编写一个 PowerShell 脚本来启动你的应用程序,并将其作为后台进程运行。1. 创建任务: 使用 Windows 任务计划程序来创建一个任务,使你的应用程序在后台运行。1. 创建批处理文件: 创建一个批处理文件(.bat)来启动你的应用程序,并将其最小化。• 操作:选择“启动程序”,然后浏览到你的应用程序路径。原创 2024-10-12 10:25:58 · 2383 阅读 · 0 评论 -
nano 退出文件
• 按 Ctrl + G,这将显示 nano 的帮助文档,其中列出了所有可用的快捷键。• 按 N(字母 N)表示不保存,然后按 Enter 退出。• 不保存退出:Ctrl + X,然后按 N 和 Enter。• 按 Ctrl + O(字母 O),这将提示你保存文件。• 如果文件有未保存的修改,nano 会提示你是否保存。• 按 Ctrl + X 退出 nano。• 按 Ctrl + X 退出 nano。• 保存文件:Ctrl + O。• 按 Ctrl + X。• 按 Ctrl + O。原创 2024-10-08 13:56:12 · 2863 阅读 · 0 评论 -
[2024-09-29T16:13:54,471][INFO ][o.e.b.BootstrapChecks ] [node-1] bound or publishing to a non-lo
假设你有三个节点,IP 地址分别为 `192.168.1.100`、`192.168.1.101` 和 `192.168.1.102`,节点名称分别为 `node-1`、`node-2` 和 `node-3`。- **确保所有节点配置一致**:确保所有节点的 `elasticsearch.yml` 配置文件中包含相同的 `discovery.seed_hosts` 和 `cluster.initial_master_nodes` 配置。注意修改 `elasticsearch.yml`文件即可,原创 2024-09-30 11:20:15 · 719 阅读 · 0 评论
分享