- 博客(426)
- 资源 (42)
- 收藏
- 关注
原创 AI大模型:(二)2.1 从零训练自己的大模型概述
近年来,大语言模型(LLM)如GPT-4、Claude、LLaMA等展现出强大的能力,推动AI技术在自然语言处理、代码生成、知识推理等领域的广泛应用。本文将系统性地概述大模型从零训练的全过程,包括分词器训练、预训练、微调、人类对齐
2025-04-06 19:04:04
5
原创 AI大模型:(二)1.3 linux本地部署通义万相2.1+deepseek视频生成
2025年2 月 26 日,阿里巴巴深夜重磅开源了视频生成大模型——Wan 2.1( 通义万相 2.1)。Wan 2.1提供14B和1.3B参数版本,支持中英文视频生成及特效。Wan2.1 Prompt可以根据deepseek模型进一步优化,耳熟能详的手机app即梦AI也是这么个玩法,通过deepseek的优化可以将模糊需求细化为具体场景描述,能显著提升视频细节与场景丰富度。
2025-04-04 11:04:28
62
原创 AI大模型:(二)1.2 linux本地部署deepseek千问蒸馏版+web对话聊天
本次不使用ollama工具,直接在linux机器部署DeepSeek-R1-Distill-Qwen-7B deepseek的千问蒸馏版模型。
2025-03-30 00:23:15
88
原创 AI大模型:(二)1.1 ollama本地快速部署deepseek
Ollama 是一个开源的大型语言模型(LLM)服务工具,旨在简化本地部署和运行大型语言模型的过程。它支持多种流行的开源模型(如 LLaMA、Mistral、Gemma 等),并提供命令行交互和类似 OpenAI 的 API 接口,方便开发者快速集成和使用。
2025-03-21 22:37:02
491
原创 AI大模型:(一)1.大模型的发展与局限
“物理学的大厦已经落成,头上飘着一朵乌云”。喜欢三体的同学都知道,三体里边说物理学不存在了。为什么不存在了,因为地球上形成物理学理论在三体世界不适用了,科学家自己信仰的学科突然崩塌了,所以自杀!!!基本上所有的大模型都是基于数据学习的,由此可以推断出大模型所面临的挑战,或者说那个难以逾越的大山是什么。大模型在某个知识领域训练学习的知识,很难移植到别的地方,也就是大模型在提取特征也就是根据现象总结规律向下沉这一块做得已经很好了,但是向上浮推导的能力还是很有限。
2025-03-19 22:27:44
95
原创 springmvc+jdk1.8升级到springboot3+jdk17(实战)
springmvc+jdk1.8升级到springboot3+jdk17(实战总结)
2024-10-23 17:46:09
1396
转载 JDK现状
JDK 有多个构建版本,而实际只有一组源代码,即OpenJDK,使用分布式版本控制系统 Mercurial 托管在 OpenJDK。Sun Microsystems公司在2006年的JavaOne大会上称将对Java开放源代码,于2009年4月15日正式发布OpenJDK。任何人都可以获取这些源码,并用其构建一个变种版本进行发布。
2024-08-15 18:28:17
103
原创 一台docker机器如何实现构建多平台镜像
想在 x86_64/amd64 的一台机器平台上,构建适用于多个平台的镜像,例如 linux/amd64、linux/arm64
2024-07-06 20:04:49
748
原创 Kylin Linux V10 SP1 aarch64部署k8s集群严重bug
Kylin Linux V10 SP1 aarch64部署k8s集群严重bug
2024-05-01 23:12:08
1386
1
原创 sparkctl x86/arm不同平台编译使用
sparkctl是 Spark Operator 的一个命令行工具,用于创建、列出、检查状态、获取日志和删除SparkApplication。它还可以进行从本地端口到 Spark Web UI 端口的端口转发,以访问驱动程序上的 Spark Web UI。每个功能都是作为子命令实现的sparkctl。
2024-04-24 21:21:47
1269
3
原创 Elasticsearch:(二)3.集群的健康检查
================================未完待续=================================yellow:至少一个replica副本分片不可用,但是所有primary主分片均为active,数据仍然是可以保证完整性的。green:所有primary主分片和replica副分片均为active,集群健康。red:至少有一个primary为不可用状态,数据不完整,集群不可用。
2024-04-18 18:06:16
425
原创 Elasticsearch:(二)1.安装Elasticsearch
Elasticsearch安装前的jdk版本、Elasticsearch选择以及jdk、Elasticsearch安装
2024-04-18 18:05:16
278
1
原创 Elasticsearch:(一)ES简介
搜索引擎这一领域涉及了众多技术和学科,包括但不限于自然语言分析(NLP)、Python爬虫、Hadoop以及Elastic Stack(ELK Stack)等。而ES(Elasticsearch)虽然具备强大的搜索功能,但它并不仅仅局限于搜索,还涵盖了数据分析和大数据存储等多重功能。
2024-04-17 17:52:02
269
原创 什么是CAS,什么是AQS,两者到底有什么区别
CAS是指 Compare and Swap(比较并交换)操作,它是一种并发编程中的原子操作,通常用于多线程环境下实现同步和线程安全。CAS包括三个值:v表示要更新的变量e表示预期值,就是旧的值n表示新值更新时,判断只有e的值等于v变量的当前旧值时,才会将n新值赋给v,更新为新值。否则,则认为已经有其他线程更新过了,则当前线程什么都不操作,最后cas放回当前v变量的真实值。如下图:看到这里,大家对CAS原理了解了。但是会有个疑问一直听说有个CAS,但没用过。
2023-12-29 12:51:28
1281
原创 synchronized修饰方法和代码块底层实现有什么区别
synchronized代码块底层字节码是用监视器monitorenter、monitorexit来实现的。synchronized修饰方法无论是静态方法还是非静态方法底层字节码都是在flags加了个ACC_SYNCHRONIZED来修饰代表是同步方法。这里为什么两个monitorexit,就是防止synchronized代码块出现异常,监视器也能正常退出,不至于死锁。可以看到静态方法和非静态方法一样,只是在方法的flags中用ACC_SYNCHRONIZED来修饰代表是同步方法。
2023-12-21 18:08:02
591
原创 cisco开源测试仪指南
通过观察可以发现,Trex将数据包分为client和server两部分,按yaml文件中指定的client和server,重写数据包的IP地址(还有源端口),然后发送出来。可以通过观察一份流量的回放带宽占用,来调整-m参数,轻松将流量发送到想要的压力。官方链接: https://trex-tgn.cisco.com/trex/doc/cp_stl_docs/index.html#官方文档: https://trex-tgn.cisco.com/trex/doc/trex_stateless.html。
2023-11-24 17:27:09
901
原创 Elasticsearch知识
Elasticsearch本身是分布式搜索引擎。它的高可用、高性能就是通过分片实现的。主分片:一个索引可以划分成多个主分片,通过将主分片分布到不同的ES节点,从而实现高性能。副本分片:副本分片和主分片保持数据同步,和主分片不能分布在同一个节点,从而实现主分片的读能力的横向扩展,同时保证主分片不可用时实现故障转移。
2023-11-24 16:05:14
468
原创 SpringBoot的启动流程
springboot是依赖于spring的,比起spring,除了拥有spring的全部功能以外,springboot无需繁琐的xml配置,这取决于它自身强大的自动装配功能;并且自身已嵌入Tomcat、Jetty等web容器,集成了springmvc,使得springboot可以直接运行,不需要额外的容器,提供了一些大型项目中常见的非功能性特性,如嵌入式服务器、安全、指标,健康检测、外部配置等。springboot 是一个服务于框架的框架,简化了spring的配置。
2023-11-20 14:41:48
3612
原创 java调用c函数
JNI是Java Native Interface的缩写,JNI是JAVA平台专门用于和本地C代码进行相互操作的API,称为JAVA本地接口。
2023-11-17 16:15:49
298
原创 java 7-Zip-JBinding解压/压缩支持大部分压缩文件
【代码】java 7-Zip-JBinding解压/压缩支持大部分压缩文件。
2023-11-09 15:43:00
1552
原创 Windows11突然VM虚拟机无法运行报错与 Device/Credential Guard 不兼容
Windows11突然VM虚拟机无法运行报错与 Device/Credential Guard 不兼容
2023-10-21 15:48:49
1193
原创 zip包解压时报malformed input off : 0, length : 1
使用ZipArchiveInputStream而非ZipInputStream的原因主要有以下两点:支持更多的压缩格式:ZipArchiveInputStream是Apache Commons Compress库中提供的类,能够支持多种压缩格式,包括Zip、Gzip、Tar、Jar等。而ZipInputStream是Java标准库中的类,只能读取普通的Zip文件。因此,如果需要处理多种压缩格式的文件,使用ZipArchiveInputStream会更加方便。更多的选项和功能:ZipArchiveInp
2023-10-19 09:47:10
1788
原创 postgresql中文分词插件安装
- 就是需要给zhparser解析器取一个在sql里面可以使用的名称,一下“zh”则为名称 CREATE create text search configuration chinese (parser=zhparser);要使用 zhparser,首先需要安装 SCWS 分词库,SCWS 是 Simple Chinese Word Segmentation 的首字母缩写(即:简易中文分词系统)GitHub。作为解析器的全文搜索的配置。
2023-09-26 18:39:40
741
原创 mysql binlog同步数据
MySQL的二进制日志(Binlog)是一种事务日志,用于记录对数据库的更改操作。Binlog主要用于MySQL复制和恢复:复制: 从库通过拉取主库的binlog实现主从数据一致恢复: 通过重放binlog恢复数据丢失或误操作情况
2023-09-05 15:32:15
1412
原创 使用fio对磁盘性能进行压测
fio 是一个 I/O 工具用来对硬件进行压力测试和验证,支持 13 种不同的 I/O 引擎,包括:sync, mmap, libaio, posixaio, SG v3, splice, null, network, syslet, guasi, solarisaio 等等,I/O priorities (for newer Linux kernels), rate I/O, forked or threaded jobs, 等等。
2023-06-22 20:34:09
346
原创 首个区块链技术领域国家标准
6月1日《区块链和分布式记账技术参考架构》(GB/T 42752-2023)国家标准正式发布。这是我国首个获批发布的区块链技术领域国家标准,进一步加快了我国区块链标准化进程,为区块链产业高质量发展奠定了基础。
2023-06-16 11:22:45
271
原创 数据加解密算法介绍
数据加解密工具V1.0实现了SM2、SM3、SM4、SM9国密算法以及AES、DES/3DES、SHA1/SHA2、MD5、RSA国际算法,具体算法介绍见下表。算法名称算法类别应用领域算法特点备注SM2国密算法-非对称加密算法身份认证、数字签名、验签、密钥交换、通信传输SM2算法为非对称加密,基于ECC,由于该算法基于ECC,故其签名速度与秘钥生成速度都快于RSA。ECC 256位(SM2采用的就是ECC 256位的一种)安全强度比RSA 2048位高,但运算速度快于RSA。
2023-06-15 16:50:58
950
银河麒麟linux 4.19.90-17.ky10.aarch64 arm版sparkctl命令工具
2024-04-23
selenium自动化使用的107.0.5304.122版本chrome及对应的chromedriver
2024-04-13
openeuler-2203-LTS-SP1-x86-64的postgres-14安装包及安装shell
2024-03-31
Postgresql 数据库system_stats监控 插件
2022-05-10
centos7.9 devel、headers内核包
2022-03-23
centos7.7 kernel-headers-3.10.0-1062.el7.x86_64包
2022-03-21
iqi/qnsm+dpdk安装
2022-03-19
gcc-4.8.5-44.el7.x86_64相关包
2022-03-09
centos7.7 kernel-devel-3.10.0-1062.el7.x86_64 开发包
2022-03-07
centos7 iptables
2022-03-07
centos7.6 3.10.0-957.27.2.el7.x86_64内核包
2022-03-07
centos7 mysql客户端包
2022-03-04
centos7.2内核包kernel-3.10.0-327.el7.x86_64
2022-02-10
UniversalThemePatcher
2019-01-10
encache+jgroups集群缓存共享
2018-07-27
js bigdecimal
2014-10-15
apache jackrabbit 教程
2014-07-03
apache+tomcat集群配置教程
2014-04-19
activiti流程
2014-04-14
js图形报表
2014-03-20
flash 图形报表
2014-03-20
mave环境搭建
2014-03-10
velocity demo
2014-03-10
javaWeb安全验证漏洞修复总结
2013-12-14
java_https_ssl
2013-11-14
Spring配置定时器
2013-11-12
flash image silde show ( Open Source)
2013-10-10
html语言参考英文版.chm
2013-09-05
Cascading Style Sheet 样式表中文手册.chm
2013-09-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人