- 博客(85)
- 资源 (3)
- 收藏
- 关注
原创 基于peft的lora进行模型qwen0.5的微调、合并、转换为.gguf
2、解压后切换到../../llama.cpp-master/ 目录下执行 cmd 并运行 pip install requirements.txt 即可等待安装(注意:这个操作可能会影响到你的已有程序的依赖,由于本人没有采用python 虚拟环境,故出现了依赖问题,最后 升级pytorch--gpu来修复的,因为这个脚本会默认将当前环境的pytorch 切换为 pytorch--cpu)现在我们微调后的模型属于自己的本地模型,如果想要做后续的量化或者使用ollam进行部署就有必要进行格式转换。
2025-03-22 16:50:17
1065
原创 如何使用transformers的Trainer工具进行BERT模型的训练
为了比较系统的学习大模型的训练与应用有了该样例,仅供由此爱好的初学者参考和给自己留存。本文将以去哪网酒店预订评论数据作为训练材料进行模型训练,力求达到输入中文描述,模型自动匹配该描述是好评还是差评。
2025-03-13 16:01:09
469
原创 Python Torch 函数学习
通过反向传播算法,我们可以计算出损失函数关于模型参数的梯度,并使用优化算法(如梯度下降)来更新参数,从而最小化损失函数。正则化项通过惩罚模型参数的复杂度来限制模型的复杂度,从而提高模型的泛化能力。在分类问题中,模型会输出一个概率分布,表示样本属于各个类别的概率,而交叉熵损失则通过比较这个预测分布与真实分布来计算损失。是 PyTorch 中所有神经网络模块的基类,提供了模型的基础功能,如参数的管理、网络前向传播等。1、损失函数提供了评估模型性能的方法。通过比较不同模型的损失值,我们可以选择性能最佳的模型。
2025-03-08 15:01:28
638
原创 Dify +deepseek-free-api 实现API对话
当前火爆的Deepseek燃遍了祖国的大江南北,做为一个牛马级别的程序员总想做点什么,哈哈,本文就介绍如何使用deepseek-free-api 免费使用API来通过DIFY做点什么。
2025-02-19 16:47:18
1187
原创 flask_sqlalchemy relationship 子表排序
使用flask_sqlalchemy 的orm 时总不可避免的遇到子表排序问题。
2025-01-13 11:27:32
331
原创 flask-admin 在modelview 默认视图下重写create_model_actions来实现列表数据的批量处理actions
在使用flask-admin 中modelview默认的视图时,有时需要扩展额外的action来实现特定效果,如添加基于列表的批量处理事件。
2025-01-09 13:59:32
804
原创 flask-admin 非自定义modelview下扩展默认视图(base.html)
在默认视图下实现某些统一的业务需求,如想改变默认视图的某些样式等。本文想阐述的是在默认视图下添加“面包屑”效果。
2025-01-06 16:24:02
614
原创 flask-admin 框架下添加menu_links 菜单
在使用flask-admin框架默认VIEW的UI进行开发时,我们更多时候需要将一些菜单排布到左边一些在右边,比如登录/登出 按钮往往在右边,其实框架提供能类似的能力。
2024-12-28 13:56:49
598
原创 flask-admin 在modelview 视图中重写on_model_change 与after_model_change
当我们在使用flask-admin进行WEB开发时应该第一时间想到的是竟可能使用框架推荐的modelView模型,其次才是自定义模型 baseview,因为只有modelview模型下开发才能最大限度的提高效率。
2024-12-28 10:46:00
516
原创 flask-admin 模型视图(modelView)中重写after_model_delete与on_model_delete
当我们在使用flask-admin进行WEB开发时应该第一时间想到的是竟可能使用框架推荐的modelView模型,其次才是自定义模型 baseview,因为只有modelview模型下开发才能最大限度的提高效率。
2024-12-28 10:39:49
551
1
原创 flask-admin modelview 中重写get_query函数
flask-admin框架中提供的模型视图默认是显示表实体中的所有列表数据,如果想通过某种条件限制初始列表数据,那么久需要重写一些方法才能实现。
2024-12-23 17:10:31
721
原创 flask-admin的modelview 实现list列表视图中某个列字段值翻译
flask-admin 开发中modelview视图是非常强大的,但文档写的很难受,只能通过源码慢慢摸索学习,一点点记录。
2024-12-21 17:16:46
445
原创 wtforms+flask_sqlalchemy在flask-admin视图下实现日期的修改与更新
在flask-admin 的modelview视图下实现自定义视图的表单修改/编辑是件不太那么容易的事情,特别是想不自定义前端view的情况下。
2024-12-21 12:08:29
774
原创 flask-admin+Flask-WTF 实现实现增删改查
1、自定义视图需要集成baseview基类,特点是集成这个基类后增删改查都需要自己去实现2、务必要实现 @expose('/')的函数重构(默认进入这个视图模块的路径)4、样例代码中的@expose('/detail/<string:news_id>') 只是演示传参方式 ,将业务导流到了其他的API实现5、样例代码中的is_accessible与inaccessible_callback 函数是权限控制用的,本文不做介绍。
2024-12-20 17:33:18
1349
原创 境内部署DIfy(中篇)
2、修改dify/docker/ 下的docker-compose.yaml 文件,将其中的镜像逐一镜像替换为自己能找到的镜像。接 本文上篇中已经讲述了比较友好的一种境内安装Dify 的方式,这种方式可以拉取到最新的镜像源,最新的版本,最为推荐的方案。1、不论是方案一还是方案二,可能会出现pg数据库无法启动的问题可以通过 docker compose ps -a 查看运行中的镜像容器列表,并找到未能成功启动容器的ID或名称。3、容易出现端口冲突问题,只能根据问题就问题来解决。
2024-11-08 15:20:59
5445
原创 境内部署DIfy(上篇)
由于近2年大模型的火热催生出很多业务场景,这也迫使我们这些老一辈的程序搬运工去接触新事物,“工欲善其事必先利其器”,先从大模型应用开始摸索,网上大把工具,再三思考后决定先从Dify开始,因为其最简单,资料最全。但由于外界环境的变化(不知什么原因,境外官方镜像源已经被封,无法拉取)导致网上很多资料都已经过时,无法照猫画虎,经过一系列的折腾后总结了这篇文章,作为给自己的笔记。
2024-11-08 14:08:32
6954
4
原创 centos7 部署 Ollama,过程及遇到的问题(下篇)
给出了答案),简单说就是由于我们修改了端口号会导致ollama list、ollama ps 等命令无法执行,只能执行ollama --version.我们带着端口号去访问即可。3、异常:Error: could not connect to ollama app, is it running?2、通过Ollama 启动模型后,只能本地访问的问题。1、OllamaAi设置外网访问。
2024-11-06 16:59:02
2465
原创 centos7 部署 Ollama,过程及遇到的问题(中篇)
4、在[Service]下边增加一行:Environment=“OLLAMA_HOST=0.0.0.0:8080”,端口根据实际情况修改。1、在线安装(由于国内github的原因安装比较慢,预计2个小时内)3、 通过Ctrl+D 退出默认的通讯。9、ps显示当前正在运行的模型情况。2、 通过Ollama安装。5、重载daemon文件。6、启动ollama服务。
2024-11-06 16:49:41
1932
原创 centos7 部署 Ollama,过程及遇到的问题(上篇)
9、创建软连接(可以通过whereis python查询路径,默认:/usr/local/bin/python3)5、先安装Python3的安装依赖(可以选择 yum install gcc、zlib....)2、下载python3.11.2(会下载到当前目录)3、解压压缩包(会解压到当前目录)4、初始化python 文件配置。5、更新与检查yum信息。11、pip3 安装。4、更新新的yum缓存。12、检查是否正确安装。
2024-11-06 16:24:04
1539
原创 windows环境基于python 实现微信公众号文章推送
1、python 2.7 或者 python3.x2、windows 可以通过 “python -m pip --version” 查看当前的pip 版本3、windows 系统。
2024-08-22 10:58:37
1131
原创 基于supervisor制作基于环境变量配置的redis
centos7.x,redis-6.2.6.tar.gz,CentOS-Base.repo,epel.repo2、 epel.repo3、 start_shell.sh4、supervisord.conf5、redis-6.2.6.tar.gz 下载对应版本的redis如下截图: 7、Dockerfile制作 :材料备齐后只需要执行docker build -t 容器名:v1.0 . 即可亮点:1、针对下列截图中的参数修改只需要使用环境变
2024-08-02 10:17:45
570
原创 环境变量法来实现Docker中nginx配置文件参数的动态修改
Docker进入大众的视野已经7个年头了(国内火起来),可谓是经历了多次的大热大冷,走到今天我觉得它还是一个中小企业实现运维自动化的不二选择。18年接触Docker时根据公司业务制作了一系列的订制镜像,今天重启基础服务升级。将制作经验分享出来。1、在docker run -it 镜像名:版本 -e 指定环境变量文件 -v指定映射文件目录 -d 后台运行。执行命令:docker build -t 镜像名:版本 .
2023-06-25 14:03:12
1656
原创 Zull与SpringCloud
特别声明:本博客是个人为记录而复制https://www.cnblogs.com/jing99/p/11696192.html的博文,再次特别说明SpringCloud之Zuul网关原理及其配置 Zuul是spring cloud中的微服务网关。网关: 是一个网络整体系统中的前置门户入口。请求首先通过网关,进行路径的路由,定位到具体的服务节点上。 Zuul是一个微服务网关,首先是一个微服务。也是会在Eureka注册中心中进行服务的注册和发现。也是一个网关,请求应该通过Zuul来进行...
2022-11-30 14:02:49
298
原创 Docker 容器中实现nginx服务启动前替换指定文件夹下的特定字符串
#!/bin/bashecho "update supervisor.config !"if [ ! -d "/usr/local/pys/" ];thenmkdir -p /usr/local/pys/elseecho "文件夹/usr/local/pys已经存在"ficd /usr/local/pys/for file in $(ls *)do python $filedone echo "没有需要执行的py脚本"cd /etc/nginx/conf.dfor fil..
2022-04-22 13:59:47
3266
原创 树莓派4B之有源蜂鸣器(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、火焰传感器模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚2(物理编号,VCC,5V),针脚6(物理编号,GND,回路),18(物理编号 ,IO信号)分别对应传感器的VCC,GND,IO脚。3、编写G.
2020-11-29 15:09:27
3795
3
原创 树莓派4B之超声波传感器模块(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、火焰传感器模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚2(物理编号,VCC,5V),针脚6(物理编号,GND,回路),18(物理编号 ,ECHO信号),7(物理编号,TRIGGER信号)分别对应传感器的VCC,
2020-11-29 15:00:39
6405
5
原创 树莓派4B之声音传感器模块(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、火焰传感器模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚2(物理编号,VCC,5V),针脚6(物理编号,GND,回路),18(物理编号 ,GPIO信号)分别对应传感器的VCC,GND,DO脚。3、编.
2020-11-29 14:44:23
3160
原创 树莓派4B之烟雾传感器模块(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、火焰传感器模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚2(物理编号,VCC,5V),针脚6(物理编号,GND,回路),18(物理编号 ,GPIO信号)分别对应传感器的VCC,GND,DO脚。3、编写GP
2020-11-29 14:31:12
4225
7
原创 树莓派4B之雨滴雨水传感器模块(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、火焰传感器模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚1(物理编号,VCC,3V),针脚6(物理编号,GND,回路),18(物理编号 ,GPIO信号)分别对应传感器的VCC,GND,DO脚。感应区.
2020-11-29 14:10:58
2908
原创 树莓派4B之光敏传感器模块(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、火焰传感器模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚1(物理编号,VCC,3V),针脚6(物理编号,GND,回路),18(物理编号 ,GPIO信号)分别对应传感器的VCC,GND,DO脚。3、编写GP
2020-11-29 14:00:21
4916
5
原创 树莓派4B之火焰传感器模块(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、火焰传感器模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚1(物理编号,VCC,3V),针脚6(物理编号,GND,回路),18(物理编号 ,GPIO信号)分别对应传感器的VCC,GND,DO脚。3、编写G.
2020-11-29 13:28:55
4437
4
原创 树莓派4B之红外避障模块(python3)
背景本人最因工作原因接触到各种电路板,传感器,而自己又是一个小白,随意在其他朋友的推荐下决定从树莓派开始玩传感器;本例子为树莓派控制红外避障传感器材料1、树莓派4b2、红外避障模块3、导线操作1、通过xshell 工具来连接树莓派4B,输入命令gpio readall 来获取当前树莓派的针脚2、用导线连接树莓派的针脚1(物理编号,VCC,3V),针脚6(物理编号,GND,回路),18(物理编号 ,OUT信号)分别对应传感器的VCC,GND,OUT脚。3、编写GPI
2020-11-29 13:12:55
3657
原创 海康摄像头SDK开发之样例调试(JAVA)
背景最近鉴于项目的原因开始着手开发物联网系统,提到物联网那摄像头对接是怎么也逃不掉的一个设备,而海康,大华,华为摄像头成了挥之不去的优选对象,本片文章主要记录海康摄像头对接样例的调试,通过这篇文章希望后续探索者可以做到拿来即用。材料1、PC一台2、海康DS-2DE**系列PTZ球机(注:根据海康官方的说法,该样例适配与所有型号的提供二次开发的摄像头)3、路由器,网线操作1、在海康官网(https://www.hikvision.com/cn/download_61.html)SD
2020-11-27 11:44:31
3443
原创 SpringBoot 基于Aspect实现多数据源,支持hive数据源(一)
项目背景: 最近在摸索中接触大数据展示项目,提到大数据统计就不得不解决多数据源,动态数据源问题,当然这些问题可以通过其他方案替代,但响应的需要付出一定的代价。本笔记中主要探讨的是在一个简单的springboot 项目中引入多种数据源,用户根据业务自动切换响应的数据源进行业务统计,或者在一个API中实现多数据源联合统计。工具: STS施工:新建项目工程:...
2019-11-18 11:54:07
702
原创 hadoop生态笔记之livy
鸣谢以下博文提供的支持:1、https://blog.youkuaiyun.com/u013063153/article/details/741713622、https://blog.youkuaiyun.com/gx304419380/article/details/798684043、http://livy.incubator.apache.org/背景:Apache Spark提供的两种基于命令...
2019-06-04 17:37:07
938
原创 HIVE 学习笔记之创建表和查询biao
鸣谢: 本笔记中不论测试数据还是使用方式都参考了下面几位博主的博客内容,故本文只作为个人学习记录。 https://blog.youkuaiyun.com/zimou5581/article/details/82383906 https://blog.youkuaiyun.com/u010003835/article/details/80671367 htt...
2019-05-23 17:48:07
1047
海康SDK二次开发样例(JAVA)
2020-11-27
postgresql-9.2.24-1.el7_5.x86_64
2019-04-29
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人