- 博客(108)
- 资源 (1)
- 收藏
- 关注
原创 LLM认知(一):Semantic uncertainty: Linguistic invariances for uncertainty estimation in NLG
其他:https://blog.youkuaiyun.com/qq128252/article/details/140023076
2024-09-11 16:45:33
406
原创 使用百度飞桨PaddleOCR进行OCR识别
在使用过程中需要安装库,可以依据代码运行过程中的提示安装。我使用的为,安装库为:我主要使用图片OCR以及PDF转DOCX文件,后者需要poppler,我使用的系统为windows.在此处进行下载:https://github.com/oschwartz10612/poppler-windows/releases/tag/v24.07.0-0解压后需要将poppler的bin路径加到系统环境变量path中5、pdf ocr代码样例:注意修改为自己的文件路径6、识别效果:原文件:识别效果:
2024-09-06 20:01:40
2264
原创 LLM知识编辑(一)Decoding by Contrasting Knowledge: Enhancing LLMs’ Confidence on Edited Facts
2024。
2024-09-05 16:28:33
232
原创 LLM应用(一):使用GPT-4自动从文档中构建问答对(Python 实现)
其中 model 参数可以指定您想⽤的模型,如 gpt-4 、 gpt-3.5-turbo 、 claude-3-opus-20240229 、 claude-3-sonnet-20240229。message为对话信息,包括设置的prompt和指令等。分为三步:读取文档;**最为关键的应该就是如何设计好的指令。问答对构建可以先生成问题再生成答案,也可以直接输出问答对。**代码如下:(实例为农业领域,需要根据自己的需要进行修改)在不破坏原有python环境下,可以使用。可以官网购买,或者淘宝。
2024-09-02 16:41:16
863
原创 KG+LLM(二) Think and Retrieval: A Hypothesis Knowledge Graph Enhanced Medical Large Language Models
2024-01-13 22:20:27
605
原创 缓解大语言模型(LLM)幻觉的可行方法探究(课程综述)
ChatGPT[1]为基于GPT(Generative Pre-trained Transformer,GPT)[2]架构的的通用型对话语言模型,GPT是一个基于Transformer[3]解码器结构的深度学习模型,由多个相同的Transformer块组成,其中每个Transformer块包括多头自注意力层和前馈神经网络层。通过自注意力机制,模型能够在生成每个单词时关注输入文本的不同部分,这有助于捕捉长距离依赖关系。
2024-01-13 17:05:02
1577
原创 KG+LLM(一)KnowGPT: Black-Box Knowledge Injection for Large Language Models
给定一个问题上下文QQsQtQQsQtQse1emQse1...em为问题实体集合,Qte1enQte1...en为答案实体集合),一个LLMfff,和一个知识图谱GGGGGG包含三元组(头实体,关系,尾实体),表示为hrt(ℎ,r,t)hrt,目标是学习一个提示函数fpromptQGfpromptQG,生成一个提示xxx,将QQQ。
2023-12-30 16:20:50
2266
3
原创 mnist手写数字数据集加载
路径为下载后的本地路径,尝试后仍报错,可能是因为源代码中。**尝试:**部分人推荐下载到本地,然后修改。数据集,第一次加载该数据集需要使用。**解决:**最终修改源码,去掉。在进行手写数字生成时需要使用。
2023-12-18 10:44:02
670
原创 python如何使用镜像安装库
3.中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/1.清华:https://pypi.tuna.tsinghua.edu.cn/simple。2.阿里云:http://mirrors.aliyun.com/pypi/simple/4.华中理工大学:http://pypi.hustunique.com/
2023-12-18 10:18:31
725
原创 python使用pymysql连接数据库报错err.OperationalError: (1698, “Access denied for user ‘root‘@‘localhost‘“)
python使用pymysql连接数据库报错err.OperationalError: (1698, "Access denied for user 'root'@'localhost'")
2022-10-19 10:44:32
4256
原创 对话诊断(X)2021Neurocomputing-Heterogeneous graph reasoning for knowledge-grounded medical DS
对话诊断相关论文阅读
2022-10-11 11:27:12
671
原创 对话诊断(X)2022IJCAI-My nose is running.Are you also coughing?:Building a Medical Diagnosis Agent with
对话诊断相关论文
2022-09-20 20:14:42
908
原创 对话诊断(X)Generative Adversarial Regularized Mutual Information Policy Gradient Framework for Automatic
对话诊断论文阅读
2022-09-18 20:48:46
462
原创 RuntimeError: Could not infer dtype of numpy.int64
RuntimeError: Could not infer dtype of numpy.int64问题:再写强化学习代码时,遇到该错误,代码如下,对于传的参数max_action=2.0,使用self.action_scale = torch.tensor(max_action)会报如上错误,主要是max_action变为了numpy.int64,所以不能用torch.tensor()class Actor(nn.Module): # def __init__(self, action_di
2022-05-11 15:43:27
7697
原创 TypeError: Cannot interpret ‘4‘ as a data type
TypeError: Cannot interpret ‘4’ as a data type问题:在写代码时,self.observations = np.zeros((self.max_size, state_dim),其中self.max_size和state_dim分别是两个参数,结果报错:TypeError: Cannot interpret '4' as a data type分析:numpy.zeros()参数为:numpy.zeros(shape, dtype=float, order
2022-05-11 15:17:39
3498
原创 ahocorasick安装
ahocorasick安装1.最近在安装ahocorasick,直接使用pip install pyahocorasick会报错说找不到合适的版本。(原来我一直以为可能和虚拟环境中其他库版本冲突了,就重新建立了一个虚拟环境)2.在网上搜索,看到有用conda的,不大合适,后来使用国产镜像源,pip3 install pyahocorasick -i https://pypi.tuna.tsinghua.edu.cn/simple/,安装成功。(在使用镜像源之前先使用了pip install pyaho
2022-05-11 11:09:16
6020
2
原创 hydra安装——AttributeError: module ‘hydra‘ has no attribute ‘main‘
AttributeError: module ‘hydra’ has no attribute ‘main’问题1.使用如下方法安装hydra,pip install hydra,运行后报错AttributeError: module 'hydra' has no attribute 'main'解决方法2.卸载之前安装的hydra,pip uninstall hydra3.应该使用pip install hydra-core --upgrade,安装后运行没有问题参考:https://g
2022-05-06 11:13:33
5994
5
原创 windows安装MPI及python安装mpi4py
· MPI(Message Passing Interface ),信息传递接口,是实现进程通讯的库,大多数时候是用于并行计算的算法设计。关于MPI的介绍可见:https://www.jianshu.com/p/ee595dd0354a1.下载到官网下载2.安装,将msmpisetup.exe放到想要的硬盘下,进行安装(记得要改变安装路径)3.添加环境变量,将bin目录添加到环境变量path中4.测试,在命令窗口中输入mpiexec ,出现如下帮助信息,则证明成功安装MS-MPI。5
2022-03-06 18:48:01
6256
1
原创 Matplotlib学习
Matplotlib学习官网:pyplot — Matplotlib 2.0.2 documentation· 散点图(Scatter)可参考:(3条消息) plt.scatter()_coder-优快云博客_plt.scattermatplotlib.pyplot.scatter(x, y, s=None, c=None, marker=None, cmap=None, norm=None, vmin=None, vmax=None, alpha=None, linewidths=None, v
2022-03-06 17:07:53
966
原创 tensorflow使用joblib保存与加载模型
tensorflow使用joblib保存与加载模型.doc1.tensorflow使用joblib保存模型:import joblibjoblib.dump(params, file_name)如图:2.tensorflow使用joblib加载模型:以一般的思路,使用如下代码是可以的:import joblibPolicy = joblib.load(args.load_path)然而报错:_pickle.UnpicklingError: invalid load key, 'x
2022-03-05 21:18:50
1354
原创 ModuleNotFoundError: No module named ‘termcolor‘,但pip3 show termcolor显示包已存在
ModuleNotFoundError: No module named ‘termcolor‘,但pip3 show termcolor显示包已存在最近运行程序时用到了termcolor库,环境中是有的,但一直报No module named ‘termcolor‘,经搜索发现可能是tensorflow在import termcolor时可能存在路径不对应问题。之后我只好卸载,然后在pycharm中install,就成功了,目前我还没有找到其他更好的办法。...
2021-09-23 16:44:20
3319
原创 产生\ufeff 问题的原因及解决办法
问题:在使用utf-8读取文件时,出现\ufeff。解决方法:网上搜索后发现原来是文本保存时包含了BOM(Byte Order Mark,字节顺序标记,出现在文本文件头部,Unicode编码标准中用于标识文件是采用哪种格式的编码)导致的,解决方法是使用 utf-8-sig 编码:结果:...
2021-09-13 17:13:05
2531
原创 如何安装rand-param-envs
如何安装rand-param-envs1.在github下载安装包:https://github.com/dennisl88/rand_param_envs2.找到文件中的setup.py文件3.打开cmd,运行python setup.py install
2021-09-11 22:48:48
233
原创 Windows10安装mujoco-py==1.50.1
Windows10安装mujoco-py==1.50.11.Mjpro150安装1.1去https://www.roboti.us/index.html下载对应的压缩包1.2在系统主目录下新建.mujoco文件夹。通常来讲系统主目录就是C:\Users\xxx,如果你的电脑无法直接右键创建.mujoco文件夹,那么运行cmd,用命令md .mujoco回车创建。1.3将下载的mjpro150_win64.zip解压到 .mujoco 文件夹下,修改文件夹名字为 mjpro150。1.4下载秘钥
2021-09-10 10:23:11
1669
原创 UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0x97 in position 8: illegal multibyte sequence
UnicodeDecodeError: ‘gbk’ codec can’t decode byte 0x97 in position 8: illegal multibyte sequence今天读取文件时出现了这个错误:UnicodeDecodeError: ‘gbk’ codec can’t decode byte 0x97 in position 8: illegal multibyte sequence突然想起读取的文件时UTF-8编码的,因此代码应该如下:with open(info_d
2021-09-09 19:21:38
1192
原创 中文json保存
中文json保存想要保存中文的json数据,例如:patient_json = { '个人信息':{ '姓名':'', '性别':'', '年龄':'', '出生日期':'', '民族':'', '职业':'', '婚姻状况':'', '病案号':'', '科别':'' },}如果使用with open(output_file, 'w')
2021-09-09 19:09:51
2216
原创 使用mujoco报错:Missing path to your environment variable.
使用mujoco报错:Missing path to your environment variable问题:最近想要使用pycharm在本地使用服务器的环境运行服务器的程序,按照https://www.jb51.net/article/195691.htm步骤配置后,尝试运行import mujoco_py,报错:Missing path to your environment variable. Current values LD_LIBRARY_PATH= Please add fo
2021-09-08 21:47:05
1277
3
原创 机器学习sklearn.metrics.pairwise.rbf_kernel介绍
使用:sklearn.metrics.pairwise.rbf_kernel(X, Y=None, gamma=None)介绍:计算X和Y之间的rbf(高斯)内核:K(x, y) = exp(-gamma ||x-y||^2)参数说明Xarray of shape (n_samples_X, n_features)Yarray of shape (n_samples_Y, n_features)gammafloat, default None(如果为None
2021-09-05 16:45:34
1620
原创 numpy学习(二)矩阵乘法
numpy的5种乘法::矩阵中的数据连乘(np.prod):逐元素相乘(*):矩阵乘(dot):叉乘(np.cross):外乘(np.outer)代码:###################l1 = [[1, 2, 3], [4, 5, 6]]l2 = np.array(l1)for i in range(len(l1)): l3 = [np.prod(l2[i])] print(l3)#################a = mat([[1, 2, 3], [4,
2021-09-05 16:40:29
1866
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人