【橘子大模型】使用text2vec向量化文本(上)

这是对于学习ai的一次尝试,使用向量化来把数据向量化之后接入向量数据库(我用的是ElasticSearch)。进而形成向量库实现向量搜索。从来来使用rag功能。当然本文侧重于如何使用该库进行向量化。

1、Python环境

我的mac电脑上的py环境是3.13,这个版本说实话有点新了。有不少兼容问题,但是py有一个venv的虚拟环境的功能,可以隔离我们的每一个环境,你再这个环境安装的依赖不会影响到其他虚拟环境,也不会影响到本地环境。类似于一个虚拟机这样吧。

pip install torch 
conda install pytorch
pip install -U text2vec

以上是如何安装text2vec的命令,我担心依赖版本冲突所以我们先创建虚拟环境。

1.1、创建虚拟环境

为了后面好管理,我们来创建一个专门为了这个库使用的目录。我这里就是
/Users/levi/develop/project/llm/embedding/text2vec

然后我们来初始化这个虚拟环境。
python3 -m venv /Users/levi/develop/project/llm/embedding/text2vec/myenv

然后我们来激活这个虚拟环境。
source /Users/levi/develop/project/llm/embedding/text2vec/myenv/bin/activate

ok,此时你就位于这虚拟环境了。你也可以执行deactivate来退出虚拟环境,当然了这里只是退出你的客户端,不影响使用。

1.2、安装库

我们先不退出虚拟环境,我们在该环境中安装我们的text2

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值