clip_as_service学习过程（二）——clip主要的功能

最新推荐文章于 2025-10-05 09:43:37 发布

原创

最新推荐文章于 2025-10-05 09:43:37 发布 · 1k 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#学习

文章介绍了CLIP客户端库的用法，包括使用encode函数对文本和图像进行编码，生成固定长度的向量表示。此外，还展示了如何以异步方式处理大量数据，以及如何使用indexing进行数据索引和searching进行内容搜索。示例代码涵盖了不同的输入类型和操作流程。

参考链接:https://clip-as-service.jina.ai/user-guides/client/#async-encoding

一、encoding()_编码

clip_client提供 encode（）函数，允许您以流和同步/异步方式将句子、图像发送到服务器。这里的编码意味着获取文本或图像的固定长度矢量表示。
encoding()接收两种类型的输入，输入不同，输出的数据类型也随之不同
1、输入可迭代的字符串类型，例如字符串列表，字符串元组，字符串生成器，对应的输出的是numpy.ndarray.
2、输入可迭代的Document数据类型，例如List[Document], DocumentArray, Generator[Document]，对应的输出的数据类型是DocumentArray

1、作为文档可迭代对象的输入

类型url格式，包括相对路径，绝对路径http，url等都被视为图片数据，否则视为句子，
下面实例中的’apple.png’为本地的一张图片,'https://bpic.588ku.com/element_origin_min_pic/19/05/24/f862579f1d73afc60967a706238eac6d.jpg’是网络上的一张图片路径,

from clip_client import Client

c = Client('grpc://127.0.0.1:51000')

r = c.encode(
    [
        'she smiled, with pain',
        '追风赶月莫停留，平芜尽处是春山！',
        'apple.png',
        'https://bpic.588ku.com/element_origin_min_pic/19/05/24/f862579f1d73afc60967a706238eac6d.jpg',
        'data:image/gif;base64,R0lGODlhEAAQAMQAAORHHOVSKudfOulrSOp3WOyDZu6QdvCchPGolfO0o/XBs/fNwfjZ0frl3/zy7////wAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAACH5BAkAABAALAAAAAAQABAAAAVVICSOZGlCQAosJ6mu7fiyZeKqNKToQGDsM8hBADgUXoGAiqhSvp5QAnQKGIgUhwFUYLCVDFCrKUE1lBavAViFIDlTImbKC5Gm2hB0SlBCBMQiB0UjIQA7',
    ]
)
print(r)

输出如下
在这里插入图片描述

2、作为文档可迭代对象的输入

此功能使用 DocArray，它作为上游依赖项一起安装。您不需要单独安装 DocArray。

from clip_client import Client
from docarray import Document
c = Client('grpc://127.0.0.1:51000')

da = [
    Document(text='she smiled, with pain'),
    Document(uri='apple.png'),
    Document(