BERTsearch 项目使用教程

BERTsearch 项目使用教程

bertsearch Elasticsearch with BERT for advanced document search. 项目地址: https://gitcode.com/gh_mirrors/be/bertsearch

1. 项目的目录结构及介绍

bertsearch/
├── bertserving/
│   ├── __init__.py
│   ├── server.py
│   └── ...
├── docs/
│   ├── README.md
│   └── ...
├── example/
│   ├── create_documents.py
│   ├── create_index.py
│   ├── index_documents.py
│   └── ...
├── web/
│   ├── app.py
│   └── ...
├── .gitignore
├── LICENSE
├── README.md
└── docker-compose.yaml

目录结构说明

• bertserving/: 包含BERT模型的服务端代码，负责将文本转换为向量。
• docs/: 项目文档，包含README文件等。
• example/: 包含示例代码，用于创建索引、文档和索引文档。
• web/: 包含Web应用的代码，用于展示搜索结果。
• .gitignore: Git忽略文件配置。
• LICENSE: 项目许可证文件。
• README.md: 项目介绍和使用说明。
• docker-compose.yaml: Docker容器配置文件。

2. 项目的启动文件介绍

启动文件

• bertserving/server.py: 这是BERT模型的服务端启动文件，负责加载预训练的BERT模型并将文本转换为向量。
• web/app.py: 这是Web应用的启动文件，负责启动Flask应用，提供搜索界面。

启动步骤

1. 启动BERT服务:

   python bertserving/server.py
   

2. 启动Web应用:

   python web/app.py
   

3. 项目的配置文件介绍

配置文件

• docker-compose.yaml: 这是Docker容器的配置文件，定义了如何启动Elasticsearch和BERT服务。

配置文件内容

version: '3.7'
services:
  elasticsearch:
    image: docker.elastic.co/elasticsearch/elasticsearch:7.9.2
    container_name: elasticsearch
    environment:
      - discovery.type=single-node
    ports:
      - "9200:9200"
      - "9300:9300"
  bert:
    build: .
    container_name: bert
    environment:
      - PATH_MODEL=/cased_L-12_H-768_A-12
      - INDEX_NAME=jobsearch
    ports:
      - "5000:5000"

配置说明

• elasticsearch: 定义了Elasticsearch服务的配置，包括镜像、环境变量和端口映射。
• bert: 定义了BERT服务的配置，包括镜像构建路径、环境变量和端口映射。

通过以上配置，可以方便地启动Elasticsearch和BERT服务，进行高级文档搜索。

bertsearch Elasticsearch with BERT for advanced document search. 项目地址: https://gitcode.com/gh_mirrors/be/bertsearch