Robinhood Policy Engine 安装与配置指南

Robinhood Policy Engine 安装与配置指南

1. 项目基础介绍

Robinhood Policy Engine 是一个用于管理大型文件系统的多功能工具。它维护了一个文件系统元数据在数据库中的副本，可以随时查询。通过定义基于属性的策略，它可以对文件系统条目进行批量操作，提供快速的 'find' 和 'du' 克隆，并通过其 Web UI 和命令行工具为管理员提供文件系统内容的全局视图。

主要编程语言：C、Python

2. 项目使用的关键技术和框架

• 数据库：使用 MySQL 或 MariaDB 存储文件系统信息。
• 并行处理：为了高效处理大型文件系统，项目设计为并行执行所有任务。
• Lustre 文件系统支持：为 Lustre 文件系统提供高级功能，如按 OST 或池列出/清除文件，读取 MDT 变更日志等。

3. 项目安装和配置的准备工作与详细步骤

准备工作

• 确保系统中已安装以下依赖：

  • glib2-devel
  • libattr-devel
  • mysql-devel 或 mariadb-devel
  • s-nail
  • bison
  • flex
  • jemalloc
  • jemalloc-devel

• 对于支持 Lustre 文件系统，还需要安装：

  • lustre 或 lustre-client
  • lustre-devel (Lustre >= 2.15)

• 安装 Git 和自动工具：

  yum install git automake autoconf libtool
  

详细安装步骤

从源代码安装

1. 下载源代码包并解压：

   tar zxvf robinhood-3.x.x.tar.gz
   cd robinhood-3.x.x
   

2. 配置并构建：

   ./configure
   make rpm
   

   RPM 包将生成在 'rpms/RPMS/arch' 目录下。

从 Git 仓库安装

1. 克隆 Robinhood 源代码：

   git clone https://github.com/cea-hpc/robinhood.git
   cd robinhood
   git checkout master
   

2. 运行自动生成脚本：

   sh autogen.sh
   

3. 接下来参考从源代码包构建的步骤。

使用源 RPM 包安装

1. 创建源 RPM 包：

   ./configure --enable-dist
   make srpm
   

2. 从源 RPM 包构建：

   rpmbuild --rebuild robinhood-3.0*.src.rpm
   

   要为 Lustre 文件系统构建 Robinhood 二进制 RPM 包，运行：

   rpmbuild --rebuild robinhood-3.0*.src.rpm --with lustre --define "lversion x.y"
   

   其中 x.y 是目标 Lustre 版本（例如 2.7）。

配置

1. 安装 MySQL 服务器：

   yum install mysql-server mysql
   

2. 启动数据库引擎：

   systemctl start mariadb
   

3. 使用配置助手脚本创建数据库：

   rbh-config create_db
   

4. 将数据库密码写入只有 root 可读的文件中（例如 /etc/robinhood.d/.dbpassword）。

5. 对于 Lustre 文件系统，注册 Robinhood 作为 MDT 变更日志消费者：

   rbh-config enable_chglogs
   

6. 配置文件示例位于 /etc/robinhood.d/templates/。也可以使用 --template 选项生成带有文档的配置文件模板：

   robinhood --template=<template_file>
   

7. 执行初始扫描以初始化 Robinhood 数据库：

   robinhood --scan --once
   

8. 根据文件系统配置守护程序选项，例如在 /etc/sysconfig/robinhood.<fsname> 中：

   RBH_OPT="--readlog --run=a"
   

完成上述步骤后，您应该已经成功安装和配置了 Robinhood Policy Engine。