KOS平台上安装NiFi的完整指南：简单高效实现大数据流处理

目录

1 概述

2 安装准备

2.1 操作系统环境

2.2 Nifi版本

3 安装

3.1 安装Java

3.2 安装Nifi

3.3 配置Nifi

4 运行Nifi

4.1 启动Nifi服务

4.2 访问Nifi网页端

4.3 停止Nifi服务

---

1 概述

浪潮信息KOS是浪潮信息基于Linux Kernel、OpenAnolis等开源技术自主研发的一款服务器操作系统，支持x86、ARM等主流架构处理器，性能和稳定性居于行业领先地位，具备成熟的 CentOS 迁移和替换能力，可满足云计算、大数据、分布式存储、人工智能、边缘计算等应用场景需求。详细介绍见官网浪潮信息云峦服务器操作系统KeyarchOS_KOS服务器操作系统-浪潮信息

Apache NiFi 是一个易于使用，功能强大且可靠的系统，用于处理和分发数据。可以自动化管理系统间的数据流。它使用高度可配置的指示图来管理数据路由、转换和系统中介逻辑，支持从多种数据源动态拉取数据。NiFi原来是NSA的一个项目，目前已经代码开源，是Apache基金会的顶级项目之一。NiFi是基于Java的，使用Maven支持包的构建管理。 NiFi基于Web方式工作，后台在服务器上进行调度。用户可以将数据处理定义为一个流程，然后进行处理，NiFi后台具有数据处理引擎、任务调度等组件。详细介绍见官网Apache NiFi。

2 安装准备

2.1 操作系统环境

版本信息：KeyarchOS 5.8sp1

硬件平台：X86_64

2.2 Nifi版本

Nifi-1.9.2

https://nifi.apache.org/download.html

3 安装

3.1 安装Java

JDK1.8(已经在KOS AppSteam仓库发布)，可以通过yum install直接安装。

yum install java

3.2 安装Nifi

1、官网下载安装包：nifi-1.9.2-bin.tar.gz

https://nifi.apache.org/download.html

2、在存放目录下解压下载的nifi安装包

tar -zxvf nifi-1.9.2-bin.tar.gz

3.3 配置Nifi

1、进入解压目录下，修改/bin/nifi-env.sh中的Java环境：

将JAVA_HOME参数设置为jdk目录：

2、修改/conf/nifi.properties中的http配置：

 为避免冲突，修改端口号（默认为8080）为空闲端口号：

3、修改/conf/bootstrap.conf中的运行内存配置：

 设置初始堆大小与最大堆大小：

 4、添加到服务并启动：

ln -s /home/nifi-1.9.2/bin/nifi.sh /etc/init.d/nifi

service nifi start

5、配置服务脚本：

[root@localhost nifi-1.9.2]# cat > /etc/systemd/system/nifi.service << EOF

> [Unit]

> Description=nifi service

> After=network.target

>

> [Service]

> Type=forking

> LimitNOFILE=65536

> ExecStart=/home/nifi-1.9.2/bin/nifi.sh start

> ExecStop=/home/nifi-1.9.2/bin/nifi.sh stop

> User=root

> Restart=on-abort

>

> [Install]

> WantedBy=multi-user.target

> EOF

 

4 运行Nifi

4.1 启动Nifi服务

脚本创建完成后，直接使用systemctl命令启动nifi服务：

systemctl start nifi

systemctl status nifi

查看nifi运行状态：

systemctl status nifi

查看运行状态：./nifi status

4.2 访问Nifi网页端

浏览器访问localhost:9999/nifi

 按住并拖动Processor栏至画布页面即可添加处理器：

 在弹出的界面选择型号：

选定后点击APPLY即可添加处理器：

 除处理器外，nifi还具有数据流、模板、便签等常用组件，可以按需添加配置。

4.3 停止Nifi服务

systemctl stop nifi

systemctl status nifi

结束服务后，web页面立刻提示无法连接：