NiFi安装

部署运行你感兴趣的模型镜像

一、系统要求

Apache NiFi可以在笔记本电脑运行,也可以在企业级服务器上运行。因此,所需的硬件和内存数量将取决于所涉及数据流的大小和性质。数据在NiFi处理时存储在磁盘上。因此NiFi需要为其各种存储库分配足够的磁盘空间,特别是内容存储库、流文件存储库和来源存储库。NiFi具有以下最低系统要求:

  • 需要21Java

  • 使用基于Python的处理器(beta功能)需要Python 3.9、3.10、3.11或3.12

  • Linux、Unix、Windows、macOS
  • Microsoft Edge、Mozilla FireFox、Google 、Safari

二、NiFi安装

1、下载

Apache Download Mirrors

2、上传并解压

put C:\Users\44862\Downloads\nifi-2.5.0-bin.zip /opt/software

unzip nifi-2.5.0-bin.zip

注意:需要将conf/nifi.properties中的nifi.web.https.host设置成0.0.0.0才可以从外面访问

3、启动

前台运行:bin/nifi.sh run

后台运行:bin/nifi.sh start

查看状态:bin/nifi.sh status

关闭服务:bin/nifi.sh stop

如果希望nifi.sh等待NiFi完成所有组件的调度后再退出,启动时这样写:

bin/nifi.sh start --wait-for-init 120

如果未提供超时,将使用默认超时15分钟

4、更改用户名密码

默认安装会随机生成用户名和密码,将生成的值写入应用程序日志。应用程序日志位于安装目录下的logs/nifi-app.log中。日志文件将包含Generated Username [USERNAME]Generated Password [PASSWORD]的行,

以下命令可用于更改用户名和密码:(密码要求12个字符以上

./bin/nifi.sh set-single-user-credentials <username> <password>

./bin/nifi.sh set-single-user-credentials e14b36e6-c37c-4a00-ab0d-ab42dbe4b8fa nifi_123456789

5、登录

现在NiFi已经启动,我们可以打开用户界面(UI)来创建和监控我们的数据流。要开始,打开网络浏览器并导航到https://localhost:8443/nifi。可以通过编辑NiFiconf目录中的nifi.properties文件来更改端口,但默认端口是8443。

Web浏览器将显示一条警告消息,指出由于初始化期间生成的自签名证书NiFi存在潜在的安全风险。接受潜在的安全风险并继续加载接口是开发安装的一个选项。自签名证书将在60天后过期。生产部署应提供来自受信任机构的证书,并更新NiFi密钥库和信任库配置。

接受自签名证书后访问NiFi将显示登录屏幕。

使用生成的凭据,在User字段中输入生成的用户名,在Password字段中输入生成的密码,然后选择LOG IN以访问系统。这将打开用户界面,此时该界面是一个用于编排数据流的空白画布:

您可能感兴趣的与本文相关的镜像

Python3.9

Python3.9

Conda
Python

Python 是一种高级、解释型、通用的编程语言,以其简洁易读的语法而闻名,适用于广泛的应用,包括Web开发、数据分析、人工智能和自动化脚本

### Apache NiFi 安装教程 #### 系统需求 在安装 Apache NiFi 之前,请确认您的系统满足以下最低要求: - **Java 版本**: 至少需要 Java 21 或更高版本[^1]。 - **内存**: 至少分配 2GB 的可用内存给 NiFi。 可以通过以下命令检查当前系统的 Java 版本是否符合要求: ```bash java -version ``` 如果未安装 Java 或者版本不符合要求,则需先完成 Java 的安装。 --- #### 下载与解压 NiFi 可以从官方下载页面获取最新版的 Apache NiFi。对于 Linux 平台,推荐使用 `.tar.gz` 格式的压缩包。假设目标版本为 `2.0.0-M4`,可以执行如下命令来下载并解压: ```bash wget https://downloads.apache.org/nifi/2.0.0-M4/nifi-2.0.0-M4-bin.tar.gz tar -xzvf nifi-2.0.0-M4-bin.tar.gz cd nifi-2.0.0-M4/ ``` 这一步完成后,会看到 NiFi 的基本目录结构[^3]: - `bin/`: 包含启动和停止服务的相关脚本。 - `conf/`: 主要配置文件所在位置,例如 `nifi.properties` 和 `flow.xml.gz`。 - `lib/`: 存放 NiFi 运行所需的核心库文件。 - `logs/`: 应用程序的日志记录路径。 - `web/`: Web 用户界面 (UI) 资源所在的目录。 - `work/`: 处理过程中产生的临时数据存储区域。 --- #### 配置环境变量 为了方便管理 NiFi,建议设置一些必要的环境变量。编辑用户的 shell 配置文件(如 `.bashrc`),添加以下内容: ```bash export NIFI_HOME=/path/to/nifi-2.0.0-M4 export PATH=$NIFI_HOME/bin:$PATH ``` 随后重新加载该配置文件以使更改生效: ```bash source ~/.bashrc ``` --- #### 修改配置文件 进入 `conf/` 目录,调整主要配置项以适配实际部署场景。以下是几个常见的修改选项[^3]: - 编辑 `nifi.properties` 文件,指定日志级别或其他性能参数。 - 如果需要自定义数据流逻辑,可更新 `flow.xml.gz` 中的内容。 注意:首次运行时,默认情况下无需手动干预这些文件即可正常启动。 --- #### 启动与验证 通过调用位于 `bin/` 目录下的脚本来控制 NiFi 实例的状态。具体操作方法如下所示: ##### 启动服务 ```bash ./bin/start-nifi.sh ``` 等待几秒钟后打开浏览器访问地址 http://localhost:8080/nifi ,应该能够看到图形化的用户界面[^3]。 ##### 查看状态 利用下面这条指令查询进程是否成功开启以及监听端口详情: ```bash ps aux | grep nifi netstat -tulnp | grep java ``` ##### 关闭服务 当不再需要继续测试的时候,随时都可以安全地关闭实例: ```bash ./bin/stop-nifi.sh ``` --- #### 总结 以上就是关于如何基于 Linux 操作系统快速搭建起一套完整的 Apache NiFi 开发环境的具体步骤说明。按照上述指引逐一实施每部分任务之后,相信很快就能掌握整个流程要点,并顺利开展后续数据分析等相关工作。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值