【NIFI】 Apache NiFI 安装及简单的使用

NiFI介绍

　　NiFi（NiagaraFiles）是为了实现系统间数据流的自动化而构建的。虽然术语“数据流”用于各类上下文，但咱们在此处使用它来表示系统之间的自动和管理信息流

　　官网地址：http://nifi.apache.org/

　　文档：http://nifi.apache.org/docs.html

　　

NiFi架构

 　　

NiFI安装

　　环境要求：a、须要Java 8或更高版本

　　　　　　　b、支持的操做系统：Linux、Unix、Windows、Mac OS X

　　一、下载安装包

　　　　命令：wget -b http://mirror.bit.edu.cn/apache/nifi/1.8.0/nifi-1.8.0-bin.tar.gz

　　二、解压安装包、便可使用

　　　　命令：tar -zxvf nifi-1.8.0-bin.tar.gz

　　　　目录以下：
　　　　　　

　　三、配置文件（ nifi-1.8.0/conf/nifi.properties ）、可使用默认配置，根据本身状况进行修改

　　　　　　

　　四、操做NIFI，启动的时候，比较慢，注意机器内存是否足够

　　　　后台启动命令：./bin/nifi.sh start

　　　　前端启动命令：./bin/nifi.sh run

　　　　关闭命令：./bin/nifi.sh stop

　　　　首次启动NiFi时，会建立如下文件和目录：

 

• • content_repository

  • database_repository

  • flowfile_repository

  • provenance_repository

  • work 目录

  • logs 目录

  • 在conf目录中，将建立flow.xml.gz文件

 

　　五、启动后，使用浏览器进行访问，地址：http://ip:8080/nifi

　　　　　　

NIFI简单使用

　　不理解NIFI是作什么的，看一个简单的例子（同步文件夹）吧，帮助理解

　　一、从工具栏中拖入一个Processor，在弹出面板中搜索GetFIle，而后确认
　　　　   

　　二、配置GetFile，设置结束关系、输入目录、保留源文件，其余设置能够不动，输入目录中有文件：file.txt（内容为abc）。

　　　　      

            

　　三、从工具栏中拖入一个Processor，在弹出面板中搜索PutFIle，而后确认，如第一步

　　四、配置PutFile，设置结束关系、输出目录，其余设置能够不动，输出目录为空文件夹

　　　　   

　　五、将GetFIle与PutFIle关联起来，从GetFIle中心点击，拖拉到PutFIle上

　　　　   

　　六、右键启动GetFIle与PutFIle，能够看到结果，输入目录中的文件同步到，输出目录中了

　　　　

　　

　　注意：操做过程当中，注意错误排查

　　　　一、Processor上的警告

　　　　　　

　　　　二、Processor上的错误