Flume任务
|
|
· 执行Flume任务的执行主机节点必须安装Flume agent和JDK。 · Flume任务依赖Java环境和Flume环境，请确保任务运行节点的环境已正确配置。 · Flume任务启动成功后，任务会一直处于“正在运行”状态，请勿在作业设计时将Flume任务作为中间环节使用。 · Flume任务仅能监控到Flume Agent启动及存活情况，详细的运行日志请在指定的日志中查看。 |
该功能用于新增或编辑Flume任务。新增和编辑Flume任务时，参数类别不完全相同，请以实际页面为准。
在数据集成页面的左侧导航树中选择[任务管理/任务列表]，进入任务列表页面。
单击任务列表左上角的<新增>按钮，弹出新增任务窗口。
新增任务窗口，选择任务类型为“Flume任务”，单击<跳转任务设计页面>可跳转至任务设计页面，用户可根据实际需要进行任务设计。
执行主机：集群中安装了Flume服务客户端的节点IP。
端口号：缺省端口为22，此处端口指利用SSH通道连接执行主机的端口号。
登录用户：缺省为root，此处不可更改。
登录密码：该节点的root用户密码。
配置文件名：自定义配置文件和Flume Agent运行日志文件，配置文件扩展名为“文件名称.conf”，日志文件为“文件名称_standard.log”。
文件夹路径：指定Flume任务的配置文件和日志文件存放路径，必须为已存在路径，默认是：/usr/hdp/3.0.1.0-187/flume/conf/。
JAVA_HOME：指定JDK安装路径，默认是：/usr/local/openjdk1.8.0_172。
FLUME_HOME：指定Flume的安装路径，默认是：/usr/hdp/3.0.1.0-187/flume。
监控端口：Flume Agent的监控端口，可通过http://ip:port/metrics查看Agent的运行报告信息。