??斗地主捕鱼电竞提现秒到 广告位招租 - 15元/月全站展示
??支付宝搜索579087183领大额红包 ??伍彩集团官网直营彩票
??好待遇→招代理 ??伍彩集团官网直营彩票
??络茄网 广告位招租 - 15元/月全站展示
flume windows环境下的下载与安装运行

转载   2018-05-17   浏览量:543


第一次接触flume,记录下下载与运行过程

  1. flume下载地址://www.apache.org/dyn/closer.lua/flume/1.7.0/apache-flume-1.7.0-bin.tar.gz
  2. 下载完毕后直接解压进入到配置文件夹apache-flume-1.7.0-bin\conf? 下面创建一个文件test.conf输入以下内容:
# Name the components on this agent
?a1.sources = r1
?a1.sinks = k1
?a1.channels = c1

?# Describe/configure the source
?a1.sources.r1.type = netcat
?a1.sources.r1.bind = localhost
?a1.sources.r1.port = 50000
?a1.sources.r1.channels = c1
?
# Describe the sink
?a1.sinks.k1.type = logger

?# Use a channel which buffers events in memory
?a1.channels.c1.type = memory
?a1.channels.c1.capacity = 1000
?a1.channels.c1.transactionCapacity = 100

?# Bind the source and sink to the channel

?a1.sinks.k1.channel = c1


然后在apache-flume-1.7.0-bin\bin 目录下进入cmd界面输入:

flume-ng agent --conf ../conf --conf-file ../conf/test.conf --name a1 -property flume.root.logger=INFO,console

其中 flume.root.logger=INFO,console 仅为 测试开发环境 使用

-c/--conf 后跟配置目录,-f/--conf-file 后跟具体的配置文件,-n/--name 指定agent的名称


如果有弹出安全警告,输入R继续运行? 最后结果如下


运行成功后在本地windows上开启远程登录功能Telnet? 在控制面板—程序和功能—打开或关闭windows功能 当中勾选Telnet服务器和客户端


1)启动服务

打开一个cmd窗口(窗口-1),进入apache-flume-1.7.0-bin\bin文件夹,运行flume-ng.cmd命令启动Flume:

flume-ng agent --conf ../conf --conf-file ../conf/test.conf --name a1 -property flume.root.logger=INFO,console

2)发送消息

打开另一个命令行窗口(窗口-2),telnet连接到50000端口并发送信息Hello World!

telnet localhost 50000


在窗口-1可以看到接收到的消息:

注意事项:需要安装JDK 并配置jdk的环境变量。




转载自:https://blog.csdn.net/ycf921244819/article/details/80341502

招聘 不方便扫码就复制添加关注:程序员招聘谷,微信号:jobs1024



flume学习与总结记录
1.什么是flume??Cloudera开发的框架,实时收集数据??Flume学习的核心:agent的设计??官方文档,//flume.apache.org/FlumeUserGuide.html2.flume环境的搭建?下载地址://archive.cloudera.com/cdh5/??---选择对应版本?常规的解压安装操作??1)配置环境变量????e...
大数据之:Flume安装详解
0.软件版本下载//mirror.bit.edu.cn/apache/flume/1.集群环境Master172.16.11.97Slave1172.16.11.98Slave2172.16.11.992.下载软件包#Masterwget//mirror.bit.edu.cn/apache/flume/1.6.0/apache-flume-1.6.0-bin.ta...
flume实战教学练习新手必看
使用Flume关键就是写配置文件需求一:从指定网络端口采集数据输出到控制台conf的书写exampleconf:Asingle-nodeFlumeconfigurationNa
flume源码分析
flume源码分析,Flume的程序入口是orgapacheflumenodeApplicationmain,进入后会先进行命令行参数的解析及核对,使用的组件是orgapachecommonscli?;故呛芎糜玫?。
云计算大数据技术之Flume安装教程
云计算大数据技术之Flume安装教程。
Error:Couldnotfindorloadmainclassorg.apache.flume.tools.GetJavaProperty
Error:CouldnotfindorloadmainclassorgapacheflumetoolsGetJavaProperty。
Flume的几个基础概念
Flume的几个基础概念,从数据发生器接收数据,并将接收的数据以Flume的event格式传递给一个或者多个通道channal,Flume提供多种数据接收的方式,比如Avro,Thrift,exec等。
nginx+flume+hdfs搭建实时日志收集系统
nginx+flume+hdfs搭建实时日志收集系统。
Ceontos7安装Flume和问题
Ceontos7安装Flume及问题。Flume是一个强大的采集日志信息的工具,它适用大部分的日志采集场景。它的安装配置也非常简单,下面就一起来看看吧!
flume1.7TailDirsource重复获取数据集不释放资源解决办法
flume17TailDirsource重复获取数据集不释放资源解决办法。