自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

请叫我大师兄

看文章记得点个赞哟

  • 博客(4)
  • 收藏
  • 关注

原创 Flume 原理解析

flume:水道;笕槽;引水槽,source:水源,channel:水渠,sink:水槽一、Flume简介Flume 初始的发行版本目前被统称为 Flume OG(original generation),属于 cloudera。重构后的版本统称为 Flume NG(next generation);Flume 纳入 apache 旗下,改名为 Apache Flume。二、Flume特点flume是

2020-12-04 17:43:02 360

原创 flume ChannelSelector -- channel 选择器

首先是flume中三个组件的单词的意思,flume:水道;笕槽;引水槽,source:水源,channel:水渠,sink:水槽。见文知意,就是水从源头流出来,经过水渠或者管道,最终流到终点,也就是水槽了。之前总是flume的叫着,也不知道是啥意思,今天查了一下,再看其他几个组件的意思,这个工具的功能不言而喻了,就是针对像水一样的数据流处理的。flume channel selectors允许给一个source可以配置多个channel的能力。这种模式有两种方式,一种是用来复制(Replication),

2020-12-04 15:03:51 634

原创 gradle repository 设置国产阿里镜像仓库地址,加速下载jar包

gradle使用的不多,大都是之前使用的maven,知道maven可以设置阿里的镜像仓库地址,加快jar包下载的速度。换到gradle之后,也有这么个设置,可以使得gradle项目的jar包下载速度加快,可以分分钟的下载完jar包。只需要简单的设置一下仓库设置。//做全局配置allprojects { apply plugin: 'idea' apply plugin: 'maven' apply plugin: 'java' tasks.withType(Java

2020-12-02 15:19:26 550 1

原创 flume 1.6 发数据到kafka的kafka sink的配置

数据经过flume发送到kafka的配置,flume版本是1.6的时候的配置例子agent.sources = s1agent.channels = c1agent.sinks = k1agent.sources.s1.type = spooldiragent.sources.s1.channels = c1agent.sources.s1.spoolDir = /root/data/ttmagent.sources.s1.selector.type = com.x.y.collecto

2020-12-01 09:45:59 429

空空如也

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除