自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

请叫我大师兄

看文章记得点个赞哟

原创 IntelliJ IDEA使用教程 (总目录篇)

IntelliJ IDEA使用教程 (总目录篇)

2020-06-15 10:02:13 93859 137

原创 听说有些老铁,要感谢下大师兄?里边请,聊一聊人生。

老铁,既然都点进来啦,那先别着急着走。 来啊,看茶!!! 少年,我看你骨骼精奇,是万中无一的武学奇才,如果有一天,让你打通任督二脉,那还不飞龙上天哪!!! 正所谓:我不入地狱,谁入地狱,警恶惩奸,维护世界和平这个任务就交给你了,好吗? 这本《如来神掌》是无价之宝。 (看法宝......二维码....

2017-11-09 17:49:40 13295 68

原创 nacos一直频繁的打印日志 get changegroupkeys

正常情况下应该是30秒打印一次日志的,但是,重启了一下微服务之后,这个日志竟然疯狂输出。如下图。升级nacos版本不一定能解决问题,我这使用的是1.3.1的版本。生产环境,5个实例组成nacos集群,五个相同的微服务组成集群访问nacos,弄了不少的namespace,nacos的数据存在mysq...

2020-11-26 15:43:19 4 0

原创 spring boot/cloud 动态获取 服务器/ 客户端 的IP端口信息

获取当前启动模块的IP,端口,app名称,本地服务器名称等信息。服务器端口 port,appName,都是在boot启动文件中就有的,可以直接使用@Value获取。剩下的靠 InetAddress.getLocalHost()方法就好。除了获取服务器自己的IP,可能还是会需要获取到访问这个服务器的...

2020-11-17 11:05:08 138 0

原创 spring cloud gateway 重定向到登陆页面的设置 继承GlobalFilter,自定义filter ,前端是vue实现的。

在gateway做权限设置和路由,转发请求到其他子服务模块,要是token超时了,则需要给重定向到登陆页面,前端使用vue.js实现。 @Component public class JwtTokenFilter implements GlobalFilter, Ordered { @...

2020-11-17 10:54:37 106 0

原创 java storm streamId 使用的例子

Java storm 中有时候会遇到一个数据需要向后发几次,而且互不影响的。比如场景:从kafka spout里面消费数据,现在有几个 topology都是从kafka里面的同一个topic消费数据,进行后续处理的。这几个bolt都需要处理全量的数据,那就不能用相同的group id来消费来,一种...

2020-10-30 17:24:13 93 0

原创 spring cloud alibaba nacos config 从 nacos server上加载多个配置文件

在Spring cloud里面,使用spring.cloud.nacos.config可以把项目使用的配置放到nacos服务器上去管理,极大的方便了配置文件的修改管理还原备份复制等一系列后期维护动作。有nacos配置中心在,使得项目的配置维护变得方便了不少,这示范一下Spring cloud na...

2020-10-26 16:02:59 240 1

原创 Java Storm 消费kafka数据即KafkaSpout的消费实例,还有 为啥要input.getString(4),这个4怎么来的。

使用kafka作为数据源,给storm的后续bolt提供数据的例子,还有 为啥要input.getString(4),这个4怎么来的。 先看main方法,步骤很清新的。 package com.lxk.storm; import com.lxk.storm.bolt.OutInfoBolt...

2020-10-13 14:45:31 61 0

原创 github上下载项目代码贼慢,使用的是https下载的,要不是试试 github desktop。

使用idea想把github上 的项目在另一个机器上下载下来,使用的是https的方式下载,选了目录之后,下载速度那是真的可怜,20kb/S,简直了,在网上搜了一下,说是修改hosts文件,我没实验,因为我有梯子啊,速度应该不慢才对,难道梯子没墙高?然后本地之前也曾经装过github deskto...

2020-10-12 21:35:12 175 0

原创 Java client 写 Kafka 失败的处理,client和server都得把配置参数优化一下

1,java.util.concurrent.ExecutionException:org.apache.kafka.common.errors.TimeoutException: Expiring 1 record(s) for topic-partion: 3000 ms has passed...

2020-09-28 14:05:31 192 0

原创 kafka server/broker 服务端的参数配置说明

一、Kafka概述 关于Kafka,我们在之前的文章里也介绍,简而言之Kafka是一个分布式消息引擎与流处理平台,经常用做企业的消息总线、实时数据管道,有时还可以当做存储系统来用。Kafka的设计遵循生产者消费者模式,其中生产者和消费者都属于客户端,服务端则是由多个broker实例组成,brok...

2020-09-28 10:05:11 184 0

原创 Java kafka producer 的常用参数的意义说明及建议

生产端核心参数 1. acks 参数说明:这是一个非常重要的参数,表示指定分区中成功写入消息的副本数量,这是Kafka生产端消息的持久性(durability)保证。只有当leader确认已成功写入消息的副本数后,才会给Producer发送响应,此时消息才可以认为“已提交”。该参数影响着消息的...

2020-09-26 22:25:53 127 0

原创 Java junit test Kafka producer send 数据没有到Kafka的topic的原因

一般发送数据到Kafka,就是new一个producer,然后简单到send就好了,就可以在kafka里面看到数据了,可以使用命令行的消费模式,但是你在写测试代码的时候,想看看数据是否真的写到kafka服务器了的时候,就发现,额,好像数据没发送到kafka服务器上似的,代码也看似没问题哦。生产端P...

2020-09-26 14:22:56 255 0

原创 分布式系统中的CAP理论

一、什么是分布式系统 拿一个最简单的例子,就比如说我们的图书管理系统。之前的系统包含了所有的功能,比如用户注册登录、管理员功能、图书借阅管理等。这叫做集中式系统。也就是一个人干了好几件事。 后来随着功能的增多,用户量也越来越大。集中式系统维护太麻烦,拓展性也不好。于是就考虑着把这些功能分开。通...

2020-09-18 17:57:05 930 0

原创 Zookeeper高频面试题36问(附答案)

1.CAP理论? C : Consistency 一致性,数据在多个副本之间似否能够保持一致的特性。 A: Availability 可用性,系统服务必须一直处于可用状态,对每个请求总是在指定的时间返回结果。 P:Partition tolerance 分区容错性,遇到分区网络故障时,仍能对...

2020-09-17 13:43:52 283 0

原创 Zookeeper(动物园管理员)为什么需要他?分布式协调系统

需求推动事物的前进,所有相关技术都是在某些需求的驱动下才孕育而出,而且不断的为了满足需求,不得不进一步加强完善,上来就说zookeeper是啥,作用是啥,干了什么,是开源的分布式应用协调系统”blabla,到底什么是分布式协调,为什么分布式就需要协调。不懂,也不见得好理解、好记忆,还是从需求分析来...

2020-09-17 11:33:30 108 0

原创 Java kafka监控 topic的数据量count情况,每个topic的Summed Recent Offsets(总结最近的偏移量)

Java使用kafka的API来监控kafka的某些topic的数据量增量,offset,定时查总量之后,然后计算差值,然后就可以算单位间隔的每个topic的增量,kafka监控一般都是监控的吞吐量,即数据量的大小,而不在意这个count,数量。额,这个就是在意count。统计一下count。 ...

2020-09-16 22:16:28 448 0

原创 No tests found for given includes: [com.xxx.smm.kafka.KafkaTopicCountMonitorTest.test](filter.inc

idea 在 springboot + Gradle test时报错:No tests found for given includes 解决图 Gradle:IntelliJ IDEA使用Gradle作为默认测试运行器。结果,在持续集成(CI)服务器上获得相同的测试结果。此外,在命令行中...

2020-09-16 13:54:56 241 0

原创 Java Storm 原理、组件、概念介绍、hello world Java项目分享

零、问题导读: 1.hadoop有master与slave,Storm与之对应的节点是什么? 2.Storm控制节点上面运行一个后台程序被称之为什么? 3.Supervisor的作用是什么? 4.Topology与Worker之间的关系是什么? 5.Nimbus和Supervisor之间的所有协...

2020-09-16 10:00:45 155 0

原创 Java Elastic search 常用查询

java Elastic 客户端基本使用 引入jar compile 'org.elasticsearch:elasticsearch:5.5.0' compile 'org.elasticsearch.client:transport:5.5.0...

2020-09-15 16:55:43 700 0

原创 Java Storm Hello World 入门起手例子

1,Storm程序再Storm集群中运行的示例图如下: 2,Storm的几个核心概念名词 Nimbus:即Storm的Master,负责资源分配和任务调度。一个Storm集群只有一个Nimbus。 Supervisor:即Storm的Slave,负责接收Nimbus分配的任务,管理所有W...

2020-09-14 17:38:13 119 0

原创 Spring cloud alibaba nacos config 配置中心例子

Spring cloud 集成 nacos config配置中心的例子,自定义 dataId groupId namespace

2020-09-08 15:47:08 492 0

原创 Spring boot nacos config 配置中心的例子,自定义dataId groupId namespace

使用nacos作为配置中心,在非spring项目,直接使用nacos的 Java sdk也还是简单的。 nacos Java SDK 1.3.1 来实现配置管理 要是套上Spring的情况下。这个例子就是Spring boot + nacos来实现配置中心。好多例子都是只一个dataId,带上...

2020-09-08 14:54:41 916 0

原创 sm2 sm3 sm4 加密解密 Java实现

SM4.0(原名SMS4.0)是中华人民共和国政府采用的一种分组密码标准,由国家密码管理局于2012年3月21日发布。相关标准为“GM/T 0002-2012《SM4分组密码算法》(原SMS4分组密码算法)”。 Java实例代码,参见下面的github连接,下载下来,引入jar包,直接run可以...

2020-09-04 17:20:06 1286 1

原创 treemap 和 hashmap的效率比较

区别:1,hashmap是无序的,treemap是有序的,整个key是按照自然顺序来的。2,hashmap可以put一个null当key ,treemap却不支持。3,底层结构不一样,一个是数组➕红黑树,一个直接就是红黑树。 但是hashmap是最最最常用的map集合,不考虑顺序的时候,他是首选...

2020-09-02 16:39:56 348 0

原创 什么是RPC Remote Procedure Call 翻译成中文就是远程过程调用

如何科学的解释RPC 说起RPC,就不能不提到分布式,这个促使RPC诞生的领域。 假设你有一个计算器接口,Calculator,以及它的实现类CalculatorImpl,那么在系统还是单体应用时,你要调用Calculator的add方法来执行一个加运算,直接new一个CalculatorIm...

2020-08-25 18:10:31 131 0

原创 一个假的单例模式,虽然有双重加锁的代码,但还是假的单例。

单例模式这东西简单,也是平时写代码最常用的一个模式了。虽然你知道单例模式的要点。 1.私有(private)静态(static)的单例对象(object) 2.构造函数(struct)私有化-----可在构造方法初始化单例对象 3.提供对外(public),静态方法获得单例对象 你也知道最常见的就...

2020-08-24 17:15:00 345 1

原创 fastjson com.alibaba.fastjson.JSONException: unclosed string : 十

使用fastjson在转换的时候, com.alibaba.fastjson.JSONException: unclosed string : 十 at com.alibaba.fastjson.parser.JSONLexerBase.scanString(JSONLexerBase.jav...

2020-08-20 14:12:45 1745 0

转载 学习一下秒杀系统的设计,以及需要考虑的问题

学习一下秒杀系统的设计,以及需要考虑的问题,学习一下模块化 正文 首先设计一个系统之前,我们需要先确认我们的业务场景是怎么样子的,我就带着大家一起假设一个场景好吧。 我们现场要卖100件婴儿纸尿裤,然后我们根据以往这样秒杀活动的数据经验来看,目测来抢这100件纸尿裤的人足足有10万人。 任...

2020-08-18 14:35:59 545 3

原创 nacos Java SDK 1.3.1 来实现配置管理

1,下载服务 源文件下载地址:https://github.com/alibaba/nacos/releases 我测试下载的某云盘地址:链接:https://pan.baidu.com/s/1_I5yX578x1nY4ZZ_u-WU7A 密码:27ue 2,安装 放到Linux服务器上,...

2020-08-17 16:43:28 379 0

原创 当Java jvm 一个线程OOM的时候,其它线程还能运行不?这个进程会gg不?

当一个Java程序报OOM的异常的时候,程序会gg吗?是只有一个线程gg呢,还是整个进程gg呢? /** * JVM 堆内存溢出后,其他线程是否可继续工作 * * @author LiXuekai on 2020/7/27 */ public class WhenOom { ...

2020-07-27 16:40:18 225 0

原创 Java 一个进程支持多少个线程同时运行的测试 Java max running thread count test

测试一下一个Java程序能同时造多少个线程,一起运行。直到 java.lang.OutOfMemoryError: unable to create new native thread看其它文章说 -Xms -Xmx设置heap的大小以及 -Xss 设置单个stack的大小对这个数有影响,我在 -...

2020-07-27 15:46:25 163 0

原创 Java 解析xml 使用SAXReader获取所有标签的key和value的代码实例

Java中使用SAXReader获取xml信息中所有标签的key和value,若是有二级或者继续嵌套,也可以递归获取的代码实例 package com.lxk.jdk.file.xml; import com.google.common.collect.Maps; import org.do...

2020-07-26 17:52:44 447 0

原创 java kafka 生产者和消费者的代码实例

生产者 import com.google.common.collect.Lists; import org.apache.kafka.clients.producer.KafkaProducer; import org.apache.kafka.clients.producer.Produ...

2020-07-26 17:35:28 467 0

转载 Kafka消费者-从Kafka读取数据

(1)Customer和Customer Group (1)两种常用的消息模型 队列模型(queuing)和发布-订阅模型(publish-subscribe)。 队列的处理方式是一组消费者从服务器读取消息,一条消息只由其中的一个消费者来处理。 发布-订阅模型中,消息被广播给所有的消费者,...

2020-07-26 17:24:55 405 0

转载 Java kafka producer 发送数据

(1)生产者概览 (1)不同的应用场景对消息有不同的需求,即是否允许消息丢失、重复、延迟以及吞吐量的要求。不同场景对Kafka生产者的API使用和配置会有直接的影响。 例子1:信用卡事务处理系统,不允许消息的重复和丢失,延迟最大500ms,对吞吐量要求较高。 例子2:保存网站的点击信息,允许...

2020-07-26 17:16:29 474 0

原创 Runtime.getRuntime().addShutdownHook()

解决 the application appears to have started a thread ... but failed to stop it,this is very likely to create a memory leak.这个警告 RunTime.getRunTime()....

2020-07-16 13:51:17 128 0

原创 volatile关键字是否真的理解了,就看怎么回答这个问题。

问题: a,b,c三个变量,其中c是volatile的,a,b是普通变量, a = 1, b = 2, c = 3, c写入之后,a,b的值也会被刷入缓存吗,还是c写入之前所有在cpu缓存的数据都会被刷入内存,还是只刷入和c在同一个缓存行的数据? 答: 要按happens bef...

2020-07-08 15:49:04 248 0

原创 G1 GC 全称Garbage-First Garbage Collector 的全面全方位总结
原力计划

关键描述 G1是一种服务器端的垃圾收集器,应用在多处理器和大内存环境中,在实现高吞吐量的同时,尽可能的满足垃圾收集暂停时间的要求,全堆操作(例如全局标记)与应用程序线程并行执行。这样可以防止与堆或活动数据大小成比例的中断。 G1收集器的设计目标是取代CMS收集器,它同CMS相比,在以...

2020-07-02 10:13:41 439 0

原创 concurrent 和 parallel; 并发和并行的区别

在看g1gc文章的时候,把concurrent and parallel phases翻译成并发和并行阶段,感觉这2个词不是一个意思吗?为啥他原始文档要强调这2个词呢。深究一下,果然不是一个意思。 总体概念: 在单CPU系统中,系统调度在某一时刻只能让一个线程运行,虽然这种调用机制有多种形式(大...

2020-06-28 17:16:30 195 0

提示
确定要删除当前文章?
取消 删除