[摘要]  0. 基本情况Redis采用集群模式，560个主节点，主从比为1:1，单台机器上为16个节点。info memory观察到主节点A单个Redis内存used_memory_rss_human为9.2G（设置的maxmemory_human为6G）超过最大值设置。1.查看客户端连接情况[root@ A...

[摘要]  (这个编辑器排版不太好，可以在底端附件下载word版)1 系统性能定义 当我们对一个系统进行性能测试时主要关注两个指标：1) 吞吐量（Throughput）：系统单位时间内可以处理的请求数。2) 系统延迟（Latency）：用户从发出请求到收到回复所需要的时间。这两个指标有一定的相关性...

[摘要]  一、性能优化建议1. 提高jvm内存，经测吞吐无明显提高，可减少汇聚平均时延；2. 提高 batch.size,增加吞吐，同时时延增大 3. 增加send与receive buffer size (提高jvm heapsize) 4. 提高num.io.threads数量（吞吐量高时，磁盘IO阻塞...

[摘要]  kafka实现高吞吐主要是顺序写盘、pagecache、网络零拷贝技术特点。在模拟集群性能测试中发现当消息大于10KB时，集群出现吞吐下降及相应的时延问题。也就是说对于kafka来说大消息不能充分发挥高吞吐的特性（批处理）。所以对大消息如何处理呢？以下是个人建议及具体使用过程中配置参数供大家参考。1...

[摘要]  常说的ELK是指包括 elasticsearch、logstash 和 kibana 的一套技术栈，常用来处理日志等数据。其部署架构多种多样。常见的一种分离式的部署方式为：应用->kafka->logstash->elasticsearch->kibana。采用这种部署架构，需要解决的问题就是从ka...