结果过滤
杨泞构 [分类] 调试技巧 • [标签] 性能优化 • 2018-03-22
[摘要] (这个编辑器排版不太好，可以在底端附件下载word版)1 系统性能定义 当我们对一个系统进行性能测试时主要关注两个指标：1) 吞吐量（Throughput）：系统单位时间内可以处理的请求数。2) 系统延迟（Latency）：用户从发出请求到收到回复所需要的时间。这两个指标有一定的相关性...
窦凤虎 [分类] Kafka • [标签] kafka，大消息，分布式系统 • 2018-03-12
[摘要] kafka实现高吞吐主要是顺序写盘、pagecache、网络零拷贝技术特点。在模拟集群性能测试中发现当消息大于10KB时，集群出现吞吐下降及相应的时延问题。也就是说对于kafka来说大消息不能充分发挥高吞吐的特性（批处理）。所以对大消息如何处理呢？以下是个人建议及具体使用过程中配置参数供大家参考。1...
杜梅婕 [分类] 数据分析系统及工具 • [标签] • 2018-03-06
[摘要] 常说的ELK是指包括 elasticsearch、logstash 和 kibana 的一套技术栈，常用来处理日志等数据。其部署架构多种多样。常见的一种分离式的部署方式为：应用->kafka->logstash->elasticsearch->kibana。采用这种部署架构，需要解决的问题就是从ka...
杨嵘 [分类] 数据分析系统及工具 • [标签] 分布式系统 • 2018-02-21
[摘要] 转载：https://zhuanlan.zhihu.com/p/33375126 分布式系统类型多，涉及面非常广，不同类型的系统有不同的特点，批量计算和实时计算就差别非常大。这篇文章中，重点会讨论下分布式数据系统的设计，比如分布式存储系统，分布式搜索系统，分布式分析系统等。 我们先来...
探讨实际应用中的一致性：Uwe Friedrichsen为读者所推荐的学术论文
杨嵘 [分类] 基础算法 • [标签] 分布式系统，一致性，实际应用 • 2018-02-11
[摘要] 在不久前于德国柏林举办的microXchg 2016大会上，Uwe Friedrichsen举办了一场名为“探讨实际应用中的一致性”（real-world consistency explained）的演讲，对该主题进行了深入的探究。Friedrichsen在演讲中引用了多篇学术论文中的内容，探讨了...