摘要： Memcached可以利用多核优势，单实例吞吐量极高，可以达到几十万QPS（取决于key、value的字节大小以及服务器硬件性能，日常环境中QPS高峰大约在4-6w左右）。
1.Memcached
Memcached的优点：Memcached可以利用多核优势，...
water
3周前 (06-01) 64℃ 0评论
0喜欢
云搜索系统设置
1. 应用基本信息（名称、备注）
2. 数据存储量 （对应需要多少主分片）
3. 吞吐量tps （对应需要多少副本）
4. 数据源（topic、tag）
5. 定义应用结构（template）
6. 索引字段（倒排字段，用于query）及属性字段（正排字段用于过滤...
water
1个月前 (05-25) 57℃ 0评论
0喜欢
文/赵玉锡
2004 年进入华为，一直在消息产品开发一线耕耘，今年下半年转入华为融合视频业务。曾参与多个重要项目与重要版本的设计、重构与开发，辗转多个语言：长期从事 C、C++ 开发，Java 与 Python 也有约 30K+ 代码的开发经验，目前正在基于 Go 语言开发，对 ...
water
2个月前 (05-09) 95℃ 0评论
0喜欢
Elasticsearch是一个实时的分布式搜索和分析引擎。它可以帮助你用前所未有的速度去处理大规模数据。
它可以用于全文搜索，结构化搜索以及分析，当然你也可以将这三者进行组合。
Elasticsearch是一个建立在全文搜索引擎 Apache Lucene™ 基础上的搜索引擎，...
water
2个月前 (05-09) 100℃ 0评论
1喜欢
当前是云计算和数据快速增长的时代,今天的应用程序正以PB级和ZB级的速度生产数据，但人们依然在不停的追求更高更快的性能需求。随着数据的堆积，如何快速有效的搜索这些数据，成为对后端服务的挑战。本文，我们将比较业界两个最流行的开源搜索引擎，Solr和ElasticSearch。两者都...
water
2个月前 (05-09) 101℃ 0评论
0喜欢
分布式系统中，即便是一个小型的集群，也需要通过一个机制来维护各个节点或服务的状态一致性和数据一致性。zab、paxos是使用较早的协议，后来出现了RAFT协议，这些主要通过RPC的机制进行节点连接，因此主要用于局域网或数据中心内部。Gossip（意：八卦、流言）支持p2p协议，是...
water
2个月前 (05-09) 67℃ 0评论
0喜欢
产品经理工作中，画流程图是必经的一环。对于工具狂魔来说，和介于产品经理的通病，只要能画流程图的工具，总想体验一番。
我用过的流程图工具有Visio、MindManager、亿图图示专家（Edraw Max）、PPT、Axure等。
首先，用Axure画流程图，对我来说，真废时间啊...
water
2个月前 (05-07) 121℃ 0评论
0喜欢
首先ServiceComb基于华为内部的CSE(Cloud Service Engine)框架开源而来，这个框架在华为内部已经存在了2年多，支撑了多个大型的商业项目。有相对传统的企业级项目，也有类似手机应用这样的互联网属性比较强的项目。并且在成为整个华为公司统一的微服务标准框架...
water
5个月前 (01-25) 782℃ 0评论
0喜欢
数据分析特别是实时数据分析，已经越来越多的成为各行各业的分析要求与标准 – 例如，（新）零售行业可能希望通过线下POS数据与实时门店客流流量的进行实时结合与分析，实现商品销售，销量，总类等等的实时预测； 在线广告平台期望通过广告(Impression)总类，数据量以及基于时...
water
6个月前 (12-28) 777℃ 0评论
1喜欢
分布式系统：
木桶效应，架构设计之初要求我们能够估算系统的性能从而权衡不同的设计方法
分布式系统面临的第一个问题就是数据分布，即将数据均匀地分不到多个存储节点。另外，为了保证可靠性和可用性，需要将数据复制多个副本，这就带来了多个副本之间的数据一致性问题。大规模分布式存储系统的重要...
water
9个月前 (09-21) 469℃ 0评论
0喜欢
1.1 背景
随着程序功能的日益复杂，程序的配置日益增多：各种功能的开关、参数的配置、服务器的地址……
对程序配置的期望值也越来越高：配置修改后实时生效，灰度发布，分环境、分集群管理配置，完善的权限、审核机制……
在这样的大环境下，传统的通过配置文件、数据库等方式已经越来越无法满...
water
9个月前 (09-19) 507℃ 0评论
0喜欢
1. 响应时间(RT) 响应时间是指系统对请求作出响应的时间。直观上看，这个指标与人对软件性能的主观感受是非常一致的，因为它完整地记录了整个计算机系统处理请求的时间。由于一个系统通常会提供许多功能，而不同功能的处理逻辑也千差万别，因而不同功能的响应时间也不尽相同，甚...
water
10个月前 (09-07) 345℃ 0评论
0喜欢
在大数据时代，海量数据正成为互联网、软件、硬件公司们竞逐的金矿。三分技术七分数据，得数据者得天下，数据的所有权之争正变得日益激烈。数据概念的提出比较早，自 2013 年大数据兴起，数据更是被视为未来极为重要的资源，连李克强总理也把数据提升到基础资源的层面，称为“重要的生产力”。
...
water
10个月前 (09-05) 317℃ 0评论
0喜欢
故障恢复
数据库运行过程中可能会发生故障，这个时候某些事务可能执行到一半但没有提交，当系统重启时，需要能够恢复到一致的状态，即要么提交这个事务，要么回滚。数据库系统以及其他的分布式存储系统统一采用操作日志，有时称为提交日志，即Commit Log技术来实现故障恢复。...
water
10个月前 (08-30) 384℃ 0评论
0喜欢
单机存储引擎
存储引擎是存储系统的发动机，直接决定存储系统能够提供的性能和功能。存储系统的基本功能包括：增、删、读、改，其中，读取操作分为随机读取和顺序扫描。哈希存储引擎是哈希表的持久化实现，支持增、删、改、以及随机读取操作，但不支持顺序扫描，对应的存储系统为键值存储系统；B树存...
water
10个月前 (08-30) 447℃ 0评论
0喜欢
概述
分布式存储概念
分布式存储系统是大量普通PC服务器通过Internet互联，对外作为一个整体提供存储服务
特点
可扩展、低成本、高性能、易用
分布式存储涉及的设计主要来自两个领域：分布式系统以及数据库
数据分布、一致性、容错、负载均衡、事务与并发控制、易用性、压缩/解压缩
...
water
10个月前 (08-30) 758℃ 0评论
1喜欢
一 idea 运行
1） github下载
2） 5.0之后使用gradle管理项目依赖，5.4使用gradle 3.3+，先把gradle安装好 ，下载gradle-3.3-bin.zip
3） gradle的仓库需要翻墙，使用...
water
11个月前 (08-08) 585℃ 0评论
0喜欢
「简书」作为一款「写作软件」在诞生之初就支持了 Markdown，Markdown 是一种「电子邮件」风格的「标记语言」，我们强烈推荐所有写作者学习和掌握该语言。为什么？可以参考:
『为什么作家应该用 Markdown 保存自己的文稿』。
『Markdown写作浅谈』
...
water
11个月前 (07-27) 249℃ 0评论
0喜欢
Redis现在在业务中应用已经很广泛了，但是如何监控redis，实时的观察redis的性能，却很少的提及，现在常见的监控方案基本上都是使用redis自带的info命令和monitor命令获取相关信息，然后提取出来显示。
测试环境：
&nb...
water
11个月前 (07-27) 334℃ 0评论
0喜欢
aurora 是一个基于 Web 的 Beanstalk 消息队列服务器管理工具，单文件无需依赖其他组件，支持管理本地和远程多个队列服务器。
特点
跨平台支持 macOS/Linux/Windows 32/64-bit
单文件简单易部署
不依赖其他组件
支持读取...
water
11个月前 (07-26) 265℃ 0评论
0喜欢
