Linux Traffic Control (tc)的扩展 Network Emulation (netem)可以很方便的模拟网络不好的情况，一般新的linux内核中(>= 2.6)已经内置了这个工具，可以方便的进行测试。

本文罗列了了 tc的常用的模拟命令， 以备将来使用的时候查询。

主要参考了Linux基金会的官方介绍: netem

阅读全文

以前我翻译了 Protobuf2 语法指南，现在 千念飞羽把protobuf3的语法指南也翻译了，我也转载一下，读者可以有个参考。 译文地址是: Protobuf3语言指南。

阅读全文

一个经常被问的Linux问题：为啥我的Linux系统没运行多少程序，显示的可用内存这么少？其实Linux与Win的内存管理不同，会尽量缓存内存以提高读写性能，通常叫做Cache Memory。

比较老的文件都会介绍Linux的cache占用很多没关系，因为Linux尽可能利用内存进行缓存，但是缓存的回收也是需要资源的，比较好的一篇文章是Poor Zorro写的Linux内存中的Cache真的能被回收么？。

阅读全文

Github 和 Gitlab 提供了一些可能有些人还不了解的语法，可以自动为文字添建连接，关联相关的一些对象，以及执行相应的操作。本文记录了这些小技巧，可以在需要的时候查询。

阅读全文

Visual Code 1.7.1发布了，vscode team提供了一个pdf版本的快捷键指南，可以打印出来备用。

阅读全文

原文: Setting Up Adaptive Streaming with Nginx by Licson。

最近我在为一个组织搭建视频直播系统。对于视频直播来说我是新手，经过一番调研，最终还是觉得Nginx + RTMP module是一个好的选择。
搭建这个系统还是很困难的。经过了好几天的测试和摸索，我得到了一种比较好的配置，值得给大家分享。

阅读全文

vscode-icons可以为你的 Visual Studio Code的文件类型提供相应的图标。

阅读全文

我比较喜欢使用免费的WinMerge作为diff和merge工具，虽然TortoiseGit也自己带了TortoiseGitMerge工具，但是使用起来总觉得不是那么方便。

虽然WinMerge项目看起来没人维护了，最后一个发布打分版本在2013-02-02，但是这个工具使用起来还是相当方便的。我在重装机器的时候，或者更新Windows的时候，如果需要配置TortoiseGit,总是需要到网上查找如何配置WinMerge,因为长长的命令参数总是记不起来。所以在本文中记录下来。

阅读全文

Elasticsearch是一个分布式可扩展的实时搜索和分析引擎。它能帮助你搜索、分析和浏览数据。Elasticsearch 是一个基于Lucene实现的搜索服务器，用Java开发实现。它提供了RESTful web接口，并作为Apache许可条款下的开放源码发布，能够达到实时搜索，稳定，可靠，快速，安装使用方便。

Elasticsearch关键概念

Cluster集群

有相同集群名称的节点Node的集合。集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。es的一个概念就是去中心化，字面上理解就是无中心节点，这是对于集群外部来说的，因为从外部来看es集群，在逻辑上是个整体，你与任何一个节点的通信和与整个es集群通信是等价的。

Cluster集群

Node节点

一个elasticsearch运行的实例。其实就是一个java进程。一般情况下，一个节点运行在一台机器上。

Shards分片

代表索引分片，es可以把一个完整的索引分成多个分片，这样的好处是可以把一个大的索引拆分成多个，分布到不同的节点上。构成分布式搜索。分片的数量只能在索引创建前指定，并且索引创建后不能更改。

Replicas副本

代表索引副本，es可以设置多个索引的副本，副本的作用一是提高系统的容错性，当某个节点某个分片损坏或丢失时可以从副本中恢复。二是提高es的查询效率，es会自动对搜索请求进行负载均衡。

Recovery恢复

代表数据恢复或叫数据重新分布，es在有节点加入或退出时会根据机器的负载对索引分片进行重新分配，挂掉的节点重新启动时也会进行数据恢复。

River

代表es的一个数据源，也是其它存储方式（如：数据库）同步数据到es的一个方法。它是以插件方式存在的一个es服务，通过读取river中的数据并把它索引到es中，官方的river有couchDB的，RabbitMQ的，Twitter的，Wikipedia的。River在1.5中弃用了，2.0中移除了。

Gateway

代表es索引快照的存储方式，es默认是先把索引存放到内存中，当内存满了时再持久化到本地硬盘。gateway对索引快照进行存储，当这个es集群关闭再重新启动时就会从gateway中读取索引备份数据。es支持多种类型的gateway，有本地文件系统（默认），分布式文件系统，Hadoop的HDFS和amazon的s3云存储服务。

Discovery.zen

代表es的自动发现节点机制，es是一个基于p2p的系统，它先通过广播寻找存在的节点，再通过多播协议来进行节点之间的通信，同时也支持点对点的交互。

Transport

代表es内部节点或集群与客户端的交互方式，默认内部是使用tcp协议进行交互，同时它支持http协议（json格式）、thrift、servlet、memcached、zeroMQ等的传输协议（通过插件方式集成）。

Index索引

Elasticsearch用来存储数据的逻辑区域，它类似于关系型数据库中的table概念。一个index可以在一个或者多个shard上面，同时一个shard也可能会有多个replicas。

Document

Elasticsearch里面存储的实体数据，类似于关系数据中一个table里面的一行数据。 document由多个field组成，不同的document里面同名的field一定具有相同的类型。document里面field可以重复出现，也就是一个field会有多个值，即multivalued。

Document type

为了查询需要，一个index可能会有多种document，也就是document type，但需要注意，不同document里面同名的field一定要是相同类型的。

Mapping

存储field的相关映射信息，不同document type会有不同的mapping。

阅读全文

在生产系统中，数据库的备份是必要的，否则当服务器被攻击，硬盘坏掉，运维误删等原因将数据库干掉的时候就欲哭无泪了。

备份MongoDB数据库常见的方式有三种：

• 使用[MongoDB管理服务（MMS）(https://mms.mongodb.com/)进行云备份
• 使用文件系统快照
• 使用MongoDB自身的mongodump工具

本文介绍第三种简单的备份，对于备份数据量不是太大的数据库还是很有效的。

阅读全文