fundebug.com

kiwenlau.com

Fundebug上线了！ | KiwenLau

http://kiwenlau.com/2016/11/fundebug-is-online

X5F53;我们解决了一个又一个Bug，然后进行了一轮又一轮代码审查，之后又跑了一遍又一遍测试，代码终于上线了！ X7136;而，我们能够保证上线的代码一定没有Bug吗？似乎没有人可以这样肯定。 X7528;户使用应用的画风很可能是这样的:. X4E3A;啥『注册』按键点击了半天没有反应？！ X4E3A;啥『激活邮件』一直木有收到？！ X4E3A;啥狂按F5时页面并没有更新？！ X4E3A;啥APP莫名其妙地闪退了？！ X8FD9;时，用户的内心是崩溃的，『这是什么破软件？果断弃了』。我们可怜的程序员如&#x...X5176;实呢，线上代码出Bug也是很正常的事：. X4E00;些意想不到的边界条件（内存溢出，死循环，Null, Undefined）. X4EE3;码运行依赖的系统比如数据库(MySQL, MongoDB, Redis)偶尔抽风. X5CF0;值情况下网络超时，CPU和内存超负荷. X8FD8;有，网页应用是运行在用户&#...Fundebug, Debug with Fun! X7ACB;即注册 ➔. 聊聊jQuery is not defined.

kiwenlau.com

基于Docker搭建多节点Mesos/Marathon | KiwenLau

http://kiwenlau.com/2016/07/10/mesos-marathon-platform

X5728;之前的一篇博客中，我介绍了 基于Docker搭建单机版Mesos/Marathon. XFF0C;但是仅仅使用了单个节点。而在这篇博客中，我将介绍 基于Docker搭建多节点Mesos/Marathon. XFF0C;开发者可以使用3个节点快速地搭建一个真正的分布式容器集群系统。 服务发现. X548C; 负载均衡. X662F;容器集群必不可少的功能，我选择了 Marathon LB. X6765;实现。 X4F5C;者: KiwenLau. X65E5;期: 2016-07-10. X4E00;. Mesos/Marathon简介. X662F; 分布式集群资源管理系统. X80FD;够共享一个集群。 XFF0C;架构非常简单，且功能丰富。 X662F;容器编排系统，是运行于Mesos之上的众多计算框架&#x4E...Marathon具有 容错功能. X662F;Marathon的 服务发现. X4E0E; 负载均衡. X7CFB;统。Marathon LB通过使用 Haproxy. X4E8C;. 搭建步骤. X5176;中，node1为&#x...Mesos slave1, nginx.

kiwenlau.com

Run Hadoop Cluster in Docker Update | KiwenLau

http://kiwenlau.com/2016/06/26/hadoop-cluster-docker-update-english

Run Hadoop Cluster in Docker Update. Last year, I developed kiwenlau/hadoop-cluster-docker. Project, which aims to help user quickly build Hadoop. Cluster on local host using Docker. The project is quite popular with 250 stars on GitHub. And 2500 pulls on Docker Hub. In this blog, I’d like to introduce the update version. Image, we can easily build a Hadoop cluster within Docker containers on local host. This is very help for beginners, who want to learn:. How to configure Hadoop cluster correctly? To pr...

kiwenlau.com

MongoDB优化之倒排索引 | KiwenLau

http://kiwenlau.com/2016/09/11/mongodb-inverted-index

X4E3A;MongoDB中的数据构建倒排索引(Inverted Index)，然后缓存到内存中，可以大幅提升搜索性能。本文将通过为电影数据构建演员索引，介绍两种构建倒排索引的方...X548C; Aggregation Pipeline. X4F5C;者: KiwenLau. X65E5;期: 2016-09-11. X4E00;. 倒排索引. X5012;排索引(Inverted Index)，也称为反向索引， 维基百科. X7684;定义是这样的:. X8FD9;个定义比较学术，也就是比较反人类，忽略…. Url1, [word2, word3]. Url3, [word1, word2]. Word2, [ur1, url2, url3]. X7B80;单地说， 倒排索引就是把Key与Value对调之后的索引. XFF0C;构建倒排索引的目的是提升搜索性能。 X4E8C;. 测试数据. X8BE5;文档一共有4个属性:. Id: 文档ID，由MongoDB自动生成。 Movie: 电影名称。 StarList: 演员列表。 X4E3B;演。 X4E0E; Aggregation Pipeline.

kiwenlau.com

Underscore实例教程 | KiwenLau

http://kiwenlau.com/2016/09/18/underscore-example

X662F;一个轻量级的JavaScript库，提供了许多非常实用的函数。熟练使用Underscore可以更快地写出更简洁的代码。本文将通过一个简单的编程实例，介绍几个常用&#x...X4F5C;者: KiwenLau. X65E5;期: 2016-09-18. X4E00;. 编程实例. X8F93;入数据是一个数组:. X5176;中，数组中存在重复的元素。例如，”c”重复了3次。 X73B0;在需要 根据元素在数组中的重复个数进行排序. X3002;通过 观察. X53EF;知，”a”为1个，”b”为2个，”c”为3个，”d”为4个。 X56E0;此，输出结果是:. Apos;, 'b. Apos;, 'c. Apos;, 'd. X5F53;然，计算机暂时还没办法像人一样通过 观察. X89E3;决问题，所以得敲代码…. X5BF9;数组元素进行计数. I Xlength; i ). X = X[i];. X5C06;对象转化为二维数组. Bpush([a, A[a] );. I Blength; i ). XFF0C; .pairs. XFF0C; .sortBy. Var X = [ b.

kiwenlau.com

基于Docker编译Hadoop | KiwenLau

http://kiwenlau.com/2016/06/05/160605-compile-hadoop-docker

X5C06;编译Hadoop所需要的依赖软件安装到Docker镜像中，然后在Docker容器中编译Hadoop，可以提高编译效率，同时避免污染主机。编译其他软件时，也可以参考这篇&#x535A...X4F5C;者: KiwenLau. X65E5;期: 2016-06-05. X5728;前一篇博客中，我介绍了 64位Ubuntu中编译Hadoop的步骤. X3002;这篇博客将介绍基于Docker编译Hadoop的方法。 X4E00;. 编译步骤. 1 下载Docker镜像. Sudo docker pull kiwenlau/ compile. X6216;者自行构建Docker镜像. 2 下载并解压 Hadoop源文件. Export VERSION= 2.7. Tar -xzvf hadoop- $VERSION. 3 运行Docker容器，在容器中编译Hadoop. Src kiwenlau/compile-hadoop /root/compile.sh $VERSION. Wget https: / gi. 聊聊jQuery is not defined.

kiwenlau.com

博客列表 | KiwenLau

http://kiwenlau.com/archives

聊聊jQuery is not defined. Run Hadoop Cluster in Docker Update. 聊聊jQuery is not defined.

kiwenlau.com

使用Vagrant创建多节点虚拟机集群 | KiwenLau

http://kiwenlau.com/2016/07/03/vagrant-vm-cluster

X5728;前一篇博客中，我介绍了 使用Vagrant快速创建虚拟机. XFF0C;但是所创建的只是单个虚拟机。这篇博客将介绍 使用Vagrant创建多节点虚拟机集群. XFF0C;可以作为 Hadoop. X4EE5;及 Storm. X7B49;分布式系统的运行环境。 X4F5C;者: KiwenLau. X65E5;期: 2016-07-03. X672C;文所有操作是在MacBook上进行的，Windows上的操作大部分一致，但是可能会有一些小问题。 X4E00;. 集群创建. 1 安装 VirtualBox. 2 安装 Vagrant. 3 下载Box. X76F8;当于虚拟机所依赖的镜像文件。 4 编辑Vagrantfile. Config.vm.define node#{i}. X8BBE;置虚拟机的Box. X8BBE;置虚拟机的主机名. X8BBE;置虚拟机的IP. Ip: 192.168.59.#{i}. VirtaulBox相关配置. X8BBE;置虚拟机的名称. X5B89;装docker 1.11.0. Usermod -aG docker vagrant. X4E0B;&#x...

kiwenlau.com

基于Docker搭建单机版Kuberntes | KiwenLau

http://kiwenlau.com/2015/11/28/151128-single-kubernetes-docker

X672C;文介绍了基于Docker搭建单机版Kuberntes的方法，Kubernetes的所有组件均运行于单个容器中。 X4F5C;者: KiwenLau. X65E5;期: 2015-11-28. X4E00;. Kubernetes简介. X4E0E;其他集群系统一致，Kubernetes也采用了Master/Slave结构。下表显示了Kubernetes的各个组件及其功能。 X63D0;供RESTful接口. X8D1F;责调度，将pod分配到Slave节点. X8D1F;责Master的其他功能. X50A8;存配置信息，节点信息，pod信息等. X8D1F;责管理Pod、容器和容器镜像. X5C06;访问Service的请求转发给对应的Pod，做一些负载均衡. X5BA2;户端. X547D;令行工具，向apiserver发起创建Pod等请求. X4E8C;. kiwenlau/kubernetes镜像简介. X6211;将Docker deamon运行在Ubuntu主机上，&#...Kubernetes: 1.0.7. Ectd: 2.2.1. Docker: 1.9.1. Thank ...

kiwenlau.com

基于Docker搭建Hadoop集群之升级版 | KiwenLau

http://kiwenlau.com/2016/06/12/160612-hadoop-cluster-docker-update

X662F;去年参加 Docker巨好玩. X6BD4;赛开发的，得了 二等奖. X4F5C;者: KiwenLau. X65E5;期: 2016-06-12. X4E00;. 项目介绍. X6253;包到 Docker. X955C;像中，就可以快速地在单个机器上搭建Hadoop集群，这样可以方便新手测试和学习。 Sudo docker network create. X9879;目更新要点：. X5408;并Master和Slave镜像. X4F7F;用 kiwenlau/compile-hadoop. X9879;目编译的Hadoo进行安装. X4F18;化Hadoop配置. X4E8C;. 3节点Hadoop集群搭建步骤. 1 下载Docker镜像. Sudo docker pull kiwenlau/ hadoop:. 2 下载GitHub仓库. 3 创建Hadoop网络. Sudo docker network create. 4 运行Docker容器. X8FD0;行结果. 5 启动hadoop. 6 运行wordcount. X8FD0;行结果. 1 准备.