wiki.zheng-ji.info

zheng-ji.info

搭建 Postfix - 织网

http://zheng-ji.info/blog/2015/05/17/da-jian-postfix

Sudo apt-get install postfix. Smtpd banner = $myhostname ESMTP $mail name (Ubuntu). Append dot mydomain = no. Readme directory = no. Smtpd tls cert file=/etc/ssl/certs/ssl-cert-snakeoil.pem. Smtpd tls key file=/etc/ssl/private/ssl-cert-snakeoil.key. Smtpd tls session cache database = btree:${data directory}/smtpd scache. Smtp tls session cache database = btree:${data directory}/smtp scache. Myhostname = mail.zheng-ji.info 邮箱服务器域名. Alias maps = hash:/etc/aliases. Alias database = hash:/etc/aliases.

zheng-ji.info

my.cnf 配置依据 - 织网

http://zheng-ji.info/blog/2015/07/12/my-dot-cnfpei-zhi-yi-ju

Innodb pool buffer 合理配置. 禁止 MySQL 对外连接 DNS 解析 ,这一选项可以消除 MySQL 进行DNS解析时间，开启该选项，所有远程主机连接授权都要使用 IP。 指定用于索引的缓冲区大小，增加它可得到更好的索引处理能力，对于内存 4G 左右，可设置为 256MB。 高速缓冲区的大小，当mysql访问一个表示，缓冲区还有空间，那么这个表就会被放入缓冲区，一般看峰值时间状态值，open tables与open cache，用于判断是否需要增加table cache，如果open Table接近table cache就要增加了。 Read buffer size,join buffer size 都是对单个链接而言。 Wait timeout = 120. Innodb flush log at trx commit = 1. 设置为0就是等到 innodb log buffer size 队列满了之后再统一存储，默认是1，是最安全的设置。 Innodb thread concurrency = 8. Read rnd buffer Size = 16M.

zheng-ji.info

Category: Server - 织网

http://zheng-ji.info/blog/categories/server

Twemproxy 一个 Redis 代理. Flume 实时收集 Nginx 日志.

zheng-ji.info

黑客马拉松 - 织网

http://zheng-ji.info/blog/2015/08/10/hackthon

通宵达旦完成了作品是个值得纪念的经历, 我们的产品叫做 正义的朋友. 团队的似曾相识, 队友非常给力, 大家都很拼, 我喜欢这种感觉, 事实上，在比赛之前，为了工作上的项目我已经几乎透支了, 队友也是一样。 但周六上午我们还是快速进入状态, 被逼的潜力果然不容小觑. 晒一张我们队伍合照. Laquo; 记录错误登陆的 btmp 文件. Twemproxy 一个 Redis 代理 ». Flume 实时收集 Nginx 日志.

zheng-ji.info

Category: NetWork - 织网

http://zheng-ji.info/blog/categories/network

Unix Domain Socket IPC通信机制. Flume 实时收集 Nginx 日志.

zheng-ji.info

Twemproxy 一个 Redis 代理 - 织网

http://zheng-ji.info/blog/2015/08/16/twemproxy

Twemproxy 一个 Redis 代理. 为解决线上 Redis 服务直连出现链接数爆棚而做的调研， 对 Twitter 开源的 twemproxy 做一些记录。 Twitter 出品的轻量级 Redis，memcached 代理，使用它可以减少缓存服务器的连接数，并且利用它来作分片。 Twemproxy 与每个 redis 服务器都会建立一个连接，每个连接实现了两个 FIFO 的队列， 通过这两个队列实现对 redis 的 pipeline 访问，将多个客户端的访问合并到一个连接，这样既减少了redis服务器的连接数，又提高了访问性能。 Git clone git:/ github.com/twitter/twemproxy.git. Listen: 127.0.0.1:8877. Auto eject hosts: true. Server retry timeout: 30000. Server failure limit: 3. 当redis做存储的使用时为了保持数据的一致性，应该禁用 auto eject hosts,也就是当某个节点失败之后并不删除该节点。 R 表示多少个 key,.

zheng-ji.info

Category: Product - 织网

http://zheng-ji.info/blog/categories/product

Flume 实时收集 Nginx 日志.

zheng-ji.info

MySQL Slave Relay log Corrupt 恢复 - 织网

http://zheng-ji.info/blog/2015/05/10/mysql-slave-relay-log-corrupt-chu-li-he-hui-fu

MySQL Slave Relay Log Corrupt 恢复. MySQL Slave SQL is 0.00. Show slave status G;. Slave IO State: Waiting for master to send event. Master Host: xxx.xxx.xxx. Master Log File: mysql-bin.000028. Ad Master Log Pos: 982714864. Relay Log File: relay-bin.000143. Relay Master Log File: mysql-bin.000028. Slave IO Running: Yes. Slave SQL Running: No. Replicate Wild Do Table:. Replicate Wild Ignore Table:. Exec Master Log Pos: 974999870. Relay Log Space: 399910514. Relay Master Log File: mysql-bin.000028.

zheng-ji.info

轻巧实时统计用户数 - 织网

http://zheng-ji.info/blog/2015/06/11/qing-qiao-shi-shi-tong-ji-yong-hu-shu

最近在优化一个短地址的统计服务，之前是使用 Cookie 来做统计每天的UV，而且这个需求是近乎实时的， 业务方需要每5分钟就能看到最新统计结果。 后来我用 IP UserAgent 来识别用户，从而统计 UV。 存进 Redis 的 Set 集合里，它会自动去重，然后计算该集合里元素的个数得到结果，此方案似乎不错， 但真的好吗 假如每天大概有200W个UV，1个用户标识. 组合成的字符串哈希成一个数值，然后借助 Redis 的 BitSet 数据结构求出. Index = hash(UA IP). Key = "xxx 2015-05-10". Conndo('SETBIT', key, index, 1) # 将该hash值对应的位赋值为1. Realtime uv = conn.do('BITCOUNT', key) # 得到实时的uv. Laquo; 搭建 Postfix. Mycnf 配置依据 ». Flume 实时收集 Nginx 日志.

zheng-ji.info

Blog Archive - 织网

http://zheng-ji.info/blog/archives

Flume 实时收集 Nginx 日志. 实时监控 nginx qps 的拓展. 给 Tengine 加上 lua 拓展. Twemproxy 一个 Redis 代理. MySQL Slave Relay log Corrupt 恢复. Haproxy - MySQl 的负载均衡. Iptable 之 NAT 转发. Unix Domain Socket IPC通信机制. Thread Pool in Python. Flume 实时收集 Nginx 日志.