pydevops.com
雪松的个人网站 | xuesong's Personal WebsiteGolang python devops
http://www.pydevops.com/
Golang python devops
http://www.pydevops.com/
TODAY'S RATING
>1,000,000
Date Range
HIGHEST TRAFFIC ON
Wednesday
LOAD TIME
4.3 seconds
PAGES IN
THIS WEBSITE
20
SSL
EXTERNAL LINKS
20
SITE IP
101.200.80.162
LOAD TIME
4.297 sec
SCORE
6.2
雪松的个人网站 | xuesong's Personal Website | pydevops.com Reviews
https://pydevops.com
Golang python devops
pydevops.com
python代码检查，实现行级代码优化 | 雪松的个人网站
http://www.pydevops.com/2015/09/16/python代码检查，实现行级代码优化
首先需要你要找到该程序瓶颈在哪里 比如，哪个函数的运行花费时间比较长 哪个函数占用内存比较多，是否需要优化对内存的使用 哪个占用cpu时间比较长 等… 这些都需要考虑，python有几个库可以帮助你解决这些问题 废话不多说，切入主题。 Touch c9.py #! Usr/bin/env python #Date: 2015/07/21 def read file(fpath): BLOCK SIZE=1024 with open(fpath, 'rb') as fd: block = fd.read(BLOCK SIZE) if block: yield block else: return def main(): for i in read file(' /access.log') print i if name = " main ": main(). 因此， Real time和user sys相加的不同或许表明了时间花费在等待i/o或者是系统在忙于执行其他任务。 Pip install line profiler. Kernprof -l -v 要执行的代码.
golang 信号量源码剖析 | 雪松的个人网站
http://www.pydevops.com/2016/11/16/golang-信号量源码剖析
Func semroot(addr *uint32) *semaRoot { return &semtable[(uintptr(unsafe.Pointer(addr) 3)%semTabSize].root } / sync.Mutex的异步信号量 type semaRoot struct { lock mutex head *sudog tail *sudog nwait uint32 / Number of waiters. Read w/o the lock. } / runtime/runtime2.go / acquireSudog 函数返回类型 / sudog表示等待列表中的g，用于在channel上发送/接收。 你之前有处于自旋状态的g,它比你更快的获取到该信号.所以有可能获取信号失败. if cansemacquire(addr) { break } } releaseSudog(s) }. 这就是系统程序员和应用程序员最大的区别,在系统程序员眼中,在将该地址放到等待队列之前,它先考虑是否有另外一个人正好释放锁。 只有见缝插针的使其时间尽可能被利用起来,才能提高该性能;而应用程序员感...
Go Mutex 源码剖析 | 雪松的个人网站
http://www.pydevops.com/2016/11/21/go-mutex-源码剖析
Golang 并没有使用系统提供的互斥锁,而是在用户空间给予原子操作实现,以便更好地支持并发调度。 Golang 标准库sync提供Mutex、RWMutex,使用起来并不复杂,但有几个地方需要注意:. 2 Mutex创建后,以后对Mutex的操作不能复制Mutex,必须实现为pointer-receiver,否则会因复制的关系,导致锁机制失效. Sync/mutex.go type Mutex struct { state int32 sema uint32 / 向休眠状态队列发送锁释放信号,处于自旋状态的G最先拿到该信号 } const ( mutexLocked = 1 iota / 1 -上锁状态; 0 未上锁状态; mutexWoken mutexWaiterShift = iota ). State是一个int32类型,由32个二进制位组成,该state被切成3部分使用(通过const 三个常量可以得知)。 0位表示是否上锁, 1位表示清醒状态,2 31位表示等待队列等待计数。 Awoke & old&mutexWoken = 0 & old mutexWaiterShift! 4 如果直接...
生活 | 雪松的个人网站
http://www.pydevops.com/category/life
Slice data safe append in multiple goroutines. PushData.py -H 12. Zip filter sorted enumerate.
Go Cond源码剖析 | 雪松的个人网站
http://www.pydevops.com/2016/12/04/go-cond源码剖析-3
使用Cond时要小心,其实在该实例中c.L.Unlock()并不是该实例c.L.Lock()的解锁。 2 解锁,此处才是给cond函数c.L.Lock解锁。 4 上锁,此处的上锁才是给cond函数c.L.Unlock加锁。 拿该例子来说,c.L.Unlock()放到fmt.Println(id, “done.”)之前和之后完全是不一样的。 写在fmtPrintln(id, “done.”)之后,并发任务是安全的.放在fmt.Println(id, “done.”)之前并发任务是非安全的。 Type Cond struct { noCopy noCopy L Locker notify notifyList / 通知列表 checker copyChecker / 复制检查 }. Type copyChecker uintptr func (c *copyChecker) check() { if uintptr(*c)! Uintptr(unsafe.Pointer(c) & / 初始化时, *c = 0,自然和c pointer不等! 单播 func (c *Cond) Signal() { c...
TOTAL PAGES IN THIS WEBSITE
20
灿哥的Blog | Run Ansible Through Jumpbox Machine
http://www.shencan.net/index.php/2015/02/14/run-ansible-through-jumpbox-machine
我们都知道ansible能 通过ssh 协议去管理机器， 但是在企业当中为了统一管理服务器登录权限 一般都会采用跳板机的方式去做安全相关的东西。 这样一来 每天如果想维护服务器 第一件事情还得登录跳板机 然后才能登录设备。 今天我给大家介绍下 通过ansible 怎么直接管理机器 绕过跳板机 其实这个跟ansible 的关系不是很大 在ansible的世界里面 只要我ssh 能通 认证能过 我就能管理这台机器 python环境不在此次讨论之内。 下面其实主要讲的是 通过ssh 打个隧道 让本机能直接与服务器 ssh 能通就行。 这部很简单 ssh-keygen -t rsa 后然后ssh-copy-id 到跳板机 就行. 第2步 需要打通 跳板机到所有服务器 这里我们是用指定key登陆的 当然你也可以 跟第一步一样去打通跳板机到服务器的登陆. 下面需要做的是 在我的mac 电脑下 我mac 下安装了ansible 配置 ssh 因为需要通过跳板机去代理 关于SSH的代理 网上很多配置 我这里就不多讲了. Ok 其实配置 就这些 如果前面2个前提你都ok了 这些配置你就可以直接在mac 下管理服务器了.
灿哥的Blog | 分类存档: 4层负载均衡与高可用
http://www.shencan.net/index.php/category/cdn业务/4层负载均衡与高可用
目前大家用LVS Keepalived APP 架构都是 2台LVS Keepalived 然后后端跟着 应用设备. 因为我们公司太扣了 说 2台LVS平常没什么压力 还有一台备着(其实可以跑双主) 想让我们充分利用起来 能不能把后端应用 也部署都LVS上[.]. 修改LVS IPVS connection hash table大小. 下面是在网上摘抄的关于 LVS connection hash table的介绍. Lvs keepalived 4层负载均衡 高可用. 接着写吧 写完7层 再来4层 关于LVS跟haproxy的区别 网上很多 当然你也可以用haproxy 跑4层来代替 LVS (好像LVS也有7层负载均衡 官网有名字不叫LVS) 有时间 可以对比测试一下 haproxy 4层跟LVS的 性能. 先说下吧 LVS keepali[.]. Lvs keepalived 互为主备模式 部署. 先说互为主备模式，其实是在2台设备上监听2个VIP ，第一个VIP A设备是主 B设备为备 第二个VIP B设备是主 A 设备是备. Ceph 部署笔记(centos7 10.2.0版本).
灿哥的Blog | SaltStack(十七) multi-environment with gitfs fileserver_backend
http://www.shencan.net/index.php/2015/04/06/saltstack十七-multi-environment-with-gitfs-fileserver_backend
发现一个不错的多环境 gitfs backend 例子 https:/ github.com/bretep/salt-multi-environment-gitfs/tree/prd. Run Ansible and SaltStack on Jenkins. 2015 年 4 月 28 日 at 下午 3:02. 2015 年 6 月 8 日 at 下午 3:45. 2015 年 6 月 14 日 at 上午 9:52. 2015 年 6 月 17 日 at 上午 9:12. 2015 年 8 月 6 日 at 下午 12:29. 2015 年 9 月 7 日 at 下午 6:19. 2015 年 10 月 19 日 at 下午 2:33. 2015 年 12 月 4 日 at 上午 12:14. 2016 年 1 月 8 日 at 下午 7:22. 2016 年 2 月 13 日 at 下午 8:37. Ceph 部署笔记(centos7 10.2.0版本). Run Ansible and SaltStack on Jenkins.
灿哥的Blog | Good Bye Yottaa(Very frustrated)
http://www.shencan.net/index.php/2015/04/05/good-bye-yottaa-（very-frustrated-）
本来打算用英语来写本篇博客的, 虽然我已经加入外企1年了 但是我的英语能力还是没有达到自己的目标。 没想到这种事情居然立马就发生到我身上了，而且还是没有任何征兆, 可能这就是资本主义的特色吧 也体现了下 资本主义的残酷 而且没有还任何商量余地. 一来公司 就有一家专门的法律公司接管你们的所有后续工作(合同解约 相关赔偿等等问题)。 Yottaa(www.yottaa.com)是一家基于云(aws openstack)上的网站优化解决方案(除了不做中国市场 其他国家全部做). 在技术方面 对外公布的 目前也就Akamai(因为我们VP来着这里) cloudflare(那个搞nginx的章亦春他们公司) 这2家公司 在做跟yottaa类似的产品. 公司运作模式是北京作为技术研发中心(核心员工可以拿H1B签证去美国办公 ) 市场与销售在美国,了解Yottaa之后,下面主要是我自己对这1年技术的总结与回忆. 入职公司之后 最开始接触最多的就是 全英语环境(skype交流 办公用的jira那一套(收费版) 跟 aws. 因为Yottaa 大部分机器都是跑在aws上 而且还用了一些aws的其他服务。
灿哥的Blog | ELK (1)
http://www.shencan.net/index.php/2015/01/02/elk-1
已经好久没写博客了 ，2015年来了 ，趁着周末写上一个，最近大家没事跟着大师兄 陈子 学elk stack，前段时间也关注 学习过一点点，今天趁热 把 今天的实践过程 用博客的形式 撸一片 以后继续学习的时候 好查阅。 大家都知道 elk 是一个组合 至于是哪3个软件 我这里就不说了 ，建议还是先去了解下elk的一个工作流程. Elk架构一般是 一堆应用服务器 产生了一些应用或者系统的日志 可以利用一些日志收集软件 把所有服务器的日志收集在一起. 关于收集日志的软件 还是比较多的 比如 Scribe, Flume, Heka, Logstash, Chukwa, fluentd等等 当然 rsyslog rsyslog-ng 也可以收集. 关于收集回来的日志 存储的软件也有很多 比如 HDFS Cassandra Mongodb Redis 啥的 当然 ElasticSearch 也是啦. 日志存储起来后 就需要开始对他进行分析了 当然也可以实时分析后再存储，关于日志分析的 软件方案也是很多的 比如你用HDFS 那就可以写MapReduce 分析 如果你需要实时分析的话你可以用kibana进行展示.
灿哥的Blog | SaltStack(十五) ext_nodes and ext_pillar
http://www.shencan.net/index.php/2015/01/10/saltstack十五-ext_nodes-and-ext_pillar
今天主要讲下SaltStack 的ext nodes 跟ext pillar 这2块属于对top.sls 跟pillar数据的一种扩展。 今天庆爷说阿里CDN都是采用的这种方式去弄的 所有我就多看了下官网文档 然后撸了一些资料 顺便实验了一番。 平常我们玩SaltStack 的时候 会手动写个top.sls 取指定哪些设备调用哪些states 文件 ，其实ext nodes 就是对这个top.sls 的一个扩展. 如果你采用ext nodes的方式 就相当于你不用写top.sls了 因为如果你机器很多或者新增机器 你可能需要去改动top.sls文件。 意思就是这个文件可以动态生成，类似于puppet 的ENC. 当然这个数据源可以来着很多地方 ，但是不管的数据源来着哪里 你返回的结果必须是salt能识别的格式 YAML 目前官方支持4种数据源 cobbler ext nodes 今天要讲的 mongo reclass database 好像肥神讲解过关于这个先了解到这里吧 清楚它是干啥的就行. 大家也都支持pillar 是一个做数据存储的 平常我们也是去手动写一下YAML语法的 key value 值对。
灿哥的Blog | 作者存档
http://www.shencan.net/index.php/author/admin
鄙人写的一本Ansible书籍 上市了 目前国内各大电商网站都有货 欢迎选购。 Http:/ product.dangdang.com/23958049[.]. Ceph 部署笔记(centos7 10.2.0版本). 最近一直在学习openstack 学习fuel, 想搞好云技术必须需要搞好网络和存储，今天就来学习下目前最火的支持各种存储方式的软件ceph，其他的不多说直接开始干活. 研究docker的时候尼玛发现各种组件 尼玛一堆都没有听说过，这里简单整理下我目前了解的一些docker周边组件, 希望能互相交流下. Run Ansible and SaltStack on Jenkins. 最近一直在搞docker 写书 已经N久没更新博客了，以前在yottaa的时候是经常使用jenkins，然后时不时的又使用ansible SaltStack这样的配置管理工具，很多人动不动就问有没有web 虽然每个人运维都有一个平台梦，但是我一直想不到一个配置管理工具 需要[.]. SaltStack(十七) multi-environment with gitfs fileserver backend.
灿哥的Blog | ansible 插件之callback_plugins
http://www.shencan.net/index.php/2014/06/16/ansible-插件之callback_plugins
今天看看ansible的插件吧，ansible的插件 还是很牛掰的 ，供python大神 开发下自己特定得功能，可惜我python还不太会，于是只能从官方的插件 开始看起。 Http:/ docs.ansible.com/developing plugins.html. Ansible 插件 有几种 详细 大家去看看上面的链接 今天我们就看看 callback插件. Python 牛掰的 你们应该 很快能看懂 我python还是 比较菜 好多看不懂。 关于callback插件的介绍 官方 就这一句 然后就是例子. Callbacks are one of the more interesting plugin types. Adding additional callback plugins to Ansible allows for adding new behaviors when responding to events. 我的理解就是 在ansible 响应一些play-books的时候 顺便还可以调用callback插件 干些其他的事情 不知道 这样理解对不对。 他插件比较 简单 他直接把执行...
灿哥的Blog | 分类存档: Linux日常应用
http://www.shencan.net/index.php/category/linux应用
Linux 下做地址NAT有很多中方法 比如haproxy/nginx 的4层代理 linux自带的iptables 跟socat 都能实现 ，haproxy跟nginx 那个就不说了 ，iptables 这玩意 说实话 我们线上都是高并发 大流量的环境 这玩意不是关闭了 就是没安[.]. 不说啦 今天把制作bin 包过程记录下吧 这玩意可能没人用 大家一般都是打rpm包 ， 因为我们的需求很操蛋 如果打rpm包的话 比较麻烦 我写spec文件还是比较菜 今天就打个bin包. 直到那一天 360 提出了无限空间 ，这个网盘大战才慢慢开始消停。 我一直梦想 想测试下 网盘 200G 500G 1T最后到无限大。 人家真的能给你这么大空间吗 可惜我在windows上备份资料 也就用了15G, 如果他们出一个linux下的[.]. 今天没事 在群里看兆松兄 itnihao 发了一个Gate One 这个玩意 一看是一个web版本的ssh终端。 以前没事的时候 玩过一个叫Ajaxterm的web版的ssh终端，感觉不太会玩 ，大概的玩了下 感觉不太爽。 个人试了一下 感觉跟方便 所以记录下 怕以后能用到.
灿哥的Blog | 分类存档: 缓存系统
http://www.shencan.net/index.php/category/cdn业务/缓存系统
大家都知道 ats squid这些缓存软件默认都是遵循http协议 RFC2616 的，http的cache控制 有很多 详情大家可以去看看HTTP权威指南 这本书很牛掰 虽然HTTP东西不是一个统一的标准 但是算是一个规范 通读一片 你会少活几年的 没事大家去看看吧 下面我们就来搞搞AT[.]. 最近好久没写博客了 今天写个ATS cache url插件的博客吧 ，玩过ats的都应该知道cache url是干啥的 我以前也写过应该ats cacheurl的文件 因为当时版本很旧 我是通过编译安装的cacheurl插件，现在我们线上用的是ats4.0.1版本 那个cacheurl插件已经自[.]. Ats这个东西好久没写博客了 现在离我认识ats已经有1年的时间了但是到目前为止 也没关注多少了 在上家公司 因为cache需求比较简单所以ats上得比较快 本来一直想在我们公司推ats的 一开始由于3.2.4版本对206 range请求有问题 所以一直没上多少台 其实上的就是 简单的一些w[.]. ATS 实现类似squid的storeurl rewrite program外挂程序功能.
TOTAL LINKS TO THIS WEBSITE
20
My Site
This is my site description. Powered by InstantPage® from GoDaddy.com. Want one?
Positive Youth Development Organization – Support minorities Education in Africa.
Each Youth is a Star that Education and Support make Shine. CHAQUE ENFANT EST UNE ETOILE QUE L'EDUCATION ET LE SOUTIEN FONT BRILLER. What We Do/ Ce que Nous Faisons. We use news technologies to help them acquire 21st Century skills and Basic human rights valuable for their personal, professional growth and social inclusion. Check out About Our Organization. Positive Youth Development Organization. Since 2013, we support socio-professional fulfillment of underserved youth through collaborative and communi...
Py Consulting Group, LLC
PY Consulting Group (PCG), LLC. Is an international real. Estate consulting, development, and finance professional. Services firm with over 40 years of experience. We offer a. Client-driven, entrepreneurial, no-nonsense business service. In a timely and cost-effective manner. We understand that. Each project is unique and have the experience, resources,. And skill to master any challenge. Extensive international experience and over $4.5 Billion. Dollars of successfully completed projects define. Let PY C...
Py Consulting Group, LLC
PY Consulting Group (PCG), LLC. Is an international real. Estate consulting, development, and finance professional. Services firm with over 40 years of experience. We offer a. Client-driven, entrepreneurial, no-nonsense business service. In a timely and cost-effective manner. We understand that. Each project is unique and have the experience, resources,. And skill to master any challenge. Extensive international experience and over $4.5 Billion. Dollars of successfully completed projects define. Let PY C...
雪松的个人网站 | xuesong's Personal Website
那该怎么做那 首先需要你要找到该程序瓶颈在哪里 比如，哪个函数的运行花费时间比较长 哪个函数占用内存比较多，是否需要. Go sync WaitGroup 源码剖析. Go sync WaitGroup 源码剖析. Golang 并没有使用系统提供的互斥锁,而是在用户空间给予原子操作实现,以便更好地支持并发调度。 Golang 并没有使用系统提供的互斥锁,而是在用户空间给予原子操作实现,以便更好地支持并发调度。 Go-redis 源码剖析 - 架构篇. Zip filter sorted enumerate.
pydevs.com - This website is for sale! - pydevs Resources and Information.
The domain pydevs.com. May be for sale by its owner! This page provided to the domain owner free. By Sedo's Domain Parking. Disclaimer: Domain owner and Sedo maintain no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo or domain owner and does not constitute or imply its association, endorsement or recommendation.
PyDEX
Git clone git:/ github.com/cristianav/PyDEX.git. Cristian Năvălici 2015 - app.footer.
足球导航|足球网址-河南宏润装饰工程有限公司
2017-3-2 17:11:37 メ楓 ` 💕. 2017-3-2 21:02:42 ℳ๓ `淡忘. 位游客 - 最高记录是 46.
正宁教育网
媒体谈 神题 本末倒置 创新 戕正宁害思维能力. 十二月教育回顾 国家公祭 招考改革正宁 教改足迹. 杭州加速推进正宁教育国际化 实施 校校有外教 项目. 青海 对农牧区幼师开展 送教上门正宁 专业培训.
Pydf.com
The domain pydf.com may be for sale. Click here for details. This domain may be for sale. Buy this Domain.
