显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

snoopyxdy的博客

https://github.com/DoubleSpout

 
 
 
 
 
 

python 多进程示例

2015-4-16 14:32:52 阅读17 评论0 162015/04 Apr16

众所周知,python本身是单线程的,python中的线程处理是由python解释器分配时间片的;但在python 3.0中吸收了开源模块,开始支持系统原生的进程处理——multiprocessing.

注意:这个模块的某些函数需要操作系统的支持,例如,multiprocessing.synchronize模块在某些平台上引入时会激发一个ImportError

1)Process
  要创建一个Process是很简单的。

from multiprocessing import Process
def f(name):

作者  | 2015-4-16 14:32:52 | 阅读(17) |评论(0) | 阅读全文>>

linux常用命令

2015-4-14 14:50:34 阅读26 评论0 142015/04 Apr14

1、netstat -an | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}' 
查看tcp连接数状态

2、sudo netstat -antp |wc -l
查看所有TCP连接数

3、 sudo /usr/sbin/tcpdump -p tcp and host 172.16.136.180
tcpdump查看tcp协议的包:

16:12:28.632819 IP 172.16.136.180.28227 > 172.16.140.154.redwood-broker: S 1596666623:1596666623(0)

作者  | 2015-4-14 14:50:34 | 阅读(26) |评论(0) | 阅读全文>>

最近公司需要测试1亿条数据10分钟插入数据库,主要是为了数据推送留存用。
最终我们讨论给出了2套方案
1、单台sqlserver 配合PCIE卡
2、Mongodb分片集群
因为目前数据量是4千万,所以我分别对4千万数据和1亿数据进行了写入测试。
被测试机器都是24CPU,64G内存的独立服务器
测试代码运行服务器也是24CPU,64G内存的独立服务器
网络环境是内网1G带宽。

1、单台sqlserver 配合PCIE卡

作者  | 2015-3-30 9:30:09 | 阅读(165) |评论(0) | 阅读全文>>

thrift 文件编写教程

2015-3-20 17:00:35 阅读86 评论0 202015/03 Mar20

1. 内容概要
本文档比较全面的介绍了thrift(关于thrift框架的介绍,参考我这篇文章:Thrift框架介绍)语法,代码生成结构和应用经验。本文主要讲述的对象是thrift文件,并未涉及其client和server的编写方法(关于client和server的编写方法,可参考我这篇文章:使用Thrift RPC编写程序)。
本文档大部分内容翻译自文章:“Thrift:The missing Guide“。
关于Thrift内部实现原理,可参考:浅谈Thrift内部实现原理。
2. 语法参考
2.1 Types
Thrift类型系统包括预定义基本类型,用户自定义结构体,容器类型,异常和服务定义
(1) 基本类型

作者  | 2015-3-20 17:00:35 | 阅读(86) |评论(0) | 阅读全文>>

利用一致性哈希水平拆分MySql单表

2015-3-13 16:32:46 阅读105 评论0 132015/03 Mar13

Sharding(切片) 不是一门新技术,而是一个相对简朴的软件理念,就是当我们的数据库单机无法承受高强度的i/o时,我们就考虑利用 sharding 来把这种读写压力分散到各个主机上去。

所以Sharding 不是一个某个特定数据库软件附属的功能,而是在具体技术细节之上的抽象处理,是Horizontal Partitioning 水平扩展(或横向扩展)的解决方案,其主要目的是为突破单节点数据库服务器的 I/O 能力限制,注意这里是突破单点数据库服务器的“I/O”能力。

作者  | 2015-3-13 16:32:46 | 阅读(105) |评论(0) | 阅读全文>>

查看所有日志>>

 
 
 
 
 
 
 
 

江苏省 苏州市 射手座

 发消息  写留言

 
专注互联网技术
 
博客等级加载中...
今日访问加载中...
总访问量加载中...
最后登录加载中...
 
 
 
 
 
 
 
心情随笔列表加载中...
 
 
 
 
 
 
 
博友列表加载中...
 
 
 
 
 

发现好博客

 
 
列表加载中...
 
 
 
 
 
 
 
列表加载中...
 
 
 
 
 
 我要留言
 
 
 
留言列表加载中...
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2015

下载LOFTER客户端

汇聚2000万达人的兴趣社区
下载即送20张免费照片冲印

创建博客 登录  
 加关注