Python通过Thrift插入Hbase实验-创新互联
#python
from thrift import Thrift
from thrift.transport import
TSocket
from thrift.transport import TTransport
from thrift.protocol
import TBinaryProtocol
from hbase import Hbase
from hbase.ttypes import *
transport = TSocket.TSocket('192.168.137.101',9090)
transport = TTransport.TBufferedTransport(transport)
protocol = TBinaryProtocol.TBinaryProtocol(transport)
client = Hbase.Client(protocol)
transport.open()
mutations = [Mutation(column="tuser:b",value="1")]
#client.mutateRow('ttable0','rowkey1', mutations, None)
for l1 in range(10):
for l2 in range(10):
for
l3 in range(10):
for l4 in
range(10):
client.mutateRow('ttable0','%d'%l1+'%d'%l2+'%d'%l3+'%d'%l4, mutations, None)
print 'finished'
4台centos虚拟机
2.2Ghz CPU × 1
1.5GB内存
共享单硬盘
插入1000条用时93秒,平均一秒插入107条
复制0.py为1.py, 2.py ……8.py
开启9个进程分别插入ttable0, ttable1, ttable2 ……ttable8
其它条件不变,总共用时约220秒,平均一秒插入409条
另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。
网站标题:Python通过Thrift插入Hbase实验-创新互联
文章链接:http://pwwzsj.com/article/phdoh.html