东杰书屋

1 分析日志的python框架awk.py## Custom awk.py module#class controller: def __init__(self, f): self.m_file = f self.m_handl

1.  首先将hive thrift server添加到系统服务后台运行    添加方法地址http://jiedushi.blog.51cto.com/673653/6089902.   利用python daemon守护进程监控hive server进程 ，代码如下#!/usr/bin/env pythonimport sys, os, time, atexit, string

Thrift是一个跨语言服务部署框架，最初由Facebook于2007年开发，后于2008年进入Apache孵化器(Apache Incubator)。类似于SOAP，COM 和CORBA，Thrift通过定义一个中间定义语言和Thrift代码生成工具，生成指定语言的代码。目前，Thrift支持C++,Java, Python, PHP, Ruby, Erlang, Perl, Haskell

centos 5.8系统中的python版本默认是2.4 ，升级到2.7需要手动编译安装1. 安装python2.7依赖库      yum -y groupinstall 'Development Tools'     yum -y install openssl-devel* ncurses-devel* zlib*.x86_64     yum -y install bzip

There are a lot of different ways to write MapReduce jobs!!!Sample code for this post https://github.com/joestein/amaunetI find streaming scripts a good way to interrogate data sets (especiall

import retudou@Gyyxf=open("/tmp/a.log","r")arr={}lines = f.readlines()for line in lines: ipaddress=re.compile(r'^#(((2[0-4]\d|25[0-5]|[01]?\d\d?)\.){3}(2[0-4]\d|25[0-5]|[01]?\d\d?))') mat

数字变为字符串 str(4)字符串变为数字 string.atoi(s,[，base]) //base为进制基数浮点数转换 string.atof(s)字符转数字 int(str)

http://blog.youkuaiyun.com/tianlesoftware/article/details/6753112#encoding=utf-8#序列：字符串、列表和元组#*******************************************#*****************  字符串      ****************#*************

1。在程序头包含：# -*- coding: utf-8 -*-#!/usr/bin/python# -*- coding: utf-8 -*-2。保存的时候，存成utf－8格式，因为python内部用的是unicode编码，而且最好是保存是把bom标志去掉。

比较容易记忆的是用内置的setl1 = ['b','c','d','b','c','a','a']l2 = list(set(l1))print l2 还有一种据说速度更快的，没测试过两者的速度差别l1 = ['b','c','d','b','c','a'

Python语言本身是没有注释多行的支持的，如果需要注册多行，可以用一个取巧的方法，就是把需要注释的代码块用三个单引号或者双引号括起来，赋值为一个永远都不会使用的字符串变量，例如：__devilcomment = '''if bCmpLog == "True":

import urllibproto, rest = urllib.splittype("http://www.baidu.com/11/12.htm")host, rest = urllib.splithost(rest)print hosthost, port = u

最近在做那个测试框架的时候发现 Python 的另一个获得系统执行命令的返回值和输出的类。最开始的时候用 Python 学会了 os.system() 这个方法是很多比如 C，Perl 相似的。os.system('cat /proc/cpuinfo')但是这样是无法获得到输出和返回值的，继续 Google，之后学会了 os.popen()。