Python作为Google的第三大开发语言、Dropbox的基础语言已经已经越来越得到人们的喜爱，尤其是运维人员，而且很多优秀的运维工具都是Python开发的，引用Python作者的一句话：人生苦短，我用Python。
下面我就和大家简单分享下我在用Python进行开发时使用的一些Python配置方面的小工具。
Python版本管理
我以前使用pythonbrew来管理我的开发机上面多个Python解析器，现在我使用pyenv来管理我的Python解析器，github地址，安装和使用直接见github里面的README就行了，用起来还是比较简单的，通过pyenv可以管理多个Python版本并共存，随时切换想要使用的版本，且这个工具本身不依赖于Python。
环境依赖
根据12Factor规则，应用程序要显示的声明依赖，这里我能想到的一个很好的例子是Ruby的Gemfile，这个文件里面声明了一个Ruby应用程序所依赖的所有依赖，Gemfile就是对Ruby程序的依赖声明，在Python里面对依赖进行声明我想到了pip。
依赖申明好了，不同的应用程序间如何进行依赖隔离呢，同样Ruby程序是用bundle exec，这里为什么要提Ruby，那时因为我以前配置一个Ruby应用程序感觉非常方便，直接执行script/bootstarp所有依赖都安装好了，基本直接运行程序就能跑了。
其实Python里面也有一个非常好的依赖隔离的东西virtualenv，下面简单介绍下基于virtualenv写了一个简单的Python项目类似Ruby的bundle的小工具。
Virtualenv Exec(ve)
源代码如下:
#!/bin/bash
if [[ $# -le 0 ]]; then
echo "Usage: `basename $0` <command> [agrument]..."
fi
if [ -r "$HOME/.verc" ]; then
source "$HOME/.verc"
fi
if [ -z "$VIRTUALENV_DIR" ]; then
VIRTUALENV_DIR=".virtualenv"
fi
DIR=`pwd`
for (( ;; ))
do
if [ -r "$DIR/$VIRTUALENV_DIR/bin/activate" ]; then
source "$DIR/$VIRTUALENV_DIR/bin/activate"
if [ -n "$VIRTUAL_ENV" ]; then
break
fi
fi
if [ "$DIR" == "/" ]; then
break
fi
DIR=`dirname $DIR`
done
if [ -z "$VIRTUAL_ENV" ]; then
echo "virtualenv: not found"
echo
exit 1
else
if [ "$1" == "-v" ]; then
echo "virtualenv: $VIRTUAL_ENV"
echo
shift
fi
exec $@
fibootstrap.py
源代码如下:
# -*- coding: utf-8 -*-
if __name__ == '__main__':
exit(1)
import os
import subprocess
import logging
import hashlib
import stat
logger = logging.getLogger(__name__)
class Bootstrap(object):
working_dir = None
bootstrap_dir = None
virtualenv_dir = None
def __init__(self, working_dir=None):
self.working_dir = working_dir or os.getcwd()
self.bootstrap_dir = self._config_dot_dir('BOOTSTRAP_DIR', '.bootstrap')
self.virtualenv_dir = self._config_dot_dir('VIRTUALENV_DIR', '.virtualenv')
if not os.path.isdir(self.bootstrap_dir):
os.makedirs(self.bootstrap_dir)
logger.debug('working_dir: %s', self.working_dir)
logger.debug('bootstrap_dir: %s', self.bootstrap_dir)
logger.debug('virtualenv_dir: %s', self.virtualenv_dir)
self.install_virtualenv()
self.install_ve()
def _config_dot_dir(self, env_name, default_value=None):
value = os.environ.get(env_name)
if not value:
return '%s/%s' % (self.working_dir, default_value)
logger.debug('config %s from envron', env_name)
if os.path.isabs(value):
return value
else:
return '%s/%s' % (self.working_dir, value)
def install_virtualenv(self):
if os.path.isfile('%s/%s' % (self.virtualenv_dir, 'bin/activate')):
return
executable = None
try:
executable = subprocess.check_output(['command', '-v', 'virtualenv-12.0.7/virtualenv.py'])
if not type(executable) is str:
# convert from bytes to str (unicode) under python3
executable = executable.decode()
executable = executable.strip()
except:
pass
if not executable:
virtualenv_tar = '%s/%s' % (self.bootstrap_dir, 'virtualenv.tar.gz')
executable = '%s/%s' % (self.bootstrap_dir, 'virtualenv-12.0.7/virtualenv.py')
self.download('http://mirrors.aliyun.com/pypi/packages/source/v/virtualenv/virtualenv-12.0.7.tar.gz',
virtualenv_tar, 'e08796f79d112f3bfa6653cc10840114')
os.system('tar -zxvf "%s" -C "%s"' % (virtualenv_tar, self.bootstrap_dir))
os.chdir(self.bootstrap_dir)
try:
os.system('%s --distribute --no-site-packages "%s"' % (executable, self.virtualenv_dir))
finally:
os.chdir(self.working_dir)
def download(self, source, target, hashing=None):
#if hashing and os.path.isfile(target) and hashing == self.md5sum(target):
#return
if os.system('wget "%s" -O "%s"' % (source, target)) == 0:
return
if os.system('curl "%s" -o "%s"' % (source, target)) == 0:
return
logger.error('Unable to download "%s"' % source)
raise RuntimeError
def mark_executable(self, path):
st = os.stat(path)
os.chmod(path, st.st_mode | stat.S_IXUSR | stat.S_IXGRP | stat.S_IXOTH)
def md5sum(self, filename):
return hashlib.md5(open(filename, 'rb').read()).hexdigest()
def install_ve(self):
executable = '%s/%s' % (self.bootstrap_dir, 've')
self.download('https://raw.github.com/baijian/ve/v1.1/ve',
executable, 'fd0f0601c6732ca9a5b3b62e691d68cb')
self.mark_executable(executable)
def ve(self, cmd):
os.system('%s/%s %s' % (self.bootstrap_dir, 've', cmd))
_bootstrap = None
__all_ = ['bootstrap', 've']
def bootstrap(working_dir=None):
global _bootstrap
_bootstrap = Bootstrap(working_dir)
def ve(cmd):
global _bootstrap
if not _bootstrap:
bootstrap()
_bootstrap.ve(cmd)开始使用
- 创建项目目录
mkdir project && mkdir project/script && cd project- 编写脚手架
#!/usr/bin/env python
# -*- coding: utf8 -*-
import os
source = "https://raw.github.com/baijian/bootstrap.py/v1.2/bootstrap.py"
target = "%s/bootstrap.py" % os.path.dirname(os.path.abspath(__file__))
if not os.path.isfile(target):
os.system("wget '%s' -O %s" % (source, target))
from bootstrap import bootstrap, ve
bootstrap(os.path.dirname(os.path.abspath(__file__)) + "/..")
ve("pip install requests==2.4.1")- 修改依赖申明(可选)
编辑并修改script/bootstrap文件
- 安装项目依赖
script/bootstrap- 查看项目依赖
ve pip freeze- 查看项目使用的Python解析器
ve command -v python其他
如果要使用Python进行web应用的开发，可以选用的框架诸如Flask、Django、Tornado、web.py，提到web.py，想到了互联网之子亚伦·斯沃茨，有兴趣可以看看他的视频~
还有一些有些的优秀的Python运维工具诸如：Ansible、Saltstack、Fabric、Supervisord等，Python的开源模块的质量非常高，这也是我喜欢Python的一个很重要的原因。
