最近在研究socket编程,写了个echo server,试了试pypy
,比用python2.7
流量大了好几倍,简直吓死宝宝了。本地跑网络相关的程序基本没有拥塞,所以主要就相当于测试CPU了,感觉主要是节省了线程和循环开销,可能是pypy
的某种优化吧
无事时我便自己尝试将在公司的项目代码在本地改用pypy
跑,毫无疑问会碰到一些困难,但这比从头开始用pypy
跑django
项目还是受益得多。官方号称快大概7倍(大误)
首先是包的问题,平常装的包都在py2的路径下,所以直接在pypy
的site-packages
下建一个.pth
文件把py2的包拿来用。进入pypy
的包文件夹
/usr/local/Cellar/pypy/4.0.1/libexec/site-packages
新建一个文件叫external.pth
,加入两行
/Library/Python/2.7/site-packages
/usr/local/lib/python2.7/site-packages
这样确实可以使用部分用pure python写的包了,但是有些用clang写的就不行了,比如MySQLdb
(mysql-python),谷歌了一下,答案千奇百怪,看的官方说是1.2.4c1及以上可以运行。但是项目就是跑不起来,一直报import _mysql
的错误,说是无此包。查看发现该库只有_mysql.so
文件。
对比着看,如果用py2的话,PyCharm会由_mysql.so
生成一个_mysql.py
作为缓存,然后就可以使用MySQLdb了,但是用pypy
跑的时候生成该文件失败。PyCharm中在Binary Skeletons
下有一个.blacklist
的文件记录有解析失败的.so文件
我把由PyCharm生成的_mysql.py
文件复制一份到py2下的MySQLdb包里,让pypy
直接使用它,这样此处就不再报错了,但是其它用了clang的还是报错,这样复制不是办法。继续在网上研究解决方法,然后发现这种用了C语言带.so文件的包不能用拿来主义,通常要通过CFFI的接口来调用(有些包可以直接用),普通C语言写的没有这种接口当然是不行的。另外,用ctypes
写的是兼容Cpython和PyPy的
因此安装给pypy用的包最好用其自己的方式,和cpython差不多
pip_pypy
easy_install_pypy
pypy setup.py intall
这样一个个地装包,不过有的还是有问题,比如Crypto
,py2装的包是Crypto,但是pypy装的包是crypto,但里面文件import的时候还是用的Crypto
,大小写不对。
装完需要的包之后,运行实测,选择一个比较复杂的网页,加载时间由接近1.9s减少到1s内,确实有非常明显地提高
后来还发现一个问题,在上述过程中把由PyCharm生成的_mysql.py
放到了py2的MySQLdb下,可以让pypy运行,但再让py2运行则会报错,需要移除