这里主要讲了bs4解析方法和json方法，以8684网页为例子，爬取了全国公交线路importrequestsimporttimefrombs4importBeautifulSoupimportjsonfromxpinyinimportPinyinheaders={'User-Agent':'Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/76.0.
系统 2019-09-27 17:53:12 1811
早听说用python做网络爬虫非常方便，正好这几天单位也有这样的需求，需要登陆XX网站下载部分文档，于是自己亲身试验了一番，效果还不错。本例所登录的某网站需要提供用户名，密码和验证码，在此使用了python的urllib2直接登录网站并处理网站的Cookie。Cookie的工作原理：Cookie由服务端生成，然后发送给浏览器，浏览器会将Cookie保存在某个目录下的文本文件中。在下次请求同一网站时，会发送该Cookie给服务器，这样服务器就知道该用户是否合
系统 2019-09-27 17:53:11 1811
本文实例讲述了Python的批量远程管理和部署工具Fabric用法。分享给大家供大家参考。具体如下：Fabric是Python中一个非常强大的批量远程管理和部署工具,常用于在多个远程PC上批量执行SSH任务.常见的使用方法大概总结如下:1.首先,要将批量执行的任务写入到一个fabfile.py中,复制代码代码如下:#-*-coding:utf-8-*-fromfabric.apiimportrun,local,roles,env,cdenv.hosts=[
系统 2019-09-27 17:52:48 1811
最近在做游戏服务分层的时候，一直想把mysql的访问独立成一个单独的服务DBGate，原因如下:请求收拢到DBGate，可以使DBGate变为无状态的，方便横向扩展当请求量或者存储量变大时，mysql需要做分库分表，DBGate可以内部直接处理，外界无感知通过restful限制对数据请求的形式，仅支持简单的get/post/patch/put进行增删改查，并不支持复杂查询。这个也是和游戏业务的特性有关，如果网站等需要复杂查询的业务，对此并不适合DBGate
系统 2019-09-27 17:52:45 1811
运行多进程每个子进程的内存空间是互相隔离的进程之间数据不能共享的互斥锁但是进程之间都是运行在一个操作系统上，进程之间数据不共享,但是共享同一套文件系统,所以访问同一个文件,或同一个打印终端,是可以的，而共享带来的是竞争，竞争带来的结果就是错乱#并发运行,效率高,但竞争同一打印终端,带来了打印错乱frommultiprocessingimportProcessimporttimedeftask(name):print("%s1"%name)time.slee
系统 2019-09-27 17:52:42 1811
在配置python环境，并安装所需包后，运行下列代码~importpandasaspdfromsqlalchemyimportcreate_engineimportcx_Oracle#进行oracle服务器设置，用户名；密码；HOST数据库IP地址；PORT端口号；SERVICE_NAMEdb=cx_Oracle.connect('userid','password','10.10.1.10:1521/dbinstance')print(db.versio
系统 2019-09-27 17:52:32 1811
Python的字符串的特点Python与C语言,Java语言都不一样，没有单个字符，只有一个有一个字符的字符串。字符串对象不可修改，属于不可变类型字符串和列表，元组都从属于序列这个对象类别。所以序列支持的操作，字符串也支持。用单引号和双引号表示都行，并列的字符串串常量会自动合并，不需要显式的用加号表示。单双引号里面的特殊字符必须用转义序列表示，比如”，',\都需要在前面加个、，但是在三引号里面不需要转义。Python的字符串的支持的基本操作支持序列的操作，
系统 2019-09-27 17:52:13 1811
本文实例讲述了VPSCENTOS上配置python,mysql,nginx,uwsgi,django的方法。分享给大家供大家参考，具体如下：昨天试用了VPS，花了一天部署了一个简单应用。在下面的过程中省去了用django创建project的一步，忘记了你自己一用startporject创建。下面是原来边操作，边记录的东西，我习惯文本编辑。可能格式不好看。现在搬到博客中来。首先安装GCC.yum-yinstallgccautomakeautoconflibt
系统 2019-09-27 17:52:01 1811
函数这么重要的东西自然少不了。那么在python中是怎么定义的呢？defcgg(name):print("haha%s"%name)def是定义的意思，而cgg是函数名，name是参数。当然了，有了函数吗，自然少不了函数的返回值。那么这里用的依然是return。defcgg(a,b):returna+b模块一个小例子：importtimeprint(time.asctime())这个可以显示现在的时间。而这个time就是一个模块，包括之前的turtle也是
系统 2019-09-27 17:51:49 1811
2016年1月，机缘巧合下我出版了《Selenium2自动化测试实战--基于python语言》这本书，当时写书的原因是，大部分讲Selenium的书并不讲编程语言和单元测试框，如果想在项目中使用Selenium，几乎离不开编程语言和单元测试框架，难道你只用SeleniumIDE去录制/回放脚本么？没想到受到许多测试人员的欢迎，我会时常去看网上的书评。大多是感谢的留言，书的销量也印证了这一点，当然，也有批评和建议。在此，表示感谢。随着，我对Selenium自
系统 2019-09-27 17:51:40 1811
