在采集网页信息的时候，经常需要伪造报头来实现采集脚本的有效执行下面，我们将使用urllib2的header部分伪造报头来实现采集信息方法1、#!/usr/bin/python#-*-coding:utf-8-*-#encoding=utf-8#Filename:urllib2-header.pyimporturllib2importsys#抓取网页内容-发送报头-1url="//www.jb51.net"send_headers={'Host':'www.
系统 2019-09-27 17:47:48 2047
引言logging的基本用法网上很多，这里就不介绍了。在引入正文之前，先来看一个需求：假设需要将某功能封装成类库供他人使用，如何处理类库中的日志？数年前在一个C#开发的项目中，我用了这样的方法：定义一个logging基类，所有需要用到日志的类都继承这个基类，这个基类中定义一个LogHandler事件，该事件用于实现具体的记录日志动作，同时可以通过将类A的LogHandler委托挂到类B的LogHandler上，实现将两个类的日志信息添加到一起。自从看了py
系统 2019-09-27 17:47:37 2047
importosimportsysimportstring#以指定模式打开指定文件，获取文件句柄defgetFileIns(filePath,model):print("打开文件")print(filePath)print(model)returnopen(filePath,model)#获取需要处理的文件defgetProcFile(path):returnos.listdir(path)#判断是否满足某个条件，如果满足则执行defisTrue(outF
系统 2019-09-27 17:47:04 2047
昆明地图defkmdt(x):importmatplotlib.pyplotaspltimportjsonwithopen('km.json','rb')asf:data=json.load(f)forfeainrange(len(data['features'])):df=data['features'][fea]['geometry']['coordinates']forf1inrange(len(df)):df1=df[f1]forf2inrange
系统 2019-09-27 17:46:53 2047
我们在定义Python类时，经常会看到比较好的代码中，都有__repr__和__string__,两个内部函数的定义。但是我一直很少关注它们的区别和具体应用场景。稍微做个小结。1.__foo()__在python中表示__foo__是一个私有private函数，在CookBookpp254中，解释为，该函数不会被子类的相同名称的函数重载。一般地说，类中以“下划线”开头定义的变量或者函数都是私有变量或者内部函数，区别是：1.1单下划线开始的变量或者函数表示非
系统 2019-09-27 17:46:49 2047
在带有参数的的函数进行装饰时defpri(func):defone(*a,**b):#这里要带参func(*a,**b)#这里也要带参returnone@prideftest(*a,**b):#不定长参数print(a,b)test(1,2,a=2)对有返回值的函数进行装饰时defpri(func):defone():returnfunc()#要将func()返回returnone@prideftest():returnTrueprint(test())带
系统 2019-09-27 17:46:29 2047
最近写的代码中写了很多函数，都是按步骤调用的，想看代码执行到第几个函数了，但又不想在每个函数中打印来表示执行到哪了，这时候就想用进度条来显示了，看网上没有我这种思路来实现的，自己来写个importtimeimporttqdmdefwork1():time.sleep(1)defwork2():time.sleep(1)defwork3():time.sleep(1)defwork4():time.sleep(1)defwork5():time.sleep(
系统 2019-09-27 17:45:25 2047
在我的印象里面进制互相转换确实是很常见的问题，所以在Python中，自然也少不了把下面这些代码收为util。这是从网上搜索的一篇也的还可以的Python进制转换，经过验证可以使用。下面贴出它的实现代码：#!/usr/bin/envpython#-*-coding:utf-8-*-#2/10/16basetrans.wrotebysrcdogon20th,April,2009#ldelementsinbase2,10,16.importos,sys#glob
系统 2019-09-27 17:38:46 2047
Python的一个备份程序这是一个备份脚本。路径请自行更换。这是一个备份脚本,按照当前日期分目录,以时间作为文件名,并且可以在文件名加入备注信息.以zip方式作为压缩方式,有特殊需求可以更改.实例代码：#!/usr/bin/python#coding=utf-8#这是一个备份脚本,按照当前日期分目录,以时间作为文件名,并且可以在文件名加入备注信息.#以zip方式作为压缩方式,有特殊需求可以更改.importosimporttimesource=['/hom
系统 2019-09-27 17:38:29 2047
Python可以使用xml.etree.ElementTree模块从简单的XML文档中提取数据。为了演示，假设你想解析PlanetPython上的RSS源。下面是相应的代码：fromurllib.requestimporturlopenfromxml.etree.ElementTreeimportparse#DownloadtheRSSfeedandparseitu=urlopen('http://planet.python.org/rss20.xml')
系统 2019-09-27 17:38:13 2047
在Python中要连接数据库，首先我们得先安装几个重要的东西，主要有：（1）Python-dev包（2）setuptools-0.6c11.tar.gz（3）MySQL-python-1.2.3.tar.gz下面分别来说说这三个主要的包的安装步骤：（1）Python-dev包直接yuminstallpython-devel（2）setuptools-0.6c11.tar.gz在网上下载后，先解压：tarzxfsetuptools-0.6c11.tar.gz
系统 2019-09-27 17:37:55 2047
需求在实际应用中，需要对xml配置文件进行实时修改，1.增加、删除某些节点2.增加，删除，修改某个节点下的某些属性3.增加，删除，修改某些节点的文本使用xml文档实现思想使用ElementTree，先将文件读入，解析成树，之后，根据路径，可以定位到树的每个节点，再对节点进行修改，最后直接将其输出实现代码#!/usr/bin/python#-*-coding=utf-8-*-#author:wklken@yeah.net#date:2012-05-25#ve
系统 2019-09-27 17:37:47 2047
Python中有join()和os.path.join()两个函数，具体作用如下：join()：连接字符串数组。将字符串、元组、列表中的元素以指定的字符(分隔符)连接生成一个新的字符串os.path.join()：将多个路径组合后返回一、函数说明1、join()函数语法：'sep'.join(seq)参数说明sep：分隔符。可以为空seq：要连接的元素序列、字符串、元组、字典上面的语法即：以sep作为分隔符，将seq所有的元素合并成一个新的字符串返回值：返
系统 2019-09-27 17:57:06 2046
一个简单的实现classNaiveFilter():'''FilterMessagesfromkeywordsverysimplefilterimplementation>>>f=NaiveFilter()>>>f.add("sexy")>>>f.filter("hellosexybaby")hello****baby'''def__init__(self):self.keywords=set([])defparse(self,path):forkeywo
系统 2019-09-27 17:56:10 2046
python访问抓取网页常用命令简单的抓取网页:importurllib.requesturl="http://google.cn/"response=urllib.request.urlopen(url)#返回文件对象page=response.read()直接将URL保存为本地文件：importurllib.requesturl="http://google.cn/"response=urllib.request.urlopen(url)#返回文件对象
系统 2019-09-27 17:56:08 2046
