logging模块简介logging模块是python内置模块,专门为打印日志的模块importlogginglogging.debug('debugmessage')logging.info('infomessage')logging.warning('warningmessage')logging.error('errormessage')logging.critical('criticalmessage')默认情况下python的logging模块将
系统 2019-09-27 17:56:41 2100
python有一个用于解析feed的模块:feedparser,feedparser解析各种feed是非常方便的,唯一比较恼火的是遇到一些badurl,经常会导致堵塞,因此需要为feedparser设置一个超时时间。可是feedparser并没有提供这个功能,只好采用其他方法了,具体办法请参看feedparser项目的issue221。其实也很简单,按照上面文档的说明developershavehadtheabilitytosetaglobaltimeou
系统 2019-09-27 17:56:01 2100
python异步IO编程(一)基础概念协程:pythongenerator与coroutine异步IO(asyncIO):一种由多种语言实现的与语言无关的范例(或模型)。asyncio:Python3.4版本引入的标准库,直接内置了对异步IO的支持。异步IO线程,多线程多线程善于处理I/O密集型任务。多进程擅长处理计算密集型(CPU-bound)任务:强密集循环和数学计算都属于此类。并发是并行的一种特殊类型(或者说子类),多线程是并发的表现形式,多进程是并
系统 2019-09-27 17:54:15 2100
首先需要有连接mongodb数据库基本信息:CONFIG_HOST='11.111.11.11'CONFIG_PORT='27017'CONFIG_DATABASE='databasename'CONFIG_USER='username'CONFIG_PASSWORD=XXXXXXCONFIG_TABLE='tablename'python通过pymongo对mongodb进行访问,提取出databasename中tablename中的colname_a,
系统 2019-09-27 17:53:00 2100
1)delorean非常酷的日期/时间库复制代码代码如下:fromdeloreanimportDeloreanEST="US/Eastern"d=Delorean(timezone=EST)2)prettytable可以在浏览器或终端构建很不错的输出复制代码代码如下:fromprettytableimportPrettyTabletable=PrettyTable(["animal","ferocity"])table.add_row(["wolverin
系统 2019-09-27 17:52:49 2100
字典是键/值对构成的集合,字典通过大括号来创建,字典的键是字符串,而值可以是任何数据对象。字典有两个重要的特征:字典是无序的,字典项没有特定的顺序,只能通过键来获取值;字典是可变的,支持原处修改键的值;字典是作为散列表来实现的,可增长,搜索非常快速;和列表一样,字典存储的是对象的引用,不是拷贝。创建字典创建空的字典:>>>d={}创建包含两个项目的字典:>>>d={'name':'vic','age':28}创建包含嵌套类型的字典:>>>d={'stude
系统 2019-09-27 17:52:13 2100
python统计指定目录内文件的代码行数,程序实现统计指定目录内各个python文件的代码总行数,注释行数,空行数,并算出所占百分比这符合一些公司的小需求,实际代码量的统计工作效果如图代码如下:#coding:utf-8importos,re#代码所在目录FILE_PATH='./'defanalyze_code(codefilesource):'''打开一个py文件,统计其中的代码行数,包括空行和注释返回含该文件总行数,注释行数,空行数的列表:param
系统 2019-09-27 17:51:01 2100
python动态进度条的实现代码,具体内容如下所示:有时候我们需要使用print打印工作进度,正常使用print函数会导致刷屏的现象,举个最简单的例子,从1打印到10,每次停顿0.1秒这样看起来很麻烦,有没有办法实现动态的进度显示呢?我们可以使用'\r',这个命令可以使光标重新返回头部,之后设置end='',取消python的打印自动换行的功能importtimeforiinrange(10):print('\r比例',i/10,end='')time.s
系统 2019-09-27 17:50:08 2100
logging的基本用法网上很多,这里就不介绍了。在引入正文之前,先来看一个需求:假设需要将某功能封装成类库供他人使用,如何处理类库中的日志?数年前在一个C#开发的项目中,我用了这样的方法:定义一个logging基类,所有需要用到日志的类都继承这个基类,这个基类中定义一个LogHandler事件,该事件用于实现具体的记录日志动作,同时可以通过将类A的LogHandler委托挂到类B的LogHandler上,实现将两个类的日志信息添加到一起。自从看了pyth
系统 2019-09-27 17:50:05 2100
中文乱码的解决方法爬虫最常见的问题是返回的数据中文乱码,对于爬虫小白来说这样的问题几乎不可避免,不过别担心,我这里有好几种解决中文乱码的方法,总有一款适合你。方法一:采用我这里代码里的这种方法,先在代码头设置编码方式为"UTF-8",UTF-8是保存中文字符的通用代码。然后,添加如下代码,一般都能解决中文乱码问题。#如果目标网页编码与本地不一致,修改本地默认编码方式(防止输出中文乱码)ifsys.getdefaultencoding()!=resp.enc
系统 2019-09-27 17:49:58 2100