之前用了谷歌的selenium模块，为了练习一下所以写了这个（没错才不是别的理由！）代码里涉及到了各种复杂的情况，包括要找的div在别的iframe中的处理方式，顶部导航栏的定位方式等等。综合性很强下面是代码fromseleniumimportwebdriverimporttimefromfake_useragentimportUserAgentopt=webdriver.ChromeOptions()#opt.add_argument('--headle
系统 2019-09-27 17:52:25 1989
最近在做周报的时候，需要把csv文本中的数据提取出来制作表格后生产图表。在获取csv文本内容的时候，基本上都是用withopen(filename,encoding='UTF-8')asf:来打开csv文本，但是实际使用过程中发现有些csv文本并不是utf-8格式，从而导致程序在run的过程中报错，每次都需要手动去把该文本文件的编码格式修改成utf-8，再次来run该程序，所以想说：直接在程序中判断并修改文本编码。基本思路：先查找该文本是否是utf-8的编
系统 2019-09-27 17:46:34 1989
简介Python的序列（sequence）通常指一个可迭代的容器，容器中可以存放任意类型的元素。列表和元组这两种数据类型是最常被用到的序列，python内建序列有六种，除了刚刚有说过的两种类型之外，还有字符串、Unicode字符串、buffer对像和最后一种xrange对像，这几种都是不常使用的。本文讲解了列表推导式、切片命名、列表元素排序、列表元素分组的使用方法。学习了Python基本的列表操作后，学习这些进阶的操作，让我们写出的代码更加优雅简洁和pyt
系统 2019-09-27 17:38:41 1989
本文以实例形式较为详细的讲解了Python的多线程，是Python程序设计中非常重要的知识点。分享给大家供大家参考之用。具体方法如下：用过Python的人都会觉得Python的多线程很类似于Java的多线程机制，但是比JAVA的多线程更灵活。在早期的Python多线程实现中，采用了thread模块。例如:fromtimeimportctime,sleepfromthreadimportstart_new_threaddefloop1():print"ent
系统 2019-09-27 17:38:23 1989
前言最近在维护项目的python项目代码，项目使用了python的日志模块logging，设定了保存的日志数目，不过没有生效，还要通过contab定时清理数据。分析项目使用了logging的TimedRotatingFileHandler：#!/user/bin/envpython#-*-coding:utf-8-*-importloggingfromlogging.handlersimportTimedRotatingFileHandlerlog=log
系统 2019-09-27 17:38:11 1989
Python生成指定数量的优惠码打开Python开发工具IDLE，新建‘codeGen.py'文件，并保存导入需要的包，这里需要random和string，代码如下：importstringimportrandom假设需要生成200个，长度为10的优惠码，实际应用这个可以作为参数进来CODE_COUNT=200CODE_LEN=10设计的优惠码由字母和数字组成，通过下面函数获取所有字母和数字，字母区分大小写defstrall():return(string
系统 2019-09-27 17:37:48 1989
在语句Book.objects.all()中，objects是一个特殊的属性，需要通过它查询数据库。在第5章，我们只是简要地说这是模块的manager。现在是时候深入了解managers是什么和如何使用了。总之，模块manager是一个对象，Django模块通过它进行数据库查询。每个Django模块至少有一个manager，你可以创建自定义manager以定制数据库访问。下面是你创建自定义manager的两个原因：增加额外的manager方法，和/或修ma
系统 2019-09-27 17:37:39 1989
操作系统：windows10安装模块：Pillowpytesseracttesseract-ocr1、首先安装Pillow，可以选择安装windows版的安装包下载地址：https://pypi.org/project/Pillow/#files此处我选择安装Pillow-6.1.0.win-amd64-py2.7.exe2、安装完成后再进行安装pytesseract下载地址：https://pypi.org/project/pytesseract/#fi
系统 2019-09-27 17:54:22 1988
开篇：测试过程中，对于多参数参数多值的情况进行测试用例组织，之前一直使用【正交分析法】进行用例组织，说白了就是把每个参数的所有值分别和其他参数的值做一个全量组合，用Python脚本实现，就是itertools模块中product方法（又称笛卡尔积法）。正交分析法的优点是测试用例覆盖率100%，缺点测试用例数量庞大，执行用例消耗的人工巨大。Pairwise（结对）算法源于对传统的正交分析方法优化后得到的产物，它的理论来自于数学统计。毫不避讳的说，本人看不懂数
系统 2019-09-27 17:54:21 1988
背景介绍从学sklearn时，除了算法的坎要过，还得学习matplotlib可视化，对我的实践应用而言，可视化更重要一些，然而matplotlib的易用性和美观性确实不敢恭维。陆续使用过plotly、seaborn，最终定格在了Bokeh，因为它可以与Flask完美的结合，数据看板的开发难度降低了很多。前阵子看到这个库可以较为便捷的实现数据探索，今天得空打算学习一下。原本访问的是英文文档，结果发现已经有人在做汉化，虽然看起来也像是谷歌翻译的，本着拿来主义，
系统 2019-09-27 17:52:35 1988
Python从文件中读取指定的行如果想根据给出的行号，从文本文件中读取一行数据，Python标准库linecache模块非常适合这个任务:测试文件内容：Thisisline1.Thisisline2.Thisisline3.Thisisline4.Thisisline5.Thisisline6.Thisisline7.Thisisline8.测试代码:>>>importlinecache>>>file_path=r'D:\work\python\test.
系统 2019-09-27 17:50:14 1988
1、python装饰器刚刚接触python的装饰器，简直懵逼了，直接不懂什么意思啊有木有，自己都忘了走了多少遍Debug，查了多少遍资料，猜有点点开始明白了。总结了一下解释得比较好的，通俗易懂的来说明一下：小P闲来无事，随便翻看自己以前写的一些函数，忽然对一个最最最基础的函数起了兴趣：defsum1():sum=1+2print(sum)sum1()此时小P想看看这个函数执行用了多长时间，所以写了几句代码插进去了：importtimedefsum1():s
系统 2019-09-27 17:38:08 1988
1.在Scrapy工程下新建“middlewares.py”#Importingbase64librarybecausewe'llneeditONLYincaseiftheproxywearegoingtouserequiresauthenticationimportbase64#StartyourmiddlewareclassclassProxyMiddleware(object):#overwriteprocessrequestdefprocess_r
系统 2019-09-27 17:38:07 1988
近期涉及到了关于doc文档读取的处理，也查了很久，为了便于大家使用，故集大成一下。Doc文档读取有如下几种：1、从doc读取文本目前没有找到直接的方式，一般是先转为docx文件在处理。所使用工具为doc2doc(批量时可用)，或人工另存处理。2、从docx读取文本一般使用python-docx库的方法，但只支持创建新文档和读取一些基本的文件数据，如文件大小和文件标题，不支持正文读取。或直接从docx中读取xml的方法。3、从pdf读取文本一般使用pdf
系统 2019-09-27 17:53:01 1987
今天模拟定义map函数.写着写着就发现Python可变长度参数的机制真是灵活而强大.假设有一个元组t,包含n个成员：t=(arg1,...,argn)而一个函数f恰好能接受n个参数：f(arg1,...,argn)f(t)这种做法显然是错的,那么如何把t的各成员作为独立的参数传给f,以便达到f(arg1,...,argn)的效果?我一开始想到的是很原始的解法,先把t的各个成员变为字符串的形式,再用英文逗号把它们串联起来,形成一个"标准参数字符串":str_
系统 2019-09-27 17:52:29 1987
