综述本系列文档用于对Python爬虫技术的学习进行记录总结。Python版本是3.7.4urllib库介绍它是Python内置的HTTP请求库，也就是说我们不需要额外安装即可使用，它包含四个模块(主要对前三个模块进行学习)：request:它是最基本的HTTP请求模块，我们可以用它来模拟发送一请求，就像在浏览器里输入网址然后敲击回车一样，只需要给库方法传入URL还有额外的参数，就可以模拟实现这个过程了。error:异常处理模块，如果出现请求错误，我们可以捕
系统 2019-09-27 17:54:27 1491
前言最近因为工作原因，发现一个Python的时间组件，很好用分享出来！（忘记作者名字了，在这里先感谢了），下面话不多说，来一起看看详细的介绍吧。示例代码：#-*-coding:utf-8-*-'''获取当前日期前后N天或N月的日期'''fromtimeimportstrftime,localtimefromdatetimeimporttimedelta,dateimportcalendaryear=strftime("%Y",localtime())mon
系统 2019-09-27 17:54:18 1491
迭代器迭代式访问元素的一种方式，迭代器是一个可以记住遍历的位置的对象。迭代器对象从集合的第一个元素开始访问，直到所有的元素被访问完结束。迭代器只能往前不会后退。迭代器有两个基本的方法：iter()和next()。常见的字符串，列表或元组对象都可用于创建迭代器：>>>list=[1,2,3,4,5]>>>it=iter(list)>>>print(next(it))1>>>print(next(it))2迭代器对象可以使用常规for语句进行遍历：list=[
系统 2019-09-27 17:54:17 1491
range([start],[end],[long])描述：根据range里的参数生成指定范围指定步长的一个序列参数：[start]——指定范围的左边界，可取到[end]——指定范围的右边界，不可取到[long]——步长，若无步长，默认为1返回值：列表实例：>>>range(0,6,2)[0,2,4]>>>range(5)[0,1,2,3,4]xrange()描述：用法与range完全相同，生成的不是数组，而是一个生成器实例：>>>xrange(0,6,2
系统 2019-09-27 17:54:01 1491
前言如果你曾经写过或者用过Python，你可能已经习惯了看到Python源代码文件；它们的名称以.Py结尾。你可能还见过另一种类型的文件是.pyc结尾的，它们就是Python“字节码”文件。(在Python3的时候这个.pyc后缀的文件不太好找了,它在一个名为__pycache__的子目录下面。).pyc文件可以防止Python每次运行时都重新解析源代码，该文件大大节省了时间。Python是如何工作的Python通常被描述为一种解释语言，在这种语言中，你的
系统 2019-09-27 17:53:52 1491
最近在学习Python，所谓好记性不如烂笔头故借这次学习机会做个笔记，方便今后快速再学习。以下是常见函数的使用说明：range函数该函数用于创建数列，根据参数个数不同对应不同的用法进行说明（1）range（a,b,c）三个参数时，表示创建一个从a~b-1的数组,每c个数取一个值。当c=1时，可省略c，即用法等同于(2)（2）range（x,y）两个参数时，表示创建一个从a~b-1的数组，一共b-a个元素。当x=0时，可省略y,用法等同于（1）（3）rang
系统 2019-09-27 17:53:51 1491
Python是一种面向对象的解释型计算机程序设计语言。Python是纯粹的自由软件，源代码和解释器CPython遵循GPL（GNUGeneralPublicLicense）协议。Python语法简洁清晰，特色之一是强制用空白符（whitespace）作为语句缩进。Python的优势：Python相对于Matlab最大的优势：免费。但既然你已经能用上Matlab，想必不在乎这个了。Python次大的优势：开源。你可以大量更改科学计算的算法细节。可移植性，Ma
系统 2019-09-27 17:53:35 1491
一般用xlml但遇到过解析出来的内容不一样。有误用另一种方法得到正确的，有误应该只是极少问题。这种方案备用html=browser.page_sourcehtm=bs(html,'html.parser')
系统 2019-09-27 17:53:29 1491
7月有好书，给你解酷暑。本月将有几本书好书推荐给大家，希望你喜欢。１、Python快速入门（第3版）作者[美]娜奥米·塞德（NaomiCeder）译者戴旭Python软件基金会主席作品！经典Python入门书本书是Python专业人士NaomiCeder编写的Python语言的综合指南。她是一位经验丰富的教学者，她既能让读者关注语言的细节，又能使其具备解决实际问题的能力。本书中配有大量贴切的示例和边做边学的习题，有助于读者第一时间掌握每一个重要概念。无论读
系统 2019-09-27 17:53:17 1491
三大相关系数:pearson,spearman,kendall统计学中的三大相关性系数：pearson,spearman,kendall，他们反应的都是两个变量之间变化趋势的方向以及程度，其值范围为-1到+1。0表示两个变量不相关，正值表示正相关，负值表示负相关，值越大表示相关性越强。1.personcorrelationcoefficient（皮尔森相关性系数）皮尔逊相关系数通常用r或ρ表示，度量两变量X和Y之间相互关系（线性相关）(1)公式皮尔森相关性
系统 2019-09-27 17:53:11 1491
