上次完成的url爬取项目并不能满足需求，在此完成了一个更为强大的爬取代码，有需要的可以直接运行，根据自己爬取的网站更改部分正则和形参即可。前排提示：运行需要耐心，因为几千个url爬完的话，还是建议花生瓜子可乐电影准备好。下面是代码，代码有注释，很容易理解。注意：爬虫代码每过一段时间就需要更新，因为爬的东西在变，所以可能过一段时间就要更新爬虫。#-*-coding:utf-8-*-"""CreatedonWedSep2914:01:282018@author
系统 2019-09-27 17:52:48 2340
Python三大流程（程序控制流程）一、顺序从左而右，从上到下二、分支（选择）结构1、单分支2、双分支3、多分支（三分支）
系统 2019-09-27 17:49:37 2340
更多的信息，可以参考python内部的json文档：python>>>help(json)或者官方文档：http://docs.python.org/library/json.html#module-json.下面给出一个使用python解析json的简单例子：复制代码代码如下:#!/usr/bin/pythonimportjson#Function:Analyzejsonscript#Jsonisascriptcandescriptdatastructu
系统 2019-09-27 17:48:31 2340
matplotlib是功能十分强大的绘制二维图形的Python模块，它用Python语言实现了MATLAB画图函数的易用性，同时又有非常强大的可定制性。它提供了一整套和matlab相似的命令API，十分适合交互式地进行制图。而且也可以方便地将它作为绘图控件，嵌入GUI应用程序中。它的文档相当完备，并且Gallery页面中有上百幅缩略图，打开之后都有源程序。因此如果你需要绘制某种类型的图，只需要在这个页面中浏览、复制、粘贴一下，基本上都能搞定！实例代码如下：
系统 2019-09-27 17:47:56 2340
安装pipinstallpyinstaller安装打包进入你的编程目录。打开cmd。键入“pyinstaller-w-ic://logo.icoyourfilename.py”目录下出现3个新的目录：dist、build、—pycache—进入dist，找到exe文件，点击打开。注意：文件名一定要加后缀名如fiilename.ico报错半天，发现自己没加图标后缀！！！！说明-F表示生成单个可执行文件-w表示去掉控制台窗口，这在GUI界面时非常有用。不过如果
系统 2019-09-27 17:46:19 2340
所谓类属性的延迟计算就是将类的属性定义成一个property，只在访问的时候才会计算，而且一旦被访问后，结果将会被缓存起来，不用每次都计算。构造一个延迟计算属性的主要目的是为了提升性能property在切入正题之前，我们了解下property的用法，property可以将属性的访问转变成方法的调用。classCircle(object):def__init__(self,radius):self.radius=radius@propertydefarea(
系统 2019-09-27 17:38:44 2340
urllib的基本用法urllib库的基本组成利用最简单的urlopen方法爬取网页html利用Request方法构建headers模拟浏览器操作error的异常操作urllib库除了以上基础的用法外，还有很多高级的功能，可以更加灵活的适用在爬虫应用中，比如：使用HTTP的POST请求方法向服务器提交数据实现用户登录使用代理IP解决防止反爬设置超时提高爬虫效率解析URL的方法本次将会对这些内容进行详细的分析和讲解。POST请求POST是HTTP协议的请求方
系统 2019-09-27 17:38:44 2340
最近，做个小项目经常会遇到Python的异常，让人非常头疼，故对异常进行整理，避免下次遇到异常不知所措，以下就是对Python异常进行的整理。1.Python异常类异常描述NameError尝试访问一个没有申明的变量ZeroDivisionError除数为0SyntaxError语法错误IndexError索引超出序列范围KeyError请求一个不存在的字典关键字IOError输入输出错误（比如你要读的文件不存在）AttributeError尝试访问未知的
系统 2019-09-27 17:37:56 2340
字节数组输入流ByteArrayInputStream博客分类：javaIO设计模式ByteArrayInputSteam类从内存中的字节数组中读取数据，因此它的数据源是一个字节数组。这个类的构造方法包括：ByteArrayInputStream(byte[]buf)--------参数buf指定字节数组类型的数据源。ByteArrayInputStream(byte[]buf,intoffset,intlenght)-----参数buf指定字节数组类型数
系统 2019-08-29 23:49:24 2340
我使用的CruiseControl版本为2.8.2，这个版本是最新的版本，可能较以前的版本略有不同，但也是大同小异。1.安装CruiseControl先双击安装文件，双击后，按提示，选择你要安装的路径。安装后，你所选择的路径下会出现一个CruiseControl的文件夹。比如我选择的路径是D:\CruiseControl。目录下面有一个apache-ant-1.7.0的目录，是CruiseControl所集成Ant程序。artifacts里面放了项目生成J
系统 2019-08-29 23:10:57 2340
