采集内容常需要得到网页返回的验证码做进一步处理下面代码是用python写的用来获取网页http状态码的脚本#!/usr/bin/python#-*-coding:utf-8-*-#encoding=utf-8#Filename:states_code.pyimporturllib2url='//www.jb51.net/'response=Nonetry:response=urllib2.urlopen(url,timeout=5)excepturllib
系统 2019-09-27 17:47:48 1869
下面程序能够爬取百度图片一个网页里面的所以图片，值得关注的是匹配字段，正则表达式要写正确，虽然匹配成功的但是爬取的图片还是较少，下篇我会采取get方法来请求更多图片来爬取。importurllib.requestimportreimporttimedefopen_url(url):req=urllib.request.Request(url)req.add_header('User-Agent','Mozilla/5.0(WindowsNT6.1;WOW6
系统 2019-09-27 17:47:28 1869
我是闲的没事干，2014过的太浮夸了，博客也没写几篇，哎~~~用这篇来记录即将逝去的2014python对各种数据库的各种操作满大街都是，不过，我还是喜欢我这种风格的，涉及到其它操作，不过重点还是对数据库的操作。呵~~Python操作Mysql首先，我习惯将配置信息写到配置文件，这样修改时可以不用源代码，然后再写通用的函数供调用新建一个配置文件，就命名为conf.ini，可以写各种配置信息，不过都指明节点（文件格式要求还是较严格的）：复制代码代码如下:[a
系统 2019-09-27 17:47:24 1869
阅读目录tcp协议：流式协议（以数据流的形式通信传输）、安全协议（收发信息都需收到确认信息才能完成收发，是一种双向通道的通信）tcp协议在OSI七层协议中属于传输层，它上承用户层的数据收发，下启网络层、数据链路层、物理层。可以说很多安全数据的传输通信都是基于tcp协议进行的。为了让tcp通信更加方便需要引入一个socket模块（将网络层、数据链路层、物理层封装的模块），我们只要调用模块中的相关接口就能实现传输层下面的繁琐操作。简单的tcp协议通信模板：（需
系统 2019-09-27 17:47:19 1869
上面的博客把基本的HTML解析库已经说完了，这次我们来给予几个实战的项目。这次主要用Requests库+正则表达式来解析HTML。项目一：爬取猫眼电影TOP100信息代码地址：https://gitee.com/dwyui/maoyan-Requests.git项目二：美食爬取（包含多层爬取）代码地址：https://gitee.com/dwyui/meishi_Requests.git
系统 2019-09-27 17:47:06 1869
一、python判断文件和文件夹是否存在、创建文件夹复制代码代码如下:>>>importos>>>os.path.exists('d:/assist')True>>>os.path.exists('d:/assist/getTeacherList.py')True>>>os.path.isfile('d:/assist')False>>>os.path.isfile('d:/assist/getTeacherList.py')True>>>os.maked
系统 2019-09-27 17:47:00 1869
本章将覆盖所有在Python中使用的基本I/O功能。有关更多函数，请参考标准Python文档。打印到屏幕上：产生输出最简单的方法是使用print语句，可以通过用逗号分隔的零个或多个表达式。该函数将传递到一个字符串表达式，并将结果写到标准输出，如下所示：#!/usr/bin/pythonprint"Pythonisreallyagreatlanguage,","isn'tit?";这将产生结果输出在标准屏幕上，结果如下：Pythonisreallyagrea
系统 2019-09-27 17:46:33 1869
本文定位：已将CPU历史数据存盘，等待可视化进行分析，可暂时没有思路。前面一篇文章（//www.jb51.net/article/61956.htm）提到过在linux下如何用python将top命令的结果进行存盘，本文是它的后续。python中我们可以用matplotlib很方便的将数据可视化，比如下面的代码：复制代码代码如下:importmatplotlib.pyplotaspltlist1=[1,2,3]list2=[4,5,9]plt.plot(l
系统 2019-09-27 17:45:54 1869
C语言中三目运算符复制代码代码如下:expression?expr1:expr2;//expression为真则取表达式expr1的值，否则取expr2的值python三目实现方法：(1)expr=判断表达式andexpr1orexpr2判断表达式为真，此时如果expr1为真则expr=expr1,为假则变成Falseorexpr2,expr=expr2.判断表达式为假，则演变成Falseorexpr2,此时expr=expr2.只要表达式expr1,ex
系统 2019-09-27 17:45:34 1869
先来介绍一些pythonweb编程基础知识1.GET与POST区别1)POST是被设计用来向web服务器上放东西的，而GET是被设计用来从服务器取东西的，GET也能够向服务器传送较少的数据，而Get之所以也能传送数据,只是用来设计告诉服务器,你到底需要什么样的数据.POST的信息作为HTTP请求的内容，而GET是在HTTP头部传输的；2)POST与GET在HTTP中传送的方式不同，GET的参数是在HTTP的头部传送的，而Post的数据则是在HTTP请求的内
系统 2019-09-27 17:38:29 1869
