创建爬虫目录:scrapystartprojectspiderName调试命令scrapyshell网站名调试命令可直接进行css和xpath的调试;成功执行命令之后可使用:response.xpath(xpath表达式)获取所需的内容。xpath说明:XPath是一门在XML文档中查找信息的语言表达式描述实例nodename选取nodename节点的所有子节点//div/从根节点选取/div//不考虑位置选择节点//div.选取当前节点./div…选取当
系统 2019-09-27 17:56:45 2034
什么是闭包?简单说,闭包就是根据不同的配置信息得到不同的结果。再来看看专业的解释:闭包(Closure)是词法闭包(LexicalClosure)的简称,是引用了自由变量的函数。这个被引用的自由变量将和这个函数一同存在,即使已经离开了创造它的环境也不例外。所以,有另一种说法认为闭包是由函数和与其相关的引用环境组合而成的实体。延迟绑定Python闭包函数所引用的外部自由变量是延迟绑定的。PythonIn[2]:defmultipliers():...:ret
系统 2019-09-27 17:56:25 2034
我们经常需要在后台运行一些python脚本,来监控系统或者做一些其他事情;但是由于各种各样的原因,排除python脚本代码的问题,脚本运行过程中会挂掉。为了不天天耗在上面等重启,可以制作shell脚本对程序予以监控,对于意外中断的程序自动重启。以控制python自动重启的shell脚本为例:cdDesktopvimrun.sh#新建名为run的shell脚本写入(此处以名为run的Python脚本为例)#!/bin/bashwhile[1];dopytho
系统 2019-09-27 17:56:17 2034
1.最小界面组成#导入tkinter模块importtkinter#创建主窗口对象root=tkinter.Tk()#设置窗口大小(最小值:像素)root.minsize(300,300)#创建一个按钮组件btn=tkinter.Button(root,text='屠龙宝刀,点击送')btn.pack()#加入消息循环root.mainloop()设置初始化界面大小#设置初始化界面大小root.geometry('300x400')2.组件的摆放方式:1.
系统 2019-09-27 17:55:39 2034
Python面向对象编程——什么是面向对象的程序设计一、面向过程的程序设计1、概念核心是“过程”二字,“过程”指的是解决问题的步骤,即先干什么再干什么......基于面向过程设计程序就好比在设计一条流水线,是一种机械式的思维方式。若程序一开始是要着手解决一个大的问题,面向过程的基本设计思路就是把这个大的问题分解成很多个小问题或子过程,这些子过程在执行的过程中继续分解,直到小问题足够简单到可以在一小步骤范围内解决。2、优点复杂的问题流程化,进而简单化(一个复
系统 2019-09-27 17:53:59 2034
1、默认python3、ipython3、pip的路径name@host:~$whichpython/usr/bin/pythonname@host:~$whichpython3/usr/bin/python3name@host:~$whichpip/usr/local/bin/pipname@host:~$whichpip3/usr/local/bin/pip3name@host:~$whichipython3/usr/local/bin/ipython
系统 2019-09-27 17:53:11 2034
Python画图示例(1)一维数据集绘图Python画图示例(2)二维数据集绘图Python画图示例(3)其他绘图样式,散点图,直方图等Python画图示例(4)3D绘图importnumpyasnpimportmatplotlib.pyplotaspltstike=np.linspace(50,150,24)ttm=np.linspace(0.5,2.5,24)stike,ttm=np.meshgrid(stike,ttm)print(stike[:2]
系统 2019-09-27 17:50:08 2034
一个最最简单的例子:绘制一个从0到360度完整的SIN函数图形importnumpyasnpimportmatplotlib.pyplotasptx=np.arange(0,360)#如果打印x,NumPy会给你很好看的打印格式#print(x)y=np.sin(x*np.pi/180)pt.plot(x,y)pt.xlim(0,360)pt.ylim(-1.2,1.2)pt.title("SINfunction")pt.show()效果图如下:下面我们加
系统 2019-09-27 17:49:36 2034
如何把[1,5,6,[2,7,[3,[4,5,6]]]]变成[1,5,6,2,7,3,4,5,6]?思考:--for循环每次都遍历列表一层--把取出的单个值加入到新的列表中--把取出来的嵌套列表变成新的遍历列表,就需要在for循环外嵌套一个while循环--当取到最里面的列表嵌套时候,对最后一个值进行处理#!/usr/bin/python3__author__='beimenchuixue'__blog__='http://www.cnblogs.com/
系统 2019-09-27 17:48:10 2034
前言Python的字典有好多个名称("映射"、"哈希"、"散列"或者"关系数组"),那你知道为什么字典会被称为Hash(翻译为"哈希"或"散列")吗?你知道为什么字典对于键(Key)的存储数据要求比较严格,但对于对应的值(Value)的存储却要求很宽松吗?读完这篇文章,你将深刻理解这些问题背后的真相!hash首先我们来解释一下什么是Hash,来自维基百科:散列函数(或散列算法,又称哈希函数,英语:HashFunction)是一种从任何一种数据中创建小的数字
系统 2019-09-27 17:47:41 2034