创建爬虫目录：scrapystartprojectspiderName调试命令scrapyshell网站名调试命令可直接进行css和xpath的调试；成功执行命令之后可使用：response.xpath(xpath表达式)获取所需的内容。xpath说明：XPath是一门在XML文档中查找信息的语言表达式描述实例nodename选取nodename节点的所有子节点//div/从根节点选取/div//不考虑位置选择节点//div.选取当前节点./div…选取当
系统 2019-09-27 17:56:45 1810
引言对于做web开发的人来说，json文本必须要熟知与熟练使用的。大部分网站的API接口调用返回的数据，就是json格式的。如果看json对象所包含的内容，相信对熟悉Python的人开说，很快就能把json的数据类型跟Python的数据类型对应上。那么，Python的标准模块包json，又有什么用呢？为什么要用去转json的格式为Python对应的格式呢？为什么就不能拿json格式的数据直接用呢？不是其类型几乎一样且对应的么？其实，只是看仔细其中的数据结构
系统 2019-09-27 17:56:31 1810
Python的富比较方法包括__le__、__ge__分别表示：小于等于、大于等于，对应的操作运算符为:“<=”、“>=”。那么是否象普通数字运算一样，这两个方法之间存在互反的关系呢？Python没有对__le__、__ge__这两个方法之间有什么强制关系，但建议__le__和__ge__为互反，开发者完全可以根据业务逻辑的需要自己定义。我们来进行分析验证：当自定义类中两个方法都定义了时，“<=”、“>=”分别调用__le__和__ge__方法；当自定义类
系统 2019-09-27 17:56:26 1810
Python文件处理注意事项总结文件处理在编程中是常见的操作，文件的打开，关闭，重命名，删除，追加，复制，随机读写非常容易理解和使用。需要注意的是文件的安全关闭，采用with语句轻松便捷：withopen(pathname,”r”)asmyfile:do_some_with(myfile)1.CSV的文件处理csv模块可以很好地处理csv文件，而Pandas模块则可以较好的处理大型的csv文件，还可以处理HTML等，并提供分块处理。2.XML的文件处理对于
系统 2019-09-27 17:56:11 1810
Python2默认是不支持中文的，一般我们在程序的开头加上#-*-coding:utf-8-*-来解决这个问题，但是在我用open()方法打开文件时，中文名字却显示成了乱码。我先给大家说说Python中的编码问题，Python中的字符串的大概分为为str和Unicode两种形式，其中str常用的编码类型为utf-8,gb2312,gbk等等，Python使用Unicode作为编码的基础类型。str记录的是字节数组，只是某种编码的存储格式，终于输出到文件或是
系统 2019-09-27 17:56:07 1810
本文实例讲述了python3property装饰器实现原理与用法。分享给大家供大家参考，具体如下：学习python的同学，慢慢的都会接触到装饰器，装饰器在python里是功能强大的语法。装饰器配合python的魔法方法，能实现很多意想不到的功能。废话不多说，如果你已经掌握了闭包的原理，代码的逻辑还是可以看明白的，咱们直接进入正题。property的意义@property把一个类的getter方法变成属性，如果还有setter方法,就在setter方法前面加
系统 2019-09-27 17:55:44 1810
Python笔记004-元组的拆包和命名元组以下是我学习《流畅的Python》后的个人笔记，现在拿出来和大家共享，希望能帮到各位Python学习者。首次发表于:微信公众号：科技老丁哥，ID:TechDing，敬请关注。本篇主要知识点：元组的拆包就是将元组内部的每个元素按照位置一一对应的赋值给不同变量，可以应用到变量赋值，函数参数赋值，获取元组中特定位置的元素值等场合。namedtuple:用于存储对象序列，不能改变元素值，可以像dict一样通过名字进行访问
系统 2019-09-27 17:55:37 1810
课程导学001课程定位和目标002课程导学第一部分Python快速入门第1天Python基本语法元素003Python基本语法元素004程序设计基本方法005Python开发环境配置006实例1-温度转换007Python程序语法元素分析008Python基本语法元素小结第2天Python基本图形绘制009Python基本图形绘制010深入理解Python语言011实例2-Python蟒蛇绘制012模块1-turtle库的使用013turtle程序语法元素
系统 2019-09-27 17:55:32 1810
认识模块对于模块，在前面的一些举例中，已经涉及到了，比如曾经有过：importrandom(获取随机数模块)。为了能够对模块有一个清晰的了解，首先要看看什么模块，这里选取官方文档中对它的定义：复制代码代码如下:AmoduleisafilecontainingPythondefinitionsandstatements.Thefilenameisthemodulenamewiththesuffix.pyappended.Withinamodule,themo
系统 2019-09-27 17:55:19 1810
本文实例讲述了PythonWeb框架之Django框架Form组件用法。分享给大家供大家参考，具体如下：Form简介在HTTP中，表单（form标签），是用来提交数据的，其action属性说明了其传输数据的方法：如何传、如何接收。访问网站时，表单可以实现客户端与服务器之间的通信。例如查询，就用到了表单（其属性中，action=get）。再比如说注册与登陆，也是要用到表单的。但这里由于涉及到隐私问题，需要保证数据传输的安全性，因此其传输方法就应当使用post
系统 2019-09-27 17:55:05 1810
