创建爬虫目录:scrapystartprojectspiderName调试命令scrapyshell网站名调试命令可直接进行css和xpath的调试;成功执行命令之后可使用:response.xpath(xpath表达式)获取所需的内容。xpath说明:XPath是一门在XML文档中查找信息的语言表达式描述实例nodename选取nodename节点的所有子节点//div/从根节点选取/div//不考虑位置选择节点//div.选取当前节点./div…选取当
系统 2019-09-27 17:56:45 2034
目录一、概述二、计算机技术的演进2.1计算机技术的演进过程三、编程语言的多样初心3.1编程语言有哪些?3.2不同编程语言的初心和适用对象3.32018年以后的计算环境…四、Python语言的特点五、Python特点与优势六、如何看待Python语言?七、"超级语言"的诞生7.1机器语言7.2汇编语言7.3高级语言7.4编程语言种类的发展7.5超级语言八、小结一、概述计算机技术的演进编程语言的多样初心Python语言的特点"超级语言"的诞生二、计算机技术的演
系统 2019-09-27 17:55:11 2034
python自带了四种数据结构:列表、字典、元组、集合,本章主要介绍第一种:列表。列表:有序的、可变的对象集合动态的:长度可以随时变化异构的:数字与字符串等不同类型的变量可以存在一个列表里元组:有序的、不可变的对象集合简单来说就是一个常量列表。字典:无序的键值对集合就类似C++里面的map。注意字典增加元素的插入顺序没有任何意义。在一个字典中,键的值是唯一的。集合:无序的、唯一对象的集合类似C++中的set。但是是没有顺序的。1、in操作符使用in操作符来
系统 2019-09-27 17:55:09 2034
概述从前面的对Python基础知识方法介绍中,我们几乎是围绕Python内置方法进行探索实践,比如字符串、列表、字典等数据结构的内置方法,和大量内置的标准库,诸如functools、time、threading等等,而我们怎么快速学习掌握并学会使用这个Python的工具集呢?我们可以利用Python的内置文档大量资源既可以掌握许多关于Python工具集的基本使用。dir函数Python中内置的dir函数用于提取某对象内所有属性的方法,,诸如对象的方法及属性
系统 2019-09-27 17:53:49 2034
师父布置的任务,让我写一个服务练练手,搞清楚socket的原理和过程后跑了一个小demo,很有成就感,代码内容也比较清晰易懂,很有教育启发意义。代码#coding:utf-8importsocketfrommultiprocessingimportProcessHTML_ROOT_DIR=""defhandle_client(client_socket):"""处理客户端请求"""#获取客户端请求数据request_data=client_socket.r
系统 2019-09-27 17:53:32 2034
CentOS7安装Python3.6.81.安装依赖环境yum-ygroupinstall"Developmenttools"yum-yinstallzlib-develbzip2-developenssl-develncurses-develsqlite-develreadline-develtk-develgdbm-develdb4-devellibpcap-develxz-devel2、下载Python3.6.8新建个/usr/local/pytho
系统 2019-09-27 17:53:04 2034
需要用到的包:importxlrdimportxlwtimportxlutils修改已经存在的excel文件的思路:首先,将需要更改的excel文件打开,用xlutils包的copy将excel文件对象拷贝一份,然后进行修改操作具体代码实现:importxlrdimportxlwtfromxlutils.copyimportcopy#打开想要更改的excel文件old_excel=xlrd.open_workbook('fileName.xls',form
系统 2019-09-27 17:51:18 2034
Python及Pycharm安装方法,供大家参考,具体内容如下1、任务简介为了学习Python我今天对它进行了安装,整个安装过程忘了截图,故我在虚拟机中重新安装了一遍,并将Python及Pycharm安装方法进行了分享,希望可以给大家一些帮助。注:虚拟机系统我未分盘,故均安装于虚拟机的系统盘C盘中,建议大家在实际安装过程中不要将软件安装到系统盘中。2、Python安装1)首先需要进入Python官网下载安装包,进入后点击Downloads然后选择Pytho
系统 2019-09-27 17:50:54 2034
原文链接:https://blog.csdn.net/m0_37586991/article/details/81629421近期在写dataloader函数时,由于错用了extend和append,导致后面出现了bug。后面发现问题后,便将该问题记录下来防止重复出错。两个函数从功能上来看非常类似,但处理后的结果却完全不同,使用时需要特别注意。尤其是对多个的list进行合并时,append可以保持list的原始形式,extend则进行了拆分重组,将待添加的
系统 2019-09-27 17:50:26 2034
python实现文本进度条程序进度条加载进度条单行刷新功能,具体内容如下所示:利用time库来替代某个程序的进行过程,做实例,思路是,简单打印出来程序进度单行刷新关键是\r,python默认是print后换行,所以加一个\r是光标回退到之前位置importtimetm=10print('{:-^18}'.format('开始'))foriinrange(tm+1):a='#'*ib='.'*(tm-i)c=(i/tm)*100print('\r{:^3.0
系统 2019-09-27 17:50:08 2034