前面十章爬虫笔记陆陆续续记录了一些简单的Python爬虫知识，用来解决简单的贴吧下载，绩点运算自然不在话下。不过要想批量下载大量的内容，比如知乎的所有的问答，那便显得游刃不有余了点。于是乎，爬虫框架Scrapy就这样出场了！Scrapy=Scrach+Python，Scrach这个单词是抓取的意思，Scrapy的官网地址：点我点我。那么下面来简单的演示一下Scrapy的安装流程。具体流程参照：//www.jb51.net/article/48607.htm
系统 2019-09-27 17:54:46 2091
常见算法：一、排序引入1.排序与搜索排序算法（英语：Sortingalgorithm）是一种能将一串数据依照特定顺序进行排列的一种算法。2.排序算法的稳定性稳定性：稳定排序算法会让原本有相等键值的纪录维持相对次序。18385672(4,1)(3,1)(3,7)(5,6)(3,7)(3,1)如果一个排序算法是稳定的，当有两个相等键值的纪录R和S，且在原本的列表中R出现在S之前，在排序过的列表中R也将会是在S之前。不稳定排序算法可能会在相等的键值中改变纪录的相
系统 2019-09-27 17:54:46 2091
一、简介py2exe是一个将python脚本转换成windows上的可独立执行的可执行程序(*.exe)的工具，这样，你就可以不用装python而在windows系统上运行这个可执行程序。py2exe已经被用于创建wxPython,Tkinter,Pmw,PyGTK,pygame,win32comclient和server,和其它的独立程序。py2exe是发布在开源许可证下的。二、安装py2exe从http://prdownloads.sourceforg
系统 2019-09-27 17:54:15 2091
环境：编辑工具：浏览器：有问题可以联系qq：1776376537安装xlrd安装DDT一分析1目录结构2导入包二代码importxlrdclassExcelUtil():def__init__(self,excelPath,sheetName="Sheet1"):self.data=xlrd.open_workbook(excelPath)self.table=self.data.sheet_by_name(sheetName)#获取第一行作为key值se
系统 2019-09-27 17:54:09 2091
python默认环境一般是ascii编码方式，因此Python自然调用ascii编码解码程序去处理字符流，当字符流不属于ascii范围内，就会抛出异常（ordinalnotinrange(128)）。参考可通过如下方式查看默认环境编码方式：importsysprintsys.getdefaultencoding()问题解决有两种方式：1、修改默认环境编码方式为utf-8importsysreload(sys)#不加这个会报”找不到setdefaultenc
系统 2019-09-27 17:52:42 2091
Git是编程中的基本技能之一，互联网公司几乎都在使用Git进行协作编程，昨天还有位禅友在微信上专门告诉我说星期五面试的时候刚好被问到Git，幸好在这几天学了一下。Git并不难，但会Git至少可以说明一个人的学习能力或者说对技术的嗅觉能跟上主流，如果面试问你GitHub是什么都不知道，面试官就会对你打一个大的问号。简单点评这一道题。在使用for循环迭代一个列表时，有时我们需要获取列表中每个元素所在的下标位置是多少，例如numbers=[10,29,30,41
系统 2019-09-27 17:52:23 2091
1#!/usr/bin/envpython3.72#-*-coding:utf-8-*-3#Author:Lancer2019-09-0210:07:2145importsys,getopt67defusage():8print("usagecall")910defmain():11try:12opts,args=getopt.getopt(sys.argv[1:],"ho:v",["help","output="])13print(sys.argv[1:
系统 2019-09-27 17:52:18 2091
yield的功能类似于return，但是不同之处在于它返回的是生成器。生成器生成器是通过一个或多个yield表达式构成的函数，每一个生成器都是一个迭代器（但是迭代器不一定是生成器）。如果一个函数包含yield关键字，这个函数就会变为一个生成器。生成器并不会一次返回所有结果，而是每次遇到yield关键字后返回相应结果，并保留函数当前的运行状态，等待下一次的调用。由于生成器也是一个迭代器，那么它就应该支持next方法来获取下一个值。基本操作#通过`yield`
系统 2019-09-27 17:52:18 2091
可以执行shell命令的相关模块和函数有：os.systemos.spawnos.popen--废弃popen--废弃commands--废弃，3.x中被移除以上执行shell命令的相关的模块和函数的功能均在subprocess模块中实现，并提供了更丰富的功能。subprocesscall执行命令，返回状态码>>>importsubprocess>>>ret=subprocess.call(["ls","-l"],shell=False)total4684
系统 2019-09-27 17:51:25 2091
随机整数：复制代码代码如下:>>>importrandom>>>random.randint(0,99)21随机选取0到100间的偶数：复制代码代码如下:>>>importrandom>>>random.randrange(0,101,2)42随机浮点数：复制代码代码如下:>>>importrandom>>>random.random()0.85415370477785668>>>random.uniform(1,10)5.4221167969800881
系统 2019-09-27 17:50:23 2091
