前面十章爬虫笔记陆陆续续记录了一些简单的Python爬虫知识，用来解决简单的贴吧下载，绩点运算自然不在话下。不过要想批量下载大量的内容，比如知乎的所有的问答，那便显得游刃不有余了点。于是乎，爬虫框架Scrapy就这样出场了！Scrapy=Scrach+Python，Scrach这个单词是抓取的意思，Scrapy的官网地址：点我点我。那么下面来简单的演示一下Scrapy的安装流程。具体流程参照：//www.jb51.net/article/48607.htm
系统 2019-09-27 17:54:46 1777
主要逻辑是判断文件的最后修改时间与创建时间是否在秒级别上一致，此代码适用于Python2.importtimeimportos#ReadfimenameFileName='D:/scapegoat/xx.csv'#printfilecreationtimeprinttime.strftime('%Y-%m-%d%H:%M:%S',time.localtime(os.stat(FileName).st_ctime))#printfilemodifiedtim
系统 2019-09-27 17:54:41 1777
《Python3爬虫、数据清洗和可视化实战》零一韩要宾黄园园著第九章：pandas数据清理9.1数据读写、选择、整理和描述Pandas是用来数据清洗的Python库，由于它的依赖库很多，所以建议还是下载anaconda，里面内置了相关库。9.1.1读取CSV数据df=pd.read_csv(“csv_path”,delimiter=”,”,encoding=””)参数说明：“csv_path”,CSV文件路径；delimiter=”,”：分隔方式；enco
系统 2019-09-27 17:54:37 1777
一、语法while条件:执行代码while就是当的意思，它指当其后面的条件成立，就执行while下面的代码。例：写一个从0打印到10的程序count=0whilecount<=10:print('第%s次'%count)count+=1如果要打印1~10之间的偶数怎么办呢？那就得先搞清楚，怎么判断一个数字是偶数？能被2整除的就是偶数，但如何判断这个数是否能被2整除呢？简单，直接判断这个数除以2之后的余数是否为0就行了，这就用到了前面“Python之运算符”
系统 2019-09-27 17:54:23 1777
本文实例讲述了python实现对象列表根据某个属性排序的方法。分享给大家供大家参考，具体如下：对于一个已有的pythonlist，里面的内容是一些对象，这些对象有一些相同的属性值，在一些特定的情况下，需要自己选择特定的排序，也就是根据某一个具体的属性来排序，在网上找了下资料，一般来说有两种方法，但从根本上来说，还是调用了list.sort方法来实现。下面是简单的测试代码片段:#coding:utf-8classPerson:def__init__(self
系统 2019-09-27 17:53:53 1777
实测系统：ubuntu16.4debain9.01.Ubuntu16.04系统自带Python2.7和Python3.5，而默认采用的是2.7版本，可采用如下命令查看单当前版本号:python-V2.Python2.7和3.5都是默认安装在/usr/local/lib/python2.7(3.5)目录下，link文件在/usr/bin文件夹下，需要删除默认pythonlink文件pythonsudorm/usr/bin/python重新建立链接，并指向Py
系统 2019-09-27 17:53:40 1777
BacktoPythonIndex很好玩儿的数据结构，多用于无序数据去重多组数据逻辑运算，寻找交集，并集，非集等操作见https://blog.csdn.net/business122/article/details/7541486
系统 2019-09-27 17:53:35 1777
python一直对中文支持的不好，最近老遇到编码问题，而且几乎没有通用的方案来解决这个问题，但是对常见的方法都试过之后，发现还是可以解决的，下面总结了常用的支持中文的编码问题（这些方法中可能其中一个就能解决问题，也可能是多个组合）。（1）、首先，要保证文件的开头要加上编码设置来说明文件的编码复制代码代码如下:#encoding=utf-8（2）、然后，在连接数据的连接参数里加上字符集说明查询出的结果的编码，这个不加的后果可能是查询出的汉字字符都是问号复制代
系统 2019-09-27 17:53:20 1777
1.背景看到这里提到了pprint。打算去试试.2.pprint简介找到在线官网解释：pprint―Dataprettyprinter就是一个，方便大家打印一些，相对复杂的变量的好东西。3.使用pprint去写点代码试试。代码：复制代码代码如下:#-------------------------------------------------------------------------------#Name:【记录】折腾Python中的pprint#
系统 2019-09-27 17:52:55 1777
在学习过程中，把开发过程中重要的一些内容备份一下，下面内容是关于python实现中文繁体和中文简体之间的相互转换的内容，应该是对码农们有所好处。#转换繁体到简体line=Converter('zh-hans').convert(line.decode('utf-8'))line=line.encode('utf-8')#转换简体到繁体line=Converter('zh-hant').convert(line.decode('utf-8'))line=li
系统 2019-09-27 17:52:50 1777
