全站爬虫有时候做起来其实比较容易，因为规则相对容易建立起来，只需要做好反爬就可以了，今天咱们爬取知乎。继续使用scrapy当然对于这个小需求来说，使用scrapy确实用了牛刀，不过毕竟这个系列到这个阶段需要不断使用scrapy进行过度，so，我写了一会就写完了。你第一步找一个爬取种子，算作爬虫入口https://www.zhihu.com/people/zhang-jia-wei/following我们需要的信息如下，所有的框图都是我们需要的信息。获取用户
系统 2019-09-27 17:55:40 2459
#1.创建一个边界值为1而内部都是0的数组，图例如下：#[提示：]解此题可以先把所有值都设置为1，这是大正方形；其次，把边界除外小正方形全部设置为0。#本题用到numpy的切片原理。多维数组同样遵循x[start:stop:step]的原理。importnumpyasnparr=np.ones((10,10))arr[1:9,1:9]=0#对不同维度的操作用,号分开即可print(arr)#2.在数组主对角线上创建一个值为1,2,3,4的5x5矩阵arr2
系统 2019-09-27 17:49:14 2459
概念变量即为高级语言中可以变化的量，相对于常量。数据也就是值，如int型的2019，字符串型的"hellopython"。1.变量名和数据内容是分开存储的。2.数据保存在内存中的一个位置（地址）。3.变量中保存着数据在内存中的地址。引用就是变量中记录数据的地址。理解举例理解：定义num(变量)=1(数据)id(num)和id(1)返回结果都一样，都是数据1的地址。num就是数据1的引用。当重新定义一个变量num2=num时，num2的地址也变为了数据1的地
系统 2019-09-27 17:57:32 2458
importrequestsimportjsonfromtkinterimportTk,Button,Entry,Label,Text,ENDclassYouDaoFanyi(object):def__init__(self):passdefcrawl(self,word):url='http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule'#使用post需要一个链接data={
系统 2019-09-27 17:54:05 2458
kruskal(克鲁斯卡尔)的思路很直观，边按权值从小到大排序，然后从小到大选不会构成回路的边，构成生成树。（选两点不在同一个连通分量里面的边）构建并查集，用并查集判断是否构成回路（是否在同一个分量里面）（两个连通分量如果根结点相同，两点连接就会构成回路）python代码：deffind(x,pres):"""查找x的最上级（首级）:paramx:要查找的数:parampres:每个元素的首级:return:根结点（元素的首领结点）"""root,p=x,
系统 2019-09-27 17:56:12 2457
logging-LoggingfacilityforPython-Python的日志记录工具Thismoduledefinesfunctionsandclasseswhichimplementaflexibleeventloggingsystemforapplicationsandlibraries.这个模块为应用与库定义了实现灵活的事件日志系统的函数与类。ThekeybenefitofhavingtheloggingAPIprovidedbyastand
系统 2019-09-27 17:57:39 2456
importnumpyasnpfromsklearn.datasetsimportload_irisiris=load_iris()#data=iris.data#print(data[0])#print(data[2])#print(type(iris.data))#print(iris.data.shape)#LenRow,LenColumn=iris.data.shape#print("LenRow={}".format(LenRow))#print
系统 2019-09-27 17:54:16 2456
本文实例讲述了Pythonmatplotlib绘制饼状图功能。分享给大家供大家参考，具体如下：一代码importnumpyasnpimportmatplotlib.pyplotasplt#Thesliceswillbeorderedandplottedcounter-clockwise.labels='Frogs','Hogs','Dogs','Logs'sizes=[15,30,45,10]colors=['yellowgreen','gold','#F
系统 2019-09-27 17:47:44 2456
天下难事，必作于易；天下大事，必作于细——老子Numpy是高性能科学计算和数据分析的基础包，里面包含了许多对数组进行快速运算的标准数学函数，掌握这些方法，能摆脱数据处理时的循环。码字不易，喜欢请点赞！！！1.首先数组转置（T）创建二维数组data如下：进行矩阵运算时，经常要用数组转置，比如计算矩阵内积X^TX.这时就需要利用数组转置，如下：2.轴对换之transpose对于高维数组，可以使用轴对换来对多个维度进行变换。这里创建了一个三维数组，各维度大小分别
系统 2019-09-27 17:56:31 2455
#-*-coding:utf-8-*-importrequestsimportosfrombiplistimport*frommod_pbxprojimportXcodeProjectdefCleanDirectory(dirPath):isexits=os.path.exists(dirPath)ifisexits:forroot,dirs,filesinos.walk(dirPath):forfileNameinfiles:del_file=os.pa
系统 2019-09-27 17:54:18 2455
1调试过程用Python3.6+Sciter+PyCharm写了一个py测试脚本helloworld.py，该脚本中只含有一条语句“importsciter”。在PyCharm中运行之，未报错。#helloworld.pyimportsciter然后将该脚本用PyInstaller打包成exe文件，打包程序pack.py如下：#pack.pyfromPyInstaller.__main__importrunif__name__=='__main__':op
系统 2019-09-27 17:52:27 2455
1.Turtle库完成爱心情书传递__author__='Pythonstriker'fromturtleimport*fromtkinterimport*importsubprocessimportosimportrandomasrandefCirclemove(size):foriinrange(200):right(1)forward(1*size)defHeart(x,y,size):setturtle(x,y)speed(0.6)color('r
系统 2019-09-27 17:50:43 2455
阅读更多pipinstallpyecharts;会安装pyecharts-1.1.0画K线图kline1.py#coding:utf-8importos,sysfrompyechartsimportoptionsasoptsfrompyecharts.chartsimportKlineiflen(sys.argv)==2:code=sys.argv[1]else:print('usage:kline1.pycode')sys.exit(1)iflen(co
系统 2019-09-27 17:50:05 2455
#-*-coding:UTF-8-*-importredisr=redis.Redis(host='xxx',port=xx,decode_responses=True,password='xxx')withopen('message_data.txt',encoding='UTF-8')asf:forlineinf:r.lpush('yourrediskeyname',line)print(line)
系统 2019-09-27 17:49:32 2455
说明：本文简单的介绍了Python3.7.4的安装方法，之所以安装Python3.7是为安装Airflow做铺垫，但不要删除Python2.7等版本，应为系统及其他组件有所依赖。步骤：下载安装包：wgethttps://www.python.org/ftp/python/3.7.4/Python-3.7.4.tgz解压：tar-zxvfPython-3.7.4.tgz安装所需依赖：yum-yinstallzlib-develbzip2-developens
系统 2019-09-27 17:45:31 2455
