今天主要是来说一下怎么可视化来监控你的爬虫的状态。相信大家在跑爬虫的过程中，也会好奇自己养的爬虫一分钟可以爬多少页面，多大的数据量，当然查询的方式多种多样。今天我来讲一种可视化的方法。关于爬虫数据在mongodb里的版本我写了一个可以热更新配置的版本，即添加了新的爬虫配置以后，不用重启程序，即可获取刚刚添加的爬虫的状态数据。1.成品图这个是监控服务器网速的最后成果，显示的是下载与上传的网速，单位为M。爬虫的原理都是一样的，只不过将数据存到InfluxDB的
系统 2019-09-27 17:50:52 1986
使用paramiko库：https://github.com/paramiko/paramiko简单封装SSH类importparamikoclassSSH:def__init__(self,host,port,user,ssh_key_path,timeout=1800):self.host=hostself.port=portself.user=userself.ssh_key_path=ssh_key_pathself.timeout=timeout
系统 2019-09-27 17:50:38 1986
是不是已经很有感觉，Python你觉得自己可以做点简单的事情了？恭喜了。（还不行？重新看看1-6课时，另外请我吃饭，慢慢教你也可以）本课，我们说bool-布尔；只有2种情况真/假；或者叫0/1；或者True/Flase在python中True/Flase第1个字母都是大写，为什么？规定。。。。。。你写了true报错，别要说我无跟你说；其次bool用在什么场景？条件判断的时候，好像if或while的情况，都需要如果为真，就如何的场景：name="samly7
系统 2019-09-27 17:50:37 1986
一、学好Python好就业：1、Linux运维。Linux运维是必须而且一定要掌握Python语言，Python可以满足Linux运维工程师的工作需求提升效率，总而提升自己的能力。用Python实现的测试工具及过程，包含服务器端、客户端、Web、Android、client端的自动化测试，自动化性能测试的执行、监控和分析，常用seleniumappium等框架。2、Python自动化测试。大家都知道，Python语言对测试的帮助是非常大的，掌握Python
系统 2019-09-27 17:49:55 1986
异常:当Python检测到⼀个错误时，解释器就⽆法继续执⾏了，会出现⼀些错误的提示，这就是所谓的"异常"。看如下示例:print('-----test--1---')open('123.txt','r')print('-----test--2---')打开⼀个不存在的⽂件123.txt，当找不到123.txt⽂件时，就会抛出给我们⼀个IOError类型的错误，Nosuchfileordirectory：123.txt（没有123.txt这样的⽂件或⽬录）异
系统 2019-09-27 17:48:33 1986
#输出字典d1的键值和键值个数d1={'x':1,'y':2,'z':3}d1={'x':1,'y':2,'z':3}keylist=d1.keys()whilekeylist:print(keylist(0))keylist.pop(0)else:print(len(d))报错：TypeError:'dict_keys'objectisnotcallablehttps://stackoverflow.com/questions/17322668/type
系统 2019-09-27 17:48:32 1986
map函数map(func,*iterables)-->mapobject参数function传的是一个函数名，可以是python内置的，也可以是自定义的。参数iterable传的是一个可以迭代的对象，例如列表，元组，字符串这样的。处理序列中的的每个元素，得到的结果是一个‘列表+’，该列表的元素个数及位置与原来的一样；a=(1,2,3,4,5)b=[1,2,3,4,5]la=map(lambdax:x+1,a)lb=map(lambdax:x**2,b)p
系统 2019-09-27 17:48:02 1986
本文以实例形式介绍了pythonturtle模块即海龟绘图的使用方法，对于需要进行图形编程的朋友相信会有一定的借鉴价值。pythonturtle模块简介：python2.6版本中引入的一个简单的绘图工具，叫做海龟绘图(TurtleGraphics)1.使用海龟绘图首先我们需要导入turtle，如下所示：fromturtleimport*#将turtle中的所有方法导入2.海龟绘图属性：(1)位置(2)方向(3)画笔(画笔的属性，颜色、画线的宽度)3.操纵海
系统 2019-09-27 17:47:13 1986
具有不同标记颜色和大小的散点图演示。演示结果：实现代码：importnumpyasnpimportmatplotlib.pyplotaspltimportmatplotlib.cbookascbook#Loadanumpyrecordarrayfromyahoocsvdatawithfieldsdate,open,close,#volume,adj_closefromthempl-data/exampledirectory.Therecordarray#s
系统 2019-09-27 17:46:25 1986
原文链接：https://docs.python.org/3.8/whatsnew/3.8.html#summary-release-highlights作者|小刘来源|菜鸟学Python继3.7版本之后Python再次发布了新版本，虽然新版本带来了不少调整，但是其中很大一部分都是对代码底层设计的修改，又或是typing、pickle等不常用的功能，对多数用户而言影响不大，今天我想重点聊一聊那些将对我们的代码编写产生较大影响的新功能。在体验开始前先说下准备
系统 2019-09-27 17:46:14 1986
