今天主要是来说一下怎么可视化来监控你的爬虫的状态。相信大家在跑爬虫的过程中，也会好奇自己养的爬虫一分钟可以爬多少页面，多大的数据量，当然查询的方式多种多样。今天我来讲一种可视化的方法。关于爬虫数据在mongodb里的版本我写了一个可以热更新配置的版本，即添加了新的爬虫配置以后，不用重启程序，即可获取刚刚添加的爬虫的状态数据。1.成品图这个是监控服务器网速的最后成果，显示的是下载与上传的网速，单位为M。爬虫的原理都是一样的，只不过将数据存到InfluxDB的
系统 2019-09-27 17:50:52 2021
python2和python3实现在图片上加汉字,最主要的区别还是内部编码方式不一样导致的,在代码上表现为些许的差别。理解了内部编码原理也就不会遇到这些问题了，以下代码是在WIN10系统上时测好用的。Python2在图片上加汉字代码实现#-*-coding:cp936-*-importcv2importnumpyasnpfromPILimportImage,ImageDraw,ImageFontdefID_2_Word(txt):tmp_ID=txt.sp
系统 2019-09-27 17:50:33 2021
一、操作系统中相关进程的知识Unix/Linux操作系统提供了一个fork()系统调用，它非常特殊。普通的函数调用，调用一次，返回一次，但是fork()调用一次，返回两次，因为操作系统自动把当前进程（称为父进程）复制了一份（称为子进程），然后，分别在父进程和子进程内返回。子进程永远返回0，而父进程返回子进程的ID。这样做的理由是，一个父进程可以fork出很多子进程，所以，父进程要记下每个子进程的ID，而子进程只需要调用getppid()就可以拿到父进程的I
系统 2019-09-27 17:50:08 2021
1、CSV（1）写csv文件importcsvdefwritecsv(path,data):withopen(path,"w")asf:writer=csv.writer(f)forrowDataindata:print("rowData=",rowData)writer.writerow(rowData)path=r"E:\\Python\\py17\\automatictext\\000001.csv"writecsv(path,[[1,2,3],[4
系统 2019-09-27 17:50:02 2021
“表情包”是现在非常流行的交流方式，通过一张图片就能把文字不能表达或不便于表达的情感给表示出来，表情包一经诞生，就统治了中国人的社交圈，尤其是年轻人，他们的社交方式是所谓“天可不聊，图不可不斗”，几乎任何对话都会出现表情包的身影，一言不合就斗图，自己也会在聊天中发几个表情包，可是总会造成一些小误会，比如下面的图有好多朋友看到这个表情包之后误以为这也是我用Python做的，其实不然，这个图就是网上普通的表情包，但是今天我要用Python做几个表情包。今天制作
系统 2019-09-27 17:49:06 2021
王者荣耀这么久了，还没上王者？哈哈哈，看过来，是不是对英雄理解的不够透彻呢，是不是还没有很好的为英雄分类呢，今天就来看看英雄分类技术栈一、EM聚类简介二、爬取网上的英雄初始属性值三、做成饼图EM聚类简介EM英文名是ExpectationMaximization，也叫最大期望算法。在统计计算中，最大期望（EM）算法是在概率（probabilistic）模型中寻找参数最大似然估计或者最大后验估计的算法，其中概率模型依赖于无法观测的隐藏变量（LatentVari
系统 2019-09-27 17:48:38 2021
正则表达式简介正则表达式，又称正规表示式、正规表示法、正规表达式、规则表达式、常规表示法（英语：RegularExpression，在代码中常简写为regex、regexp或RE），计算机科学的一个概念。正则表达式使用单个字符串来描述、匹配一系列符合某个句法规则的字符串。在很多文本编辑器里，正则表达式通常被用来检索、替换那些符合某个模式的文本。许多程序设计语言都支持利用正则表达式进行字符串操作。例如，在Perl中就内建了一个功能强大的正则表达式引擎。正则表
系统 2019-09-27 17:48:13 2021
python中对对象dump报错：ObjectoftypeCOUPON_CATE_V2isnotJSONserializable使用classObj.__dict__如打印对象：print(str(coupon_cate_v2.__dict__))
系统 2019-09-27 17:48:11 2021
采用python实现简单QQ单用户机器人的方法如下：一、首先我们查看一下关于3GQQ的相关协议：对此，打开一个支持WAP的浏览器，可以使用Firefox的wmlbrowser插件，打开FF后，访问地址https://addons.mozilla.org/zh-CN/firefox/search/?q=wmlbrowser&cat=all&x=17&y=11二、进入3GQQ的进行协议分析3GQQ的地址是：http://pt.3g.qq.com/s?aid=n
系统 2019-09-27 17:48:02 2021
标题python基础题~九九乘法表forxinrange(1,10):forjinrange(1,x+1):print('{0}*{1}={2}'.format(x,j,x*j),end='\t')print()1*1=12*1=22*2=43*1=33*2=63*3=94*1=44*2=84*3=124*4=165*1=55*2=105*3=155*4=205*5=256*1=66*2=126*3=186*4=246*5=306*6=367*1=77*2
系统 2019-09-27 17:47:42 2021
