思路一、想要实现登录豆瓣关键点分析真实post地址----寻找它的formdata，如下图,按浏览器的F12可以找到。实战操作实现：模拟登录豆瓣，验证码处理，登录到个人主页就算是success数据：没有抓取数据，此实战主要是模拟登录和处理验证码的学习。要是有需求要抓取数据，编写相关的抓取规则即可抓取内容。登录成功展示如图：spiders文件夹中DouBan.py主要代码如下：#-*-coding:utf-8-*-importscrapy,urllib,re
系统 2019-09-27 17:52:01 1921
今天来介绍一下Python解释器包含的一系列的内置函数，下面表格按字母顺序列出了内置函数：下面就一一介绍一下内置函数的用法：1、abs()返回一个数值的绝对值，可以是整数或浮点数等。print(abs(-18))print(abs(0.15))result:180.152、all(iterable)如果iterable的所有元素不为0、''、False或者iterable为空，all(iterable)返回True，否则返回False。print(all(
系统 2019-09-27 17:50:56 1921
今天主要是来说一下怎么可视化来监控你的爬虫的状态。相信大家在跑爬虫的过程中，也会好奇自己养的爬虫一分钟可以爬多少页面，多大的数据量，当然查询的方式多种多样。今天我来讲一种可视化的方法。关于爬虫数据在mongodb里的版本我写了一个可以热更新配置的版本，即添加了新的爬虫配置以后，不用重启程序，即可获取刚刚添加的爬虫的状态数据。1.成品图这个是监控服务器网速的最后成果，显示的是下载与上传的网速，单位为M。爬虫的原理都是一样的，只不过将数据存到InfluxDB的
系统 2019-09-27 17:50:52 1921
python文件的基本操作菜中菜文件操作open():打开file：文件的位置（路径）mode：操作文件模式encoding:文件编码方式f:文件句柄f=open("1.txt",mode='r',encoding='utf-8')print(f.read())f.close1.文件操作模式：r，w，a（重要）rb，wb，ab（次要）r+，w+，a+1.1r/w/a1.r操作：f=open('1.txt','r')print(f.read(
系统 2019-09-27 17:50:35 1921
文章目录一、简介二、效果三、源码3.1、核心程序3.2、配置文件3.3、ReadMe一、简介由于项目的需要，需要做一个简单监控服务器的CPU利用率、CPU负载、硬盘使用率、内存利用率和服务器的各个端口的开启情况的程序，并把结果通知到监控平台，如果出现异常，监控平台打电话或者发短信通知给具体的运维人员。博主写了负责监控的代码，供大家学习参考哈~二、效果三、源码3.1、核心程序#-*-coding:utf-8-*-"""功能：监控服务器的CPU、硬盘、内存和各
系统 2019-09-27 17:49:55 1921
[TOC]一、守护线程无论是进程还是线程，都遵循：守护xx会等待主xx运行完毕后被销毁。需要强调的是：运行完毕并非终止运行。对主进程来说，运行完毕指的是主进程代码运行完毕对主线程来说，运行完毕指的是主线程所在的进程内所有非守护线程统统运行完毕，主线程才算运行完毕1.1详细解释主进程在其代码结束后就已经算运行完毕了（守护进程在此时就被回收）,然后主进程会一直等非守护的子进程都运行完毕后回收子进程的资源(否则会产生僵尸进程)，才会结束。主线程在其他非守护线程运
系统 2019-09-27 17:49:52 1921
#输出字典d1的键值和键值个数d1={'x':1,'y':2,'z':3}d1={'x':1,'y':2,'z':3}keylist=d1.keys()whilekeylist:print(keylist(0))keylist.pop(0)else:print(len(d))报错：TypeError:'dict_keys'objectisnotcallablehttps://stackoverflow.com/questions/17322668/type
系统 2019-09-27 17:48:32 1921
本文实例讲述了Python使用itchat模块实现群聊转发，自动回复功能。分享给大家供大家参考，具体如下：1.itchat自动把好友发来的消息，回复给他仅能实现自动回复原文给好友发来的文本消息、图片表情消息。#!/usr/bin/python#coding=utf-8importitchatfromitchat.contentimport*@itchat.msg_register([PICTURE,TEXT])defsimple_reply(msg):if
系统 2019-09-27 17:48:05 1921
本实例的实现逻辑是，应用seleniumUI自动化登录百度盘，读取存储百度分享地址和提取码的txt文档，打开百度盘分享地址，填入提取码，然后保存到指定的目录中全部代码如下：#-*-coding:utf8-*-#encoding:utf-8importtimefromseleniumimportwebdriverbrowser=webdriver.Chrome()defloginphont():browser.get("https://pan.baidu.c
系统 2019-09-27 17:48:05 1921
目的测试一个对象是否是字符串方法Python的字符串的基类是basestring，包括了str和unicode类型。一般可以采用以下方法：复制代码代码如下:defisAString(anobj):returnisinstance(anobj,basestring)不过以上方法对于UserString类的实例，无能无力。复制代码代码如下:In[30]:b=UserString.UserString('abc')In[31]:isAString(b)Out[3
系统 2019-09-27 17:46:56 1921
