1.在Scrapy工程下新建“middlewares.py”#Importingbase64librarybecausewe'llneeditONLYincaseiftheproxywearegoingtouserequiresauthenticationimportbase64#StartyourmiddlewareclassclassProxyMiddleware(object):#overwriteprocessrequestdefprocess_r
系统 2019-09-27 17:38:07 1727
python是支持多线程的，主要是通过thread和threading这两个模块来实现的。thread模块是比较底层的模块，threading模块是对thread做了一些包装的，可以更加方便的使用。虽然python的多线程受GIL限制，并不是真正的多线程，但是对于I/O密集型计算还是能明显提高效率，比如说爬虫。下面用一个实例来验证多线程的效率。代码只涉及页面获取，并没有解析出来。#-*-coding:utf-8-*-importurllib2,timeim
系统 2019-09-27 17:37:56 1727
准确获得页面、窗口高度及宽度的JSfunctiongetPageSize(){varxScroll,yScroll;if(window.innerHeight&&window.scrollMaxY){xScroll=document.body.scrollWidth;yScroll=window.innerHeight+window.scrollMaxY;}elseif(document.body.scrollHeight>document.body.of
系统 2019-08-29 23:47:45 1727
1.El失效可能于web.xml的版本有关，2.4的可以直接显示，我用2.5的只的在页面上加一个<%@pageisELIgnored="false"%>才算搞定2.html代码中表示网页中所有的超链接的目标地址都在新建窗口中打开。表示网页中所有的超链接的目标地址都在原窗口上打开。3.jsp路径项目request.getContextPath()${pag
系统 2019-08-29 22:58:17 1727
使用了telnetlib模块，首先登录到交换机，列出并获取配置文件的名称，然后通过tftp协议将配置文件传输到文件服务器上，为避免配置文件覆盖，将备份的配置文件名称统一加入日期以作区分。1.登录方式和口令有好几种，比较懒惰，通过不同列表以做区分，如果每个交换机口令都不相同的话，就需要额外处理了。2.交换机的配置文件也有多种类型，也是通过列表进行区分。3.有些交换机支持ftp和sftp，但测试发现有些虽然有相应的客户端命令，但传输总有问题。也不能将每个交换机
系统 2019-09-27 17:57:11 1726
本文实例讲述了Python实现生成密码字典的方法。分享给大家供大家参考，具体如下：key_data.py文件存放组成数据，可以随时扩充及简化。#coding=utf-8#!/usr/bin/pythondefyear():#返回字符串类型的年份列表year=range(1984,2018)#常用年份列表year_str=[]foryinyear:year_str.append(str(y))returnyear_strdefmonth_or_day(n):
系统 2019-09-27 17:54:41 1726
json.load读取文件(file)，解析为json对象（dict类型）；json.loads读取字符串(string)，解析为json对象；json.dump写文件(file)，将json对象写入文件；json.dumps写字符串，将json对象写成string。importjsonimportosjson_obj={'name':'Michael','age':13}print("jsondict:",type(json_obj))#json对象是一
系统 2019-09-27 17:52:39 1726
在Python2和Python3中都提供print()方法来打印信息,但两个版本间的print稍微有差异主要体现在以下几个方面：1.python3中print是一个内置函数，有多个参数，而python2中print是一个语法结构；2.Python2打印时可以不加括号：print'helloworld'，Python3则需要加括号print("helloworld")3.Python2中，input要求输入的字符串必须要加引号，为了避免读取非字符串类型发生的
系统 2019-09-27 17:52:34 1726
在上一篇文章中，我们讲了如何在linux上用python写一个守护进程。主要原理是利用linux的fork函数来创建一个进程，然后退出父进程运行，生成的子进程就会成为一个守护进程。细心观察的可能会发现，这个守护进程的运行身份是执行这个程序的用户，如果把这个守护程序加入到系统的服务项，那么这个守护程序的执行身份应该是root。一个情况出现了，root的权限比较大，如果通过这个root身份的守护程序来进行操作，危险性是比较大的。一种好的办法是生成一个身份为ro
系统 2019-09-27 17:52:32 1726
今天模拟定义map函数.写着写着就发现Python可变长度参数的机制真是灵活而强大.假设有一个元组t,包含n个成员：t=(arg1,...,argn)而一个函数f恰好能接受n个参数：f(arg1,...,argn)f(t)这种做法显然是错的,那么如何把t的各成员作为独立的参数传给f,以便达到f(arg1,...,argn)的效果?我一开始想到的是很原始的解法,先把t的各个成员变为字符串的形式,再用英文逗号把它们串联起来,形成一个"标准参数字符串":str_
系统 2019-09-27 17:52:29 1726
