1.在Scrapy工程下新建“middlewares.py”#Importingbase64librarybecausewe'llneeditONLYincaseiftheproxywearegoingtouserequiresauthenticationimportbase64#StartyourmiddlewareclassclassProxyMiddleware(object):#overwriteprocessrequestdefprocess_r
系统 2019-09-27 17:38:07 1973
JSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式。它基于JavaScript（StandardECMA-2623rdEdition-December1999）的一个子集。JSON采用完全独立于语言的文本格式，但是也使用了类似于C语言家族的习惯（包括C,C++,C#,Java,JavaScript,Perl,Python等）。这些特性使JSON成为理想的数据交换语言。易于人阅读和编写，同时也易于机器解析和生成。今天用py
系统 2019-09-27 17:37:51 1973
使用了telnetlib模块，首先登录到交换机，列出并获取配置文件的名称，然后通过tftp协议将配置文件传输到文件服务器上，为避免配置文件覆盖，将备份的配置文件名称统一加入日期以作区分。1.登录方式和口令有好几种，比较懒惰，通过不同列表以做区分，如果每个交换机口令都不相同的话，就需要额外处理了。2.交换机的配置文件也有多种类型，也是通过列表进行区分。3.有些交换机支持ftp和sftp，但测试发现有些虽然有相应的客户端命令，但传输总有问题。也不能将每个交换机
系统 2019-09-27 17:57:11 1972
本文实例讲述了Python实现生成密码字典的方法。分享给大家供大家参考，具体如下：key_data.py文件存放组成数据，可以随时扩充及简化。#coding=utf-8#!/usr/bin/pythondefyear():#返回字符串类型的年份列表year=range(1984,2018)#常用年份列表year_str=[]foryinyear:year_str.append(str(y))returnyear_strdefmonth_or_day(n):
系统 2019-09-27 17:54:41 1972
今天在网上找了半天，发现很多关于此题目的程序都只能接收数据，所以随便找了个程序研究了一下，然后做出一些修改代码如下：fromsocketimport*importthreadingtcp_socket=socket(AF_INET,SOCK_STREAM)tcp_socket.connect(('192.168.1.102',8080))true=Truedefrece_msg(tcp_socket):globaltruewhiletrue:recv_ms
系统 2019-09-27 17:54:41 1972
一Process对象的join方法在主进程运行过程中如果想并发地执行其他的任务，我们可以开启子进程，此时主进程的任务与子进程的任务分两种情况情况一：在主进程的任务与子进程的任务彼此独立的情况下，主进程的任务先执行完毕后，主进程还需要等待子进程执行完毕，然后统一回收资源。这种是没有join方法情况二：如果主进程的任务在执行到某一个阶段时，需要等待子进程执行完毕后才能继续执行，就需要有一种机制能够让主进程检测子进程是否运行完毕，在子进程执行完毕后才继续执行，否
系统 2019-09-27 17:52:51 1972
今天模拟定义map函数.写着写着就发现Python可变长度参数的机制真是灵活而强大.假设有一个元组t,包含n个成员：t=(arg1,...,argn)而一个函数f恰好能接受n个参数：f(arg1,...,argn)f(t)这种做法显然是错的,那么如何把t的各成员作为独立的参数传给f,以便达到f(arg1,...,argn)的效果?我一开始想到的是很原始的解法,先把t的各个成员变为字符串的形式,再用英文逗号把它们串联起来,形成一个"标准参数字符串":str_
系统 2019-09-27 17:52:29 1972
简单使用最开始，我们用最短的代码体验一下logging的基本功能。importlogginglogger=logging.getLogger()logging.basicConfig()logger.setLevel('DEBUG')logger.debug('logsomething')#输出out>>DEBG:root:logsomething第一步，通过logging.getLogger函数，获取一个loger对象，但这个对象暂时是无法使用的。第二步
系统 2019-09-27 17:52:26 1972
#!/usr/bin/envpython#coding=utf-8#------------------------------------------------------#Name:Apache日志分析脚本#Purpose:此脚本只用来分析Apache的访问日志#Version:2.0#Author:LEO#Created:2013-4-26#Modified:2013-5-4#Copyright:(c)LEO2013#---------------
系统 2019-09-27 17:52:04 1972
通过纯Python完成股票回测框架的搭建。什么是回测框架?无论是传统股票交易还是量化交易，无法避免的一个问题是我们需要检验自己的交易策略是否可行，而最简单的方式就是利用历史数据检验交易策略，而回测框架就是提供这样的一个平台让交易策略在历史数据中不断交易，最终生成最终结果，通过查看结果的策略收益，年化收益，最大回测等用以评估交易策略的可行性。代码地址在最后。本项目并不是一个已完善的项目,还在不断的完善。回测框架回测框架应该至少包含两个部分,回测类,交易类.回
系统 2019-09-27 17:51:37 1972
某天回家之时，听到有个朋友说起他正在做一个车牌识别的项目于是对其定位车牌的位置算法颇有兴趣，今日有空得以研究，事实上车牌识别算是比较成熟的技术了，这里我只是简单实现。我的思路为：对图片进行一些预处理，包括灰度化、高斯平滑、中值滤波、Sobel算子边缘检测等等。利用OpenCV对预处理后的图像进行轮廓查找，然后根据一些参数判断该轮廓是否为车牌轮廓。效果如下：test1：test2实现代码如下（对图像预处理（滤波器等）的原理比较简单，这里只是对一些函数进行调包
系统 2019-09-27 17:50:43 1972
人生苦短，我选Python。Python比其他的语言来说真的简洁多了，很多时候想做的东西都有对应的模块可以导入，平时玩点小东西真心不错。首先讲一下安装，其实没什么好讲的，点点点点点，完事。这里的AddPython3.7toPATH记得勾上，这样你就可以在CMD里面直接使用Python了（打开cmd，输入python就OK啦。）这里附上最新的Python安装包，win64的。https://www.python.org/ftp/python/3.7.3/py
系统 2019-09-27 17:48:17 1972
最近在用Python编写连接数据库获取记录的脚本，其中用到了cx_Oracle模块。它的语法主要如下：cx_Oracle.connect('username','pwd','IP/HOSTNAME:PORT/TNSNAME')importcx_Oracledb1=cx_Oracle.connect('yang','yang','127.0.0.1:1523/yangdb')db2=cx_Oracle.connect('yang/yang@127.0.0.1
系统 2019-09-27 17:47:07 1972
正则表达式是Python程序设计中非常实用的功能，本文就常用的正则表达式做一汇总，供大家参考之用。具体如下：一、字符串替换1.替换所有匹配的子串用newstring替换subject中所有与正则表达式regex匹配的子串result,number=re.subn(regex,newstring,subject)2.替换所有匹配的子串（使用正则表达式对象）reobj=re.compile(regex)result,number=reobj.subn(news
系统 2019-09-27 17:46:40 1972
最近我在用梯度下降算法绘制神经网络的数据时，遇到了一些算法性能的问题。梯度下降算法的代码如下（伪代码）：defgradient_descent():#thegradientdescentcodeplotly.write(X,Y)一般来说，当网络请求plot.ly绘图时会阻塞等待返回，于是也会影响到其他的梯度下降函数的执行速度。一种解决办法是每调用一次plotly.write函数就开启一个新的线程，但是这种方法感觉不是很好。我不想用一个像cerely（一种分
系统 2019-09-27 17:37:56 1972
