背景在实际项目实施中，会编写很多在服务器执行的作业脚本。程序中凡是涉及到数据库链接、操作系统用户链接、IP地址、主机名称的内容都是敏感信息。在纯内网系统中往因为开发时间紧迫，往往都直接将这些敏感信息明文方式写在脚本中了。稍微规范一点的，创建一个通用的config文件，将所有这类敏感信息记录在这个文件中，脚本以读取文件方式获取这些信息。这种方式的好处是脚本不用在应用迁移、灾备部署的时候再起不同的版本，尤其是大数据平台作业运行的脚本，如果是需要做灾备集群，这种
系统 2019-09-27 17:57:49 1818
首先要分析一下电影天堂网站的首页结构。在这里插入图片描述从上面的菜单栏中我们可以看到整个网站资源的总体分类情况。刚刚好我们可以利用到它的这个分类，将每一个分类地址作为爬虫的起点。①解析首页地址提取分类信息#解析首页defCrawIndexPage(starturl):print"正在爬取首页"page=__getpage(starturl)ifpage=="error":returnpage=page.decode('gbk','ignore')tree=
系统 2019-09-27 17:56:58 1818
如下所示：#返回一个列表中第二大的数defsecond(ln):max=0s={}foriinrange(len(ln)):flag=0forjinrange(len(ln)):ifln[i]>=ln[j]andi!=j:flag=flag+1s[i]=flagifflag>max:max=flagprint(s)foriins:ifs[i]==max-1:breakprint(ln[i])second([1,2,7,4,5,6,8,5,3,3,9,9,1
系统 2019-09-27 17:56:57 1818
半次元COS图爬取-写在前面今天在浏览网站的时候，忽然一个莫名的链接指引着我跳转到了半次元网站https://bcy.net/打开之后，发现也没有什么有意思的内容，职业的敏感让我瞬间联想到了cosplay，这种网站必然会有这个的存在啊，于是乎，我准备好我的大爬虫了。把上面的链接打开之后，被我发现了吧，就知道我的第八感不错滴。接下来就是找入口，一定要找到图片链接的入口才可以做下面的操作这个页面不断往下拖拽，页面会一直加载，当时当你拖拽一会，就停下来了，就是这
系统 2019-09-27 17:56:54 1818
定制pattern的string模板(template)详解string.Template的pattern是一个正则表达式,可以通过覆盖pattern属性,定义新的正则表达式.如:使用新的定界符"{{",把{{var}}作为变量语法.代码:#-*-coding:utf-8-*-'''''Createdon2014.6.5@author:Administrator@edition:python3.3.0,eclipsepydev'''importstring
系统 2019-09-27 17:56:16 1818
1、概述1.1场景我们在使用Python中的方法method时，经常会看到参数中带有self，但是我们也没对这个参数进行赋值，那么这个参数到底是啥意思呢？2、知识点2.1成员函数(m)和普通方法(f)Python中的"类方法"必须有一个额外的第一个参数名称（名称任意，不过推荐self），而"普通方法"则不需要。m、f、c都是代码自动提示时的左边字母（method、function、class）#-*-coding:utf-8-*-classTest(obj
系统 2019-09-27 17:56:05 1818
本文实例讲述了Python使用字典实现的简单记事本功能。分享给大家供大家参考，具体如下：fromtimeimportsleep,strftimeuser="Cytus"calendar={}defwelcome():print"Welcometousethiscalendar.%s"%userprint"Calendarisopening."sleep(1)printstrftime("%A%B%d%Y")printstrftime("%H:%M:%S")
系统 2019-09-27 17:56:03 1818
在帮朋友解决这个问题后，随便记录一下这三种方法：第一种方法：使用正则表达式：因为当时的要求是判定10.0.0.1到10.255.255.255，原理其实是一样。这里简单回顾一下正则表达式模式的内容：常见的如：\d可以表示0～9的任意一个数字字符而\D是匹配一个非数字字符等价于^^是匹配字符串的开头，但放在[]中表示匹配不在[]中的字符$是匹配字符串的末尾.是匹配除了换行符任意字符{}表示重复几次，例如：^a{2,4}$aa,aaa或aaaa|的是或的意思[
系统 2019-09-27 17:55:59 1818
本文实例讲述了python根据路径导入模块的方法，分享给大家供大家参考。具体方法如下：常规做法如下：importsyssys.path.append('C:/full/path')fromfooimportutil,bar而要直接通过路径importimputil=imp.load_source('util','C:/full/path/foo/util.py')使用时使用util.method，此时并没有定义methodmethod=util.metho
系统 2019-09-27 17:55:56 1818
当类间继承关系很简单时，super()的使用很简单。classA(object):def__init__(self):print('a')classB(A):def__init__(self):super(B,self).__init__()print('b')b=B()输出结果：ab当一个类继承多个类时，问题就复杂起来了，请看下例：classA(object):def__init__(self):print('a')classB(object):def_
系统 2019-09-27 17:55:42 1818
