美空网数据----简介从今天开始，我们尝试用2篇博客的内容量，搞定一个网站叫做“美空网”网址为：http://www.moko.cc/，这个网站我分析了一下，我们要爬取的图片在下面这个网址http://www.moko.cc/post/1302075.html然后在去分析一下，我需要找到一个图片列表页面是最好的，作为一个勤劳的爬虫coder，我找到了这个页面http://www.moko.cc/post/da39db43246047c79dcaef44c2
系统 2019-09-27 17:45:41 1813
本文以数值计算为例讲述了Python中函数的用法，分享给大家供大家参考借鉴之用。具体如下：我们都知道圆的面积计算公式为：S=πr2当我们知道半径r的值时，就可以根据公式计算出面积。假设我们需要计算3个不同大小的圆的面积：r1=12.34r2=9.08r3=73.1s1=3.14*r1*r1s2=3.14*r2*r2s3=3.14*r3*r3当代码出现有规律的重复的时候，你就需要当心了，每次写3.14*x*x不仅很麻烦，而且，如果要把3.14改成3.1415
系统 2019-09-27 17:45:31 1813
在业务稳定性要求比较高的情况下，运维为能及时发现问题，有时需要对应用程序的日志进行实时分析，当符合某个条件时就立刻报警，而不是被动等待出问题后去解决，比如要监控nginx的$request_time和$upstream_response_time时间，分析出最耗时的请求，然后去改进代码，这时就要对日志进行实时分析了，发现时间长的语句就要报警出来，提醒开发人员要关注，当然这是其中一个应用场景，通过这种监控方式还可以应用到任何需要判断或分析文件的地方，所以今天
系统 2019-09-27 17:38:40 1813
将套接字流重定向到标准输入或输出流#!/usr/bin/envpython3"""测试socket-stream重定向模式"""importsys,os,timefrommultiprocessingimportProcessfromsocketimport*definitListenerSocket(port=50008,host=''):"""初始化在服务器模式下调用者用于监听连接的套接字"""sock=socket()try:sock.bind((h
系统 2019-09-27 17:38:28 1813
iops简介iops主要用在数据方面，这个指标是数据库性能评定的一个重要参考，iops的是每秒进行读写（I/O）操作的次数，主要看随机访问的性能，一般为了iops增高都要依靠磁盘阵列，实际线上的数据库基本都是raid10的配置，raid5在实际生产环境中如果压力上来是抗不住的，当然也要开具体业务压力情况，如果是用物理机就要看iops在实际中能跑到多少值，现在云也普遍了，如果你用的RDS云数据库，这个iops是可以根据业务情况自己选择的，基本是个参数，可以按
系统 2019-09-27 17:38:24 1813
本文以实例形式较为详细的讲解了Python的多线程，是Python程序设计中非常重要的知识点。分享给大家供大家参考之用。具体方法如下：用过Python的人都会觉得Python的多线程很类似于Java的多线程机制，但是比JAVA的多线程更灵活。在早期的Python多线程实现中，采用了thread模块。例如:fromtimeimportctime,sleepfromthreadimportstart_new_threaddefloop1():print"ent
系统 2019-09-27 17:38:23 1813
利用Python写了简单测试主机是否存活脚本，此脚本不适于线上使用，因为网络延迟、丢包现象会造成误报邮件，那么后续会更新判断三次ping不通后再发报警邮件，并启用多线程处理。#!/usr/bin/envpython#coding:UTF-8importtimeimportpexpectimportsmtplibfromemail.mime.textimportMIMETextmail_host="smtp.163.com"#定义smtp服务器mail_to
系统 2019-09-27 17:38:23 1813
Python字符串字符串或串(String)是由数字、字母、下划线组成的一串字符。一般记为:s="a1a2・・・an"(n>=0)它是编程语言中表示文本的数据类型。python的字串列表有2种取值顺序:从左到右索引默认0开始的，最大范围是字符串长度少1从右到左索引默认-1开始的，最大范围是字符串开头如果你的实要取得一段子串的话，可以用到变量[头下标:尾下标]，就可以截取相应的字符串，其中下标是从0开始算起，可以是正数或负数，下标可以为空表示取到头或尾。比如
系统 2019-09-27 17:38:20 1813
set在python里是什么意思?set是一组数，无序，内容又不能重复，通过调用set()方法创建：>>>s=set(['A','B','C'])对于访问一个set的意义就仅仅在于查看某个元素是否在这个集合里面，注意大小写敏感：>>>print'A'insTrue>>>print'D'insFalse也通过for来遍历：s=set([('Adam',95),('Lisa',85),('Bart',59)])forxins:printx[0],':',x[1
系统 2019-09-27 17:38:10 1813
安装Tornado省事点可以直接用grequests库，下面用的是tornado的异步client。异步用到了tornado，根据官方文档的例子修改得到一个简单的异步爬虫类。可以参考下最新的文档学习下。pipinstalltornado异步爬虫#!/usr/bin/envpython#-*-coding:utf-8-*-importtimefromdatetimeimporttimedeltafromtornadoimporthttpclient,gen,
系统 2019-09-27 17:38:10 1813
