今天咱写一个挺实用的工具，就是扫描并获取可用的proxy首先呢，我先百度找了一个网站：http://www.xicidaili.com作为例子这个网站里公布了许多的国内外可用的代理的ip和端口我们还是按照老样子进行分析，就先把所有国内的proxy扫一遍吧点开国内部分进行审查发现，国内proxy和目录为以下url：http://www.xicidaili.com/nn/x这个x差不多两千多页，那么看来又要线程处理了。。。老样子，我们尝试是否能直接以最简单的r
系统 2019-09-27 17:54:09 1903
1下载sublimetext3(不要下载最新版Version:Build3207不好找licence)https://www.unyoo.com/2320.html（参考这个，需要指定版本windows或mac的可以看这个）https://download.sublimetext.com/sublime_text_3_build_3200_x64.tar.bz2（我用的是这个版本）放到ubuntu里面，解压tar-xvfsublime_text_3_bui
系统 2019-09-27 17:54:03 1903
本例程使用urlib实现的，基于python2.7版本，采用beautifulsoup进行网页分析，没有第三方库的应该安装上之后才能运行，我用的IDE是pycharm，闲话少说，直接上代码！#-*-coding:utf-8-*importreimportosimporturllibimporturllib2frombs4importBeautifulSoupdefcraw(url,page):html1=urllib2.urlopen(url).read(
系统 2019-09-27 17:53:53 1903
（1）常用内置数据类型分类类型名称描述数字int整数float浮点数complex复数bool布尔值序列str字符串（不可变序列）list列表tuple元组（不可变序列）range整数范围（不可变序列）bytes字节数组（不可变序列）bytearray可变字节数组映射dict字典集合set可变集合frozenset不可变集合NoneNoneType空对象，它没有任何属性（2）类型检查常用方法用法类型描述举例id(实例)内置函数返回一个对象的身份（整数）id
系统 2019-09-27 17:53:28 1903
importthreadingimportqueueimporttime'''queue.qsize()返回队列的大小queue.empty()如果队列为空，返回True,反之Falsequeue.full()如果队列满了，返回True,反之Falsequeue.full与maxsize大小对应queue.get([block[,timeout]])获取队列，timeout等待时间queue.get_nowait()相当queue.get(False)qu
系统 2019-09-27 17:53:25 1903
1.基础内容[]（中括号）用于描述正则表达式中的字符集，可以通过向字符集内部输入字符来自定义匹配的内容。importreregex1=re.compile('[ABC]')message1="Hello.ThisisABCclub.Amanwillserveyouthen."print(regex1.findall(message1))输出：[‘A’,‘B’,‘C’,‘A’]正则表达式会根据中括号里的任意一个字符进行匹配。如果想要匹配的字符很多，例如所有的
系统 2019-09-27 17:52:45 1903
Python解释器运行Python代码时，得到的是一个包含Python代码的以.py为扩展名的文本文件，要运行代码，就需要Python解释器去执行.py文件主要有以下几种解释器1.Cpython解释器（解释器是用C语言开发的）2.IPython解释器（基于Cpython之上的一个交互式解释器（>>>orIn[序号]））3.PyPy解释器（对Python代码进行动态编译，执行速度大大提高）4.Jython解释器（运行在Java平台上的python解释器，可以
系统 2019-09-27 17:51:21 1903
pythonelasticsearch从创建索引到写入数据创建索引fromelasticsearchimportElasticsearches=Elasticsearch('192.168.1.1:9200')mappings={"mappings":{"type_doc_test":{#type_doc_test为doc_type"properties":{"id":{"type":"long","index":"false"},"serial":{"t
系统 2019-09-27 17:51:01 1903
事情是这样的，我写了一个tornado的服务，过程当中我用logging记录一些内容，由于一开始并没有仔细观察tornado自已的日志管理，所以我就一般用debug来记录普通日志，error记录有问题的日志，但是当服务跑起来以后才发现，tornado的访问日志的级别是info，也就是20，debug是10的，所以如果我定义了日志的级别是debug，那么默认情况下肯定也会输出到日志文件中的。但是我现在并不关心访问日志，而且由于我这个服务可能每时每刻都会有访问
系统 2019-09-27 17:50:30 1903
[TOC]一、锁线程中的锁机制和进程中一样。都是通过锁来控制资源访问虽然，线程中的资源是共享的，但也可以通过锁来进行控制。达到线程同步的目的。虽然牺牲了效率但是保证了安全。x=0mutex=Lock()deftask():globalxmutex.acquire()#上锁foriinrange(200000):x=x+1mutex.release()#解锁if__name__=='__main__':th_list=[]foriinrange(10):t1
系统 2019-09-27 17:49:53 1903
