Spark编程环境Spark可以独立安装使用，也可以和Hadoop一起安装使用。在安装Spark之前，首先确保你的电脑上已经安装了Java8或者更高的版本。Spark安装访问Spark下载页面，并选择最新版本的Spark直接下载，当前的最新版本是2.4.2。下载好之后需要解压缩到安装文件夹中，看自己的喜好，我们是安装到了/opt目录下。tar-xzfspark-2.4.2-bin-hadoop2.7.tgzmvspark-2.4.2-bin-hadoop2
系统 2019-09-27 17:52:49 1996
简单使用最开始，我们用最短的代码体验一下logging的基本功能。importlogginglogger=logging.getLogger()logging.basicConfig()logger.setLevel('DEBUG')logger.debug('logsomething')#输出out>>DEBG:root:logsomething第一步，通过logging.getLogger函数，获取一个loger对象，但这个对象暂时是无法使用的。第二步
系统 2019-09-27 17:52:26 1996
1、str.split不支持正则及多个切割符号，不感知空格的数量，比如用空格切割，会出现下面情况。>>>s1="aabbcc">>>s1.split('')['aa','bb','','cc']因此split只适合简单的字符分割2、re.split，支持正则及多个字符切割>>>printlineabcaa;bb,cc|dd(xx).xxx12.12'xxxx按空格切>>>re.split(r'',line)['abc','aa;bb,cc','|','d
系统 2019-09-27 17:50:51 1996
Python安装Django本身是纯Python编写的，所以安装框架的第一步是确保你已经安装了Python。Python版本核心Django框架可以工作在2.3至2.6（包括2.3和2.6）之间的任何Python版本。Django的可选GIS（地理信息系统）支持需要Python2.4到2.6。如果你不确定要安装Python的什么版本，并且你完全拿不定主意的话,那就选2.x系列的最新版本吧。版本2.6。虽然Django在2.3至2.6版之间的任意Python
系统 2019-09-27 17:37:57 1996
在python中有一个telnetlib，它的作用就是建立一个通到主机的telnet连线实体，然后向主机传送命令(就像用键盘输入一样)并从该连线接收数据。利用它，我们可以把示范1的所有内容从"人-机'交流变成'机-机'交流，这样也可以做到处理pop3邮箱的工作。不过既然我们已经试过了pop3，这一次可以试用真的telnet埠23做些好玩的东西。#telnetdo.py#!/usr/bin/envpythondeftelnetdo(HOST=None,USE
系统 2019-09-27 17:50:56 1995
因为最近接触到调用新浪微博开放接口的项目，所以就想试试用python调用微博API。SDK下载地址：http://open.weibo.com/wiki/SDK代码不多十几K，完全可以看懂。有微博账号可以新建一个APP，然后就可以得到appkey和appsecret，这个是APP获得OAuth2.0授权所必须的。了解OAuth2可以查看链接新浪微博的说明。OAuth2授权参数除了需要appkey和appsecret还需要网站回调地址redirect_uri
系统 2019-09-27 17:47:08 1995
Template无疑是一个好东西，可以将字符串的格式固定下来，重复利用。同时Template也可以让开发人员可以分别考虑字符串的格式和其内容了，无形中减轻了开发人员的压力。Template属于string中的一个类，所以要使用的话可以用以下方式调用fromstringimportTemplateTemplate有个特殊标示符$,它具有以下的规则：它的主要实现方式为$xxx,其中xxx是满足python命名规则的字符串，即不能以数字开头，不能为关键字等如果$
系统 2019-09-27 17:45:29 1995
python是支持多线程的，主要是通过thread和threading这两个模块来实现的。thread模块是比较底层的模块，threading模块是对thread做了一些包装的，可以更加方便的使用。虽然python的多线程受GIL限制，并不是真正的多线程，但是对于I/O密集型计算还是能明显提高效率，比如说爬虫。下面用一个实例来验证多线程的效率。代码只涉及页面获取，并没有解析出来。#-*-coding:utf-8-*-importurllib2,timeim
系统 2019-09-27 17:37:56 1995
开篇：测试过程中，对于多参数参数多值的情况进行测试用例组织，之前一直使用【正交分析法】进行用例组织，说白了就是把每个参数的所有值分别和其他参数的值做一个全量组合，用Python脚本实现，就是itertools模块中product方法（又称笛卡尔积法）。正交分析法的优点是测试用例覆盖率100%，缺点测试用例数量庞大，执行用例消耗的人工巨大。Pairwise（结对）算法源于对传统的正交分析方法优化后得到的产物，它的理论来自于数学统计。毫不避讳的说，本人看不懂数
系统 2019-09-27 17:54:21 1994
导言篇：我的python环境是：python3.6.5这里我选择的GUI编程包是：tkintertkinker在python2.5以后就是自带包了，所以我们不需要另外安装tkinker相对与其他pythonGUI编程的包而已，是相对容易入手的代码篇：#这是系统的登录界面importtkinterfromtkinterimportmessageboxclassLogin(object):def__init__(self):#创建主窗口,用于容纳其它组件sel
系统 2019-09-27 17:51:14 1994
python中对文件、文件夹（文件操作函数）的操作需要涉及到os模块和shutil模块。得到当前工作目录，即当前Python脚本工作的目录路径:os.getcwd()返回指定目录下的所有文件和目录名:os.listdir()函数用来删除一个文件:os.remove()删除多个目录：os.removedirs（r“c：\python”）检验给出的路径是否是一个文件：os.path.isfile()检验给出的路径是否是一个目录：os.path.isdir()判
系统 2019-09-27 17:38:36 1994
最近在自学Python语言，看到向列表增加更多数据时被append（），extend（），insert（）方法绕晕了。append和extend都只需要一个参数，并且自动添加到数组末尾,如果需要添加多个，可用数组嵌套，但是append是将嵌套后的数组作为一个对象，extend是将嵌套的数组内容作为多个对象，添加到原数组中作为编程0基础的小白，觉得有必要自己再梳理一遍：1.append（）方法是指在列表末尾增加一个数据项。例如：在students列表末尾增加
系统 2019-09-27 17:37:54 1994
Python实现链表实例代码前言算法和数据结构是一个亘古不变的话题，作为一个程序员，掌握常用的数据结构实现是非常非常的有必要的。实现清单实现链表，本质上和语言是无关的。但是灵活度却和实现它的语言密切相关。今天用Python来实现一下，包含如下操作：['addNode(self,data)']['append(self,value)']['prepend(self,value)']['insert(self,index,value)']['delNode(s
系统 2019-09-27 17:56:13 1993
目的是能使用Python进行rtmp推流，方便在h264帧里加入弹幕等操作。librtmp使用的是0.3.0，使用树莓派noir官方摄像头适配的。通过wireshark抓ffmpeg的包一点点改动，最终可以在red5和斗鱼上推流了。没怎么写过python，有不恰当的地方请包涵。上代码：#--coding:utf-8--#http://blog.csdn.net/luhangleiimportpicameraimporttimeimporttraceback
系统 2019-09-27 17:47:12 1993
python合并文本文件示例代码。python实现两个文本合并employee文件中记录了工号和姓名catemployee.txt:100JasonSmith200JohnDoe300SanjayGupta400AshokSharmabonus文件中记录工号和工资catbonus.txt:100$5,000200$500300$3,000400$1,250要求把两个文件合并并输出如下,处理结果:400ashoksharma$1,250100jasonsmi
系统 2019-09-27 17:38:46 1993
