上面我们学习了RDD如何转换，即一个RDD转换成另外一个RDD，但是转换完成之后并没有立刻执行，仅仅是记住了数据集的逻辑操作，只有当执行了Action动作之后才会真正触发Spark作业，进行算子的计算执行操作有：reduce(func)collect()count()first()take(n)takeSample(withReplacement,num,[seed])takeOrdered(n,[ordering])saveAsTextFile(path
系统 2019-09-27 17:52:33 2096
yield的功能类似于return，但是不同之处在于它返回的是生成器。生成器生成器是通过一个或多个yield表达式构成的函数，每一个生成器都是一个迭代器（但是迭代器不一定是生成器）。如果一个函数包含yield关键字，这个函数就会变为一个生成器。生成器并不会一次返回所有结果，而是每次遇到yield关键字后返回相应结果，并保留函数当前的运行状态，等待下一次的调用。由于生成器也是一个迭代器，那么它就应该支持next方法来获取下一个值。基本操作#通过`yield`
系统 2019-09-27 17:52:18 2096
在网络通信中，每个连接都必须创建新线程（或进程）来处理，否则，单线程在处理连接的过程中，无法接受其他客户端的连接。所以我们尝试使用协程来实现服务器对多个客户端的响应。与单一TCP通信的构架一样，只是使用协程来实现多个任务同时进行。#服务端importsocketfromgeventimportmonkeyimportgeventmonkey.patch_all()defhandle_conn(seObj):whileTrue:re_Data=seObj.r
系统 2019-09-27 17:50:26 2096
使用python脚本备份zk中的配置python备份代码python3back.pyimportosimportos.pathfromkazoo.clientimportKazooClientfromkazoo.clientimportKazooStatezk=KazooClient('test:2181')zk.start()zkBashPath="/conf/base/"backUp_path="/tmp/test/"cs=zk.get_childre
系统 2019-09-27 17:50:23 2096
[TOC]一、python线程模块的选择Python提供了几个用于多线程编程的模块，包括thread、threading和Queue等。thread和threading模块允许程序员创建和管理线程。thread模块提供了基本的线程和锁的支持，threading提供了更高级别、功能更强的线程管理的功能。Queue模块允许用户创建一个可以用于多个线程之间共享数据的队列数据结构。避免使用thread模块，因为更高级别的threading模块更为先进，对线程的支持
系统 2019-09-27 17:49:53 2096
简单来说，三种方法是为了删除字符串中不同位置的指定字符。其中，strip()用于去除字符串的首尾字符，同理，lstrip()用于去除左边的字符，rstrip()用于去除右边的字符Python中有三个去除头尾字符、空白符的函数，它们依次为:strip：用来去除头尾字符、空白符(包括\n、\r、\t、''，即：换行、回车、制表符、空格)lstrip：用来去除开头字符、空白符(包括\n、\r、\t、''，即：换行、回车、制表符、空格)rstrip：用来去除结尾字
系统 2019-09-27 17:49:33 2096
理解一个算法最快，最深刻的做法，我觉着可能是自己手动实现，虽然项目中不用自己实现，有已经封装好的算法库，供我们调用，我觉着还是有必要自己亲自实践一下。这里首先说明一下，python这种动态语言，对不熟悉的人可能看着比较别扭，不像java那样参数类型是固定的，所以看着会有些蛋疼。这里环境用的是python2.7。classMessage:#commandMSG_ACCEPTOR_AGREE=0#追随者约定MSG_ACCEPTOR_ACCEPT=1#追随者接受
系统 2019-09-27 17:49:27 2096
Django里面集成了SQLite的数据库，对于初期研究来说，可以用这个学习。第一步，创建数据库就涉及到建表等一系列的工作，在此之前，要先在cmd执行一个命令：pythonmanage.pymigrate这个命令就看成一个打包安装的命令，它会根据mysite/settings.py的配置安装一系列必要的数据库表第二步，我们要建立一个Model层，修改demo/model.py：fromdjango.dbimportmodelsclassQuestion(m
系统 2019-09-27 17:49:15 2096
1、python大量的库为数据分析提供了完整的工具集2、比起MATLAB、R语言等其他主要用于数据分析语言，python语言功能更加健全3、python库一直在增加，算法的实现采取的方法更加创新4、python能很方便的对接其他语言，比如c、java等什么是IPython？IPython是一个python的交互式的shell(它默认的pythonshell要好用的多、强大的多)1、支持代码的自动补全、自动缩进，已经支持bashshell2、JupyterN
系统 2019-09-27 17:48:58 2096
下面看下python2.x和python3.x的区别1.大环境不同python2.x：源码重复，不规范python3.x：整合源码，更清晰优美简单2.默认编码不同python2.x：默认编码ASCII编码python3.x：默认编码UTF-83.python3.x没有长整型python2.x：有长整型longpython3.x：long整数类型被废弃，统一为int4.打印方式不同python2.x：print语句，print空格+打印内容python3.x
系统 2019-09-27 17:48:49 2096
