说到流处理，Spark为我们提供了窗口函数，允许在滑动数据窗口上应用转换，常用场景如每五分钟商场人流密度、每分钟流量等等，接下来我们通过画图来了解SparkStreaming的窗口函数如何工作的，处理过程图如下所示：上图中绿色的小框框是一批一批的数据流，虚线框和实线框分别是前一个窗口和后一个窗口，从图中可以看出后一个窗口在前一个窗口基础上移动了两个批次的数据流，而我们真正通过算子操作的数据其实就是窗口内所有的数据流。在代码实现前了解下窗口操作常用的函数有：
系统 2019-09-27 17:52:34 1919
Python语言与Perl，C和Java等语言有许多相似之处，也有一定的差异性，以下是Python语言获取文件后缀名和文件名的方法：#Python获取文件后缀名的方法importos.pathdeffile_extension(path):returnos.path.splitext(path)[1]printfile_extension('/py/a.py')输出：.py#Python获取目录和文件名importos.pathdeffile_extens
系统 2019-09-27 17:52:22 1919
yield的功能类似于return，但是不同之处在于它返回的是生成器。生成器生成器是通过一个或多个yield表达式构成的函数，每一个生成器都是一个迭代器（但是迭代器不一定是生成器）。如果一个函数包含yield关键字，这个函数就会变为一个生成器。生成器并不会一次返回所有结果，而是每次遇到yield关键字后返回相应结果，并保留函数当前的运行状态，等待下一次的调用。由于生成器也是一个迭代器，那么它就应该支持next方法来获取下一个值。基本操作#通过`yield`
系统 2019-09-27 17:52:18 1919
我们首先来看下python的全部代码，大家可以直接复制后测试：#-*-encoding:utf-8-*-importloggingimportwmiimportosimporttimefromConfigParserimportConfigParserimportsmtplibfromemail.mime.textimportMIMETextimportsocketfromdatetimeimportdatetimeimportreimportsysimp
系统 2019-09-27 17:52:12 1919
一般来说，选择用于应用程序的GUI工具箱会是一件棘手的事。使用Python（许多语言也一样）的程序员可以选择的GUI工具箱种类繁多，而每个工具箱都有各自的优缺点。有些速度比其它工具箱快，有些比较小；有些易于安装，有些更适合于跨平台使用（对于这一点，还要指出，有些支持您需要满足的特定特性）。当然，各种库都相应具有各种许可证。对于Python程序员而言，缺省的GUI选择是Tk（通过Tkinter绑定）―其原因显而易见。Tkinter和闲置的IDE是由Pytho
系统 2019-09-27 17:49:34 1919
更详细见：https://blog.csdn.net/Lord_sh/article/details/92653790>>>x=np.arange(0,16).reshape(4,4)>>>xarray([[0,1,2,3],[4,5,6,7],[8,9,10,11],[12,13,14,15]])>>>idx=[[1,0,0,0],[0,1,0,0],[0,1,0,0],[0,0,0,1]]>>>idx[[1,0,0,0],[0,1,0,0],[0,1,
系统 2019-09-27 17:49:14 1919
*args和**kwargs*args代表位置参数，它会接收任意多个参数并把这些参数作为元组传递给函数。**kwargs代表的关键字参数，允许你使用没有事先定义的参数名，另外，位置参数一定要放在关键字参数的前面。__new__和__init__的区别创建一个新实例时调用__new__,初始化一个实例时用__init__,这是它们最本质的区别。new方法会返回所构造的对象，init则不会.new函数必须以cls作为第一个参数，而init则以self作为其第一
系统 2019-09-27 17:48:29 1919
第一篇基本概念01什么是数据结构02什么是算法03应用实例-最大子列和问题第二篇线性结构01线性表及其实现02堆栈03队列04应用实例-多项式加法运算05小白专场-多项式乘法与加法运算-c语言实现05小白专场-多项式乘法与加法运算-python语言实现第三篇树（上）01树与树的表示02二叉树及存储结构03二叉树的遍历04小白专场-树的同构-c语言实现04小白专场-树的同构-python语言实现第三篇树（中）01二叉搜索树02平衡二叉树03小白专场-是否同一
系统 2019-09-27 17:48:29 1919
看过这篇《2000字谏言，给那些想学Python的人，建议收藏后细看！》的读者应该都对一个命令有点印象吧？没错，就是linux中经常会用到的ls命令。文章中我就提到如何提升自己的python能力呢？直接找项目写，但是作为零基础/小白/入门的你来说做一个博客还要学web框架、html、css、js，又成为了阻碍你写实际项目的阻碍。所以我就推荐了这个命令：ls。写一个ls非常简单，你只需要会一点linux的基础知识，知道ls能做什么就好了。那今天就给大家码了一
系统 2019-09-27 17:48:24 1919
Python中除法那些坑最近刷了一个cf题目，被python中的出发机制坑的不要不要的。这是链接:Chunga-Changapython中//和/的区别与使用a//b会获取值的整数部分，小数部分会丢失a/b会返回完整的值举个栗子：5//2=25/2=2.5那么问题来了?int(a/b)和a//b的区别在哪里呢？例1：int(7/3)=27//3=2既然如此讨论它们意义在上面地方呢？看看例二例二:int(999999999999999997/5)=20000
系统 2019-09-27 17:48:09 1919
