通常在使用Spark算子函数，比如使用map()或者reduce函数我们向函数传入条件时，函数内部可以使用驱动程序中定义的变量，但是这样会使集群中所有任务都会得到变量新的副本，这些副本的更新不会传播回驱动程序，导致读写共享变量效率低下或者内存溢出，为了解决这个问题Spark提供了两种共享变量类型：广播变量和累加器广播变量：用来高效分发较大对象，只能在Driver定义，不能在Executor端定义，同时RDD不存储数据所以不能广播出去累加器：用来对信息进行聚
系统 2019-09-27 17:52:33 2122
分类题目解题思路Python实现题目给定一个非空字符串s和一个包含非空单词列表的字典wordDict，判定s是否可以被空格拆分为一个或多个在字典中出现的单词，地址。说明：拆分时可以重复使用字典中的单词。你可以假设字典中没有重复的单词。示例1输入:s="leetcode",wordDict=["leet","code"]输出:true解释:返回true因为"leetcode"可以被拆分成"leetcode"。示例2输入:s="catsandog",wordD
系统 2019-09-27 17:50:35 2122
前两天刚装了python3.1.1,禁不住技痒写点code。1.选择排序复制代码代码如下:>>>defSelSort(L):length=len(L)foriinrange(length-1):minIdx=iminVal=L[i]j=i+1whilejifminVal>L[j]:minIdx=jminVal=L[j]j=j+1L[i],L[minIdx]=L[minIdx],L[i]returnL2.冒泡排序复制代码代码如下:>>>defbubSort(
系统 2019-09-27 17:50:22 2122
NumPy提供了多种存取数组内容的文件操作函数。保存数组数据的文件可以是二进制格式或者文本格式。二进制格式的文件又分为NumPy专用的格式化二进制类型和无格式类型。一，tofile()和fromfile()tofile()将数组中的数据以二进制格式写进文件tofile()输出的数据不保存数组形状和元素类型等信息fromfile()函数读回数据时需要用户指定元素类型，并对数组的形状进行适当的修改从上面的例子可以看出，在读入数据时:需要正确设置dtype参数，
系统 2019-09-27 17:49:58 2122
如何用PYTHON制作填词游戏新建一个PYTHON文档。用JUPYTERNOTEBOOK打开即可。print("Heartis"+color)print(noun+"arered")print("Ilike"+food)我们首先确定一下填词的大概方向。color=input("Pleaseenteracolor:")noun=input("Pleaseenteranoun:")food=input("Pleaseenterafood:")print("He
系统 2019-09-27 17:49:27 2122
使用Python解释器1.1Python安装从源码编译安装python./configuremakemaketestsudomakeinstall默认python解释器安装在/usr/local/bin/python3.8,可以将/usr/local/bin放到path搜索路径中。在windows系统上，python一般安装在C:\Python38，在windows命令行中，执行命令setpath=%path%;C:\python38将该路径添加到path
系统 2019-09-27 17:49:19 2122
今天发现了一个好玩的小项目，做的就是坦克大战的，看到它的一瞬间让我想起了小时候泡在4399网站里面的时光了，我果断下载下来跑了起来，做的还是可以的，这里的可以就是说视觉效果上的可以，至于具体内容细节什么还是有一些bug的，比如我自己摧毁“老窝”的时候居然没有游戏结束，等等。既然项目别人已经做好了，我就不多做什么工作了，想着运行py脚本多麻烦，能够把游戏打包成为exe文件就好了，想到这里就开始着手进行游戏的打包工作，这里主要使用的是pyinstaller模块
系统 2019-09-27 17:47:08 2122
========坚持30天刷leetcode=====题目链接：https://leetcode-cn.com/problems/next-permutation/结果：分析：思路是：1）从后往前找不符合降序（大->小，可以相等）的第一个元素a，2）然后从a的下一个元素开始往后找，找到最后一个大于a的元素b，3）交换a,b的位置，4）再将原先a位置后的所有元素，进行升序排序5）特殊情况①：数组全为降序，逆转数组；特殊情况②：找到a后，a比数组最后一个元素c
系统 2019-09-27 17:46:33 2122
Python自1.5版本起增加了re模块，它提供Perl风格的正则表达式模式。Python1.5之前版本则是通过regex模块提供Emacs风格的模式。Emacs风格模式可读性稍差些，而且功能也不强，因此编写新代码时尽量不要再使用regex模块，当然偶尔你还是可能在老代码里发现其踪影。1.正则表达式基础1.1.简单介绍正则表达式并不是Python的一部分。正则表达式是用于处理字符串的强大工具，拥有自己独特的语法以及一个独立的处理引擎，效率上可能不如str自
系统 2019-09-27 17:45:50 2122
1.爬取豆瓣top250书籍importrequestsimportjsonimportcsvfrombs4importBeautifulSoupbooks=[]defbook_name(url):res=requests.get(url)html=res.textsoup=BeautifulSoup(html,'html.parser')items=soup.find(class_="grid-16-8clearfix").find(class_="in
系统 2019-09-27 17:45:26 2122
