在学习转换之前先了解以下它们的基本概念RDD：弹性分布式数据集，是一个只读分区集合DataFrame：以命名列方式组织的分布式数据集，概念上和关系型数据库的一张表一样DataSet：分布式数据集合，Python暂时不支持了解了基本的概念之后，接下来我们通过代码编写三种数据集的形成RDD的形成frompyspark.sqlimportSparkSessionif__name__=='__main__':spark=SparkSession\.builder\
系统 2019-09-27 17:52:31 2107
最近学习了python基础，写一下3大排序练练手：复制代码代码如下:'''Createdon2013-8-23@author:codegeek'''//冒泡排序defbubble_sort(seq):foriinrange(len(seq)):forjinrange(i,len(seq)):ifseq[j]
系统 2019-09-27 17:52:28 2107
1.常用模块#连接数据库connect()函数创建一个新的数据库连接对话并返回一个新的连接实例对象PG_CONF_123={'user':'emma','port':123,'host':'192.168.1.123','password':'emma','database':'dbname'}conn=psycopg2.connect(**PG_CONF_123)#打开一个操作整个数据库的光标连接对象可以创建光标用来执行SQL语句cur=conn.cur
系统 2019-09-27 17:52:21 2107
MongoDB是目前最流行的NoSQL数据库之一，使用的数据类型BSON（类似JSON）。1.安装Mongodb和pymongoMongodb的安装和配置Mongodb的安装教程请网上搜索,安装完成后,进行以下配置过程:1.1创建目录,该目录为Mongodb数据文件的存放目录:*注:本人使用的不是root用户,所以修改目录的拥有者.*sudomkdir/datasudochown-Rpython:python/datamkdir/data/db1.2分别执
系统 2019-09-27 17:52:16 2107
全民学python的热潮已经开启，然而，对于这种情况，还是有很多小伙伴私信我python到底该怎么入门？没接触过编程能学会吗？现在网上学习资料一搜一大把，正因为资料多了导致我们不知道如何是好！一个朋友问我：有个朋友要学习python，她属于那种特别能啃书的，让我推荐。我学python都是无师自通的，没有看过什么书，因此无法给她推荐，问我有什么意见？他那个朋友是零基础的，ctrl+c、ctrl+v用的贼溜。除此之外，计算机算是零基础了。对此我就感觉有点头疼了
系统 2019-09-27 17:51:19 2107
Python这门解释性语言也有专门的线程模型，Python虚拟机使用GIL（GlobalInterpreterLock，全局解释器锁）来互斥线程对共享资源的访问，但暂时无法利用多处理器的优势。在Python中我们主要是通过thread和threading这两个模块来实现的，其中Python的threading模块是对thread做了一些包装的，可以更加方便的被使用，所以我们使用threading模块实现多线程编程。这篇文章我们主要来看看Python对多线程
系统 2019-09-27 17:51:00 2107
到底什么是Python?•Python是一种解释性语言。Python代码在运行之前不需要编译。其它解释性语言还包括PHP和Ruby。•Python是动态类型语言，指的是在声明变量时，不需要说明变量的类型。•Python非常适合面向对象的编程(OOP)，因为它支持通过组合(composition)与继承(inheritance)的方式定义类(class)。•Python中没有访问说明符(类似C++中的public和private)，这么设计的依据是“大家都是
系统 2019-09-27 17:50:35 2107
记录三种添加cookie保持接口登录状态的方法，方便自己回顾。1.简单粗暴式。此方法比较小白，前提是已经通过fiddler抓包等方式拿到了cookie，然后直接塞进去。importrequeststrainsUrl='http://XXX.com/trains'headers={"Content-Type":"application/json;charset=UTF-8",}cookies={"XXXthor":"XXXXXX105a42"}prames=
系统 2019-09-27 17:49:54 2107
描述exp()方法返回x的指数,ex。语法以下是exp()方法的语法:importmathmath.exp(x)注意：exp()是不能直接访问的，需要导入math模块，通过静态对象调用该方法。参数x--数值表达式。返回值返回x的指数,ex。实例以下展示了使用exp()方法的实例：#!/usr/bin/python3importmath#导入math模块print("math.exp(-45.17):",math.exp(-45.17))print("mat
系统 2019-09-27 17:49:51 2107
推荐系统的相关知识我们已在前文中提到，在这篇文章中，我们会介绍如何用Python来搭建一个简单的推荐系统。本文使用的数据集是MovieLens数据集，该数据集由明尼苏达大学的Grouplens研究小组整理。它包含1,10和2亿个评级。Movielens还有一个网站，我们可以注册，撰写评论并获得电影推荐。接下来我们就开始实战演练。在这篇文章中，我们会使用Movielens构建一个基于item的简易的推荐系统。在开始前，第一件事就是导入pandas和numPy
系统 2019-09-27 17:49:46 2107
