Spark编程环境Spark可以独立安装使用，也可以和Hadoop一起安装使用。在安装Spark之前，首先确保你的电脑上已经安装了Java8或者更高的版本。Spark安装访问Spark下载页面，并选择最新版本的Spark直接下载，当前的最新版本是2.4.2。下载好之后需要解压缩到安装文件夹中，看自己的喜好，我们是安装到了/opt目录下。tar-xzfspark-2.4.2-bin-hadoop2.7.tgzmvspark-2.4.2-bin-hadoop2
系统 2019-09-27 17:52:49 1841
简单使用最开始，我们用最短的代码体验一下logging的基本功能。importlogginglogger=logging.getLogger()logging.basicConfig()logger.setLevel('DEBUG')logger.debug('logsomething')#输出out>>DEBG:root:logsomething第一步，通过logging.getLogger函数，获取一个loger对象，但这个对象暂时是无法使用的。第二步
系统 2019-09-27 17:52:26 1841
本文主要是记录ubuntu16.04下python环境配置，具体内容如下对于ubuntu16.04，由于本身是自带python，这样就减少了在windows下的下载和环境变量配置，非常不错。但是他本身是自带两个版本的python，2.X和3.X,两个版本，两个版本默认的是使用2.X，毕竟3.X是一个趋势，今后我这边应该也会主要使用3.X版本，所以这里记录一下如果在版本间切换以及如何把python版本切换到3.X下的方法。一、确认本机下的python默认版本
系统 2019-09-27 17:51:01 1841
Python项目中很多时候会需要将时间在Datetime格式和TimeStamp格式之间转化，又或者你需要将UTC时间转化为本地时间，本文总结了这几个时间之间转化的函数，供大家参考。一、Datetime转化为TimeStampdefdatetime2timestamp(dt,convert_to_utc=False):'''ConvertsadatetimeobjecttoUNIXtimestampinmilliseconds.'''ifisinstanc
系统 2019-09-27 17:50:37 1841
首先安装对应的python模块$pipinstallpyecharts==0.5.10$pipinstallecharts-countries-pypkg$pipinstallecharts-china-provinces-pypkg$pipinstallecharts-china-cities-pypkg$pipinstallecharts-china-counties-pypkg世界地图frompyechartsimportMapvalue=[95.1
系统 2019-09-27 17:49:52 1841
原始数据原始数据大致是这样子的：每条数据中的四个数据分别是当前节点名称，节点描述（指代一些需要的节点属性),源节点（即最顶层节点），父节点（当前节点上一层节点）。datas=[["root","根节点","root",None],["node1","一级节点1","root","root"],["node2","一级节点2","root","root"],["node11","二级节点11","root","node1"],["node12","二级节点1
系统 2019-09-27 17:49:50 1841
通常，大多数应用程序通过保持HTML简单来解决大多数浏览器问题�D或者说，根据最低共同特性来编写。然而，即便如此，也仍然存在字体和布局的问题，发行新浏览器和升级现有浏览器时，也免不了测试应用程序的痛苦。替代方案�D只支持一种浏览器�D通常不是一种用户友好的解决方案。明显的解决方案是在应用程序中嵌入自己的表现HTML的窗口构件。当然，从头开始编写这样的窗口构件工作量很大，因此，求助于预先封装的解决方案好象是合理的。商界有许多选择及几个开放源码软件包。本文将向
系统 2019-09-27 17:49:37 1841
自我学习记录：如有问题，请帮助指正，勿喷。条件判断：用if语句来实现，而且if语句还捆绑了一个else来做判断，字面意思就是例外情况。#比如，输入身高，根据不同的内容，用if语句来实现。#很抱歉我在终端python环境下，没有找到怎么输入判断语句。#所以用的pycharm软件里面查看到的结果。#代码：height=float(input('请告诉我你的身高(单位M)\n'))ifheight>0:#if语句后面一定要跟冒号':'不然会报错的print('你
系统 2019-09-27 17:48:27 1841
1.pyqt4写的界面find_ui.py#-*-coding:utf-8-*-fromPyQt4importQtCore,QtGuitry:_fromUtf8=QtCore.QString.fromUtf8exceptAttributeError:def_fromUtf8(s):returnstry:_encoding=QtGui.QApplication.UnicodeUTF8def_translate(context,text,disambig):r
系统 2019-09-27 17:48:21 1841
因为最近接触到调用新浪微博开放接口的项目，所以就想试试用python调用微博API。SDK下载地址：http://open.weibo.com/wiki/SDK代码不多十几K，完全可以看懂。有微博账号可以新建一个APP，然后就可以得到appkey和appsecret，这个是APP获得OAuth2.0授权所必须的。了解OAuth2可以查看链接新浪微博的说明。OAuth2授权参数除了需要appkey和appsecret还需要网站回调地址redirect_uri
系统 2019-09-27 17:47:08 1841
