前言PySpark一直使用的是Linux默认的Python2.7.5版本，感觉超级不爽，于是想升个级，可怎么升啊？于是又开始了万年的Google操作步骤安装Python3.X参考配置全局变量sudovim/etc/profileexportPATH=/usr/bin/python3:$PATHsource/etc/profile打开CDHWeb配置spark-env.sh文件如下：即添加：exportPYSPARK_PYTHON=/usr/bin/pyth
系统 2019-09-27 17:56:03 1939
打算升级pycurl库，输入：pipinstall--upgradepycurl，提示如下：Lookinginindexes:https://pypi.tuna.tsinghua.edu.cn/simple/CollectingpycurlDownloadinghttps://pypi.tuna.tsinghua.edu.cn/packages/ac/b3/0f3979633b7890bab6098d84c84467030b807a1e2b31f5d301
系统 2019-09-27 17:55:33 1939
珠玉在前：https://code.visualstudio.com/docs/languages/pythonhttps://blog.csdn.net/m0_37192554/article/details/83714975http://www.cppcns.com/jiaoben/python/151875.html关于常规插件https://code.visualstudio.com/docs/languages/pythonOtherpopula
系统 2019-09-27 17:54:53 1939
不希望跨版本升级，只希望小版本升级可以用下面的方法sudoadd-apt-repositoryppa:jonathonf/python-3.5sudoapt-getupdatesudoapt-getinstallpython3.5python-V
系统 2019-09-27 17:54:29 1939
参考链接:1.在类内部获取类名和方法名代码:importsysclasstestsqawd(object):defhello(self):print('thenameofmethodis##{}##'.format(sys._getframe().f_code.co_name))print('thenameofclassis##{}##'.format(self.__class__.__name__))if__name__=='__main__':ttt=
系统 2019-09-27 17:54:00 1939
1.序列在Python中最基础的数据结构是序列，数据结构可以理解为具有某种功能的特殊数据类型，序列中每个元素都有编号，表示其位置或者索引，其中第一个元素的索引值为0，其意义是指出某个元素相对于序列开题的偏移量。1.1序列序列是python中的一种数据结构，和C语言中的数组比较类似，只是在Python中序列存储的数据不限类别，也不需要所有的序列元素都是同一种类别。最常用的序列是：列表和元组。列表和元组的主要区别在于列表可以修改而元组不可修改。当需要一系列的值
系统 2019-09-27 17:53:07 1939
文章目录pipvirtualenv缺点Pipenv总结学Python有段时间了，学的时候会想着拿它和Java对比。在对比的时候，发现Java有很成熟的项目构建工具，有使用xml的Maven，也有使用groovy的Gradle，这样的构建工具能够自动处理项目的依赖，很是方便。对于Python，在依赖管理方面，从一个初学者的角度看，嗯，只能说，贵圈真乱！(本文纯属个人观点，不喜勿喷)好吧，让我们捋一捋。在包管理方面，听说现在在役的包管理工具有distutils
系统 2019-09-27 17:52:49 1939
With语句是什么？有一些任务，可能事先需要设置，事后做清理工作。对于这种场景，Python的with语句提供了一种非常方便的处理方式。一个很好的例子是文件处理，你需要获取一个文件句柄，从文件中读取数据，然后关闭文件句柄。如果不用with语句，代码如下：复制代码代码如下:file=open("/tmp/foo.txt")data=file.read()file.close()这里有两个问题。一是可能忘记关闭文件句柄；二是文件读取数据发生异常，没有进行任何处
系统 2019-09-27 17:52:35 1939
一、分析：抓取动态页面js加载的人民日报里面的新闻详情https://wap.peopleapp.com/news/1先打开，然后查看网页源码，发现是一堆js，并没有具体的每个新闻的url详情，于是第一反应，肯定是js动态加载拼接的url。然后接着按f12查看，就看url，发现出来了好多url。然后点击具体的某一个新闻详情页面，查看url，把这个url的后面两个数字其中一个拿到访问主页的时候，f12抓包结果里面去查找，发现一个url，点击这个url，发现p
系统 2019-09-27 17:52:31 1939
在程序开发时候一套好的开发环境和工具栈，可以帮我们极大的提高开发的效率，避免把大量时间浪费在周边琐事上。本文以Python的为例，教大家如何快速打造优秀的Python的项目开发环境：内容涵盖了模块依赖管理，代码风格管理，调试测试管理和Git版本管理，使用githook做项目规范检查等。pipxPipx是一款跨平台的Python环境隔离管理工具，可以在支持在Linux，MacOS和Windows上运行.Pipx默认在是个人用户下建立虚拟Python环境，并以
系统 2019-09-27 17:51:53 1939
