拥有Python标签的文章
Python

[Python]网络爬虫(四):Opener与Handler的介

在开始后面的内容之前,先来解释一下urllib2中的两个个方法:infoandgeturlurlopen返回的应答对象response(或者HTTPError实例)有两个很有用的方法info()和geturl()1.geturl():这个返回获取的真实的URL,这个很有用,因为urlopen(或者opener对象使用的)或许会有重定向。获取的URL或许跟请求URL不同。以人人中的一个超级链接为例,我们建一个urllib2_test10.py来比较一下原始U

系统 2019-08-29 23:21:08 2282

Python

CDH修改PySpark默认的Python版本

前言PySpark一直使用的是Linux默认的Python2.7.5版本,感觉超级不爽,于是想升个级,可怎么升啊?于是又开始了万年的Google操作步骤安装Python3.X参考配置全局变量sudovim/etc/profileexportPATH=/usr/bin/python3:$PATHsource/etc/profile打开CDHWeb配置spark-env.sh文件如下:即添加:exportPYSPARK_PYTHON=/usr/bin/pyth

系统 2019-09-27 17:56:03 2281

Python

【跟着Head First学Python】2、列表数据:处理有序数据

python自带了四种数据结构:列表、字典、元组、集合,本章主要介绍第一种:列表。列表:有序的、可变的对象集合动态的:长度可以随时变化异构的:数字与字符串等不同类型的变量可以存在一个列表里元组:有序的、不可变的对象集合简单来说就是一个常量列表。字典:无序的键值对集合就类似C++里面的map。注意字典增加元素的插入顺序没有任何意义。在一个字典中,键的值是唯一的。集合:无序的、唯一对象的集合类似C++中的set。但是是没有顺序的。1、in操作符使用in操作符来

系统 2019-09-27 17:55:09 2281

Python

Python中的闭包详细介绍和实例

一、闭包来自wiki:闭包(Closure)是词法闭包(LexicalClosure)的简称,是引用了自由变量的函数。这个被引用的自由变量将和这个函数一同存在,即使已经离开了创造它的环境也不例外。所以,有另一种说法认为闭包是由函数和与其相关的引用环境组合而成的实体。在一些语言中,在函数中定义另一个函数时,如果内部的函数引用了外部的函数的变量,则可能产生闭包。运行时,一旦外部的函数被执行,一个闭包就形成了,闭包中包含了内部函数的代码,以及所需外部函数中的变量

系统 2019-09-27 17:54:10 2281

Python

Python Web框架Flask信号机制(signals)介绍

信号(signals)Flask信号(signals,oreventhooking)允许特定的发送端通知订阅者发生了什么(既然知道发生了什么,那我们可以知道接下来该做什么了)。Flask提供了一些信号(核心信号)且其它的扩展提供更多的信号。信号是用于通知订阅者,而不应该鼓励订阅者修改数据。相关信号请查阅文档。信号依赖于Blinker库。钩子(hooks)Flask钩子(通常出现在蓝图或应用程序现存的方法中,比如一些内置装饰器,例如before_reques

系统 2019-09-27 17:53:22 2281

Python

win8.1安装Python 2.7版环境图文详解

Python相信大家都有所耳闻,特别是Python进入山东省小学教材,还列入全国计算机等级考试。打算爬网易云音乐评论的我,首先要安装一个Python环境。目前Python有2.x版和3.x版,在进行比较后,我选择了2.7版本。首先,仍然是百度搜索Python关键词,进入官网。首页即可快速下载最新版本。我要安装的是2.7版本,所以选择导航条上的Downloads。点击Downloads后我们发现这里有多个版本,我们可以点击选择我们需要下载的版本。点击版本后,

系统 2019-09-27 17:52:13 2281

Python

儿童编程python入门

经常会有小朋友问我,“我想做个黑客,我该学什么编程语言?”,或者有的小朋友会说:“我要学c,我要做病毒”。其实对于这些小朋友而言他们基本都没有接触过编程语言,只是通过影视或者其他地方看到的一些东西认为黑客很酷,超级厉害,因此也萌生了这样的想法。我也认为黑客很厉害,他们不只是会一门编程语言那么简单,要想成为他们那样厉害的人对小朋友来说还有很长的路要走。而很多小朋友真正想做的就是能通过简单的代码做出很酷炫的东西,能在同学间炫耀一把,那就很满足了。如果你真的想学

系统 2019-09-27 17:51:14 2281

Python

Python基础之函数、方法

函数是组织好的,可重复使用的,用来实现单一,或相关联功能的代码段。定义一个函数:def函数名(参数列表):函数体#定义一个没有参数,没有函数体实现的函数;pass相当于占位符,使定义函数满足语法要求,或者是先定义一个函数名,后面再实现其功能deffunc():pass#定义一个add函数,参数为a,b,返回a+b的结果:defadd(a,b):returna+bprint(add(1,2))3return函数最终返回的内容,如果没有写return,则默认返

系统 2019-09-27 17:50:30 2281

Python

Python 数据类型转换

Python数据类型转换有时候,我们需要对数据内置的内心进行转换,数据类型的转换,你只需要将数据类型作为函数名即可。以下几个内置的函数可以执行数据类型之间的转换,这些函数返回一个新的对象,表示转换的值。函数描述int(x[,base])将x转换为一个整数float(x)将x转换到一个浮点数complex(real[,imag])创建一个复数str(x)将对象x转换位字符串repr(x)将对象x转换位表达式字符串eval(str)用来计算在字符串中的有效Py

系统 2019-09-27 17:50:09 2281

Python

Python代码的打包与发布详解

在python程序中,一个.py文件被当作一个模块,在各个模块中定义了不同的函数。当我们要使用某一个模块中的某一个函数时,首先须将这个模块导入,否则就会出现函数未定义的情况.下面记录的是打包及安装包的方法。本文示例是建立一个模拟登录的程序:logIn.py文件代码如下:pwd=int(raw_input('pleaseinputyourpassward:'))ifpwd==123:print'success'else:print'error'一、打包1.先

系统 2019-09-27 17:47:07 2281

Python

Python collections模块使用方法详解

一、collections模块1.函数namedtuple(1)作用:tuple类型,是一个可命名的tuple(2)格式:collections(列表名称,列表)(3)​返回值:一个含有列表的类(4)例子​:importcollections#help(collections.namedtuple)Point=collections.namedtuple("Point",['x','y'])p=Point(15,45)print(p.x+p.y)print

系统 2019-09-27 17:45:52 2281

Python

bpython 功能强大的Python shell

Python是一个非常实用、流行的解释型编程语言,其优势之一就是可以借助其交互的shell进行探索式地编程。你可以试着输入一些代码,然后马上获得解释器的反馈,而不必专门写一个脚本。但是Python自带的shell也有一些局限性,例如无法自动补全、不能高亮语法等。好在强大的Python对默认shell进行了扩展,开发了许多漂亮的Pythonshell。每一个都提供了一个极好的交互性的Python体验。今天我就为大家介绍其中较为优秀的一款―bpython。bp

系统 2019-09-27 17:38:14 2281

Python

为什么大家都学习Python?怎么去学好它?

你想过你为什么会走上学习Python这条路么?很多码农在决定学习Python的时候,大多数都没有想清楚怎么去学习这门语言,怎么学好它?这么些年,六星教育见过形形色色的学习Python的人的理由,其中不乏随大众、选个大家都学的语言等理由,这类人群有个鲜明的特点,就是一时热度高,坚持不了几天的学习便会找各种借口不上课。这是因为没有给自己定位清楚的原因。因为盲目随大众,在学习这门语言前,没有做一个基本的学习了解,所以当开始学习时,不适感会比其他有定位的同学强烈很

系统 2019-09-27 17:56:39 2280

Python

Python中正则表达式详解

基础篇正则表达式在python中运用的非常多,因为他可以进行任意的匹配,可以匹配我们想要提取的信息。当我们接触正则的时候你就会知道正则的强大。正则有一个库re在一些工程中我们会经常调用正则的库来做与匹配相关的问题。字符串是编程时涉及到的最多的一种数据结构,对字符串进行操作的需求几乎无处不在。比如判断一个字符串是否是合法的Email地址,虽然可以编程提取@前后的子串,再分别判断是否是单词和域名,但这样做不但麻烦,而且代码难以复用。正则表达式是一种用来匹配字符

系统 2019-09-27 17:55:32 2280

Python

基于python进行抽样分布描述及实践详解

本次选取泰坦尼克号的数据,利用python进行抽样分布描述及实践。备注:数据集的原始数据是泰坦尼克号的数据,本次截取了其中的一部分数据进行学习。Age:年龄,指登船者的年龄。Fare:价格,指船票价格。Embark:登船的港口。1、按照港口分类,使用python求出各类港口数据年龄、车票价格的统计量(均值、方差、标准差、变异系数等)。importpandasaspddf=pd.read_excel('/Users/Downloads/data.xlsx',

系统 2019-09-27 17:54:38 2280