Python

python爬取全国2000多个城市的经纬度及geohash编码

如何爬取全国两千多个城市的经纬度?其实找对了数据源就一点也不难。哪些网站可能会有全国所有城市的经纬度呢?高德地图?百度地图?统计局?淘宝?……这次我们来试试通过饿了么爬取:importrequests,csv,Geohashurl='https://www.ele.me/restapi/shopping/v1/cities'headers={'referer':'https://www.ele.me/home/','user-agent':'user-ag

系统 2019-09-27 17:48:42 2683

Python

解决Python中pandas读取*.csv文件出现编码问题

1、问题在使用Python中pandas读取csv文件时,由于文件编码格式出现以下问题:Traceback(mostrecentcalllast):File"pandas\_libs\parsers.pyx",line1134,inpandas._libs.parsers.TextReader._convert_tokensFile"pandas\_libs\parsers.pyx",line1240,inpandas._libs.parsers.Text

系统 2019-09-27 17:53:52 2682

Python

Python open()文件处理使用介绍

1.open()语法open(file[,mode[,buffering[,encoding[,errors[,newline[,closefd=True]]]]]])open函数有很多的参数,常用的是file,mode和encodingfile文件位置,需要加引号mode文件打开模式,见下面3buffering的可取值有0,1,>1三个,0代表buffer关闭(只适用于二进制模式),1代表linebuffer(只适用于文本模式),>1表示初始化的buff

系统 2019-09-27 17:53:40 2682

Python

那么多人自学Python的后来都放弃了,总结起来就这些原因

目前信息化产业发展势头很好,IT就成为了很多普通人想要涉及的行业,因为相比于传统行业,IT行业涨薪幅度大,机会也多,所以就会大批的人想要转行来学习Python开发。市场上需要的Python人员非常多,而且按照现在的势头,以后会需要更多的Python开发人员,理由是以后每个人公司都会有自己的网站,有自己的开发部,对于用户体验看的非常重要。所以Python程序员就会很吃香。随时时间的推移,企业对于Python开发者的要求也在不断提高,互联网公司注重效率,所以不

系统 2019-09-27 17:52:17 2682

Python

Python中Numpy mat的使用详解

前面介绍过用dnarray来模拟,但mat更符合矩阵,这里的mat与Matlab中的很相似。(mat与matrix等同)基本操作>>>m=np.mat([1,2,3])#创建矩阵>>>mmatrix([[1,2,3]])>>>m[0]#取一行matrix([[1,2,3]])>>>m[0,1]#第一行,第2个数据2>>>m[0][1]#注意不能像数组那样取值了Traceback(mostrecentcalllast):File"",line1,inFile

系统 2019-09-27 17:50:48 2681

Python

Python 通过打码平台实现验证码的实现

在爬虫时,经常遇到登录需要验证码的情况,简单的验证码可以自己解决,复制的验证码需要借助机器学习,有一定的难度。还有一个简单的方案就是采用付费的打码平台。比如R若快(http://www.ruokuai.com/client),还有云打码平台(http://www.yundama.com/price.html)下面以R若快为例介绍打码平台的思路:R若快平台需要注册两个用户,一个是普通用户,一个开发者用户,1、首先验证码截图,就是截取网站上登录页面的验证码图片

系统 2019-09-27 17:56:53 2680

Python

python读取指定目录下Excel表所有sheet的数据

最近想尝试着做一个接口自动化的脚本,首先得需要从文件中读取数据,很早之前更新过一篇,但是局限性较大,一次性只能读取一个Excel的一张sheet表,且读取出的格式也无法满足要求,找了好多方法,终于研究出来啦。也遇到了很多坑,因为自学python,没有系统的学习过,基础知识也不扎实,且平时工作也没有用到,过段时间就需要从头学起=_=,所以遇到的坑都是基础知识没掌握到的原因啦。记录一下吧,方便以后复习或知识回顾。现在是坑:defgetTables():fore

系统 2019-09-27 17:55:20 2680

Python

Python如何调用JS文件中的函数

Python调用JS文件中的函数方法如下1、安装PyExecJS第三方库2、导入库:importexecjs3、调用JS文件中的方法Passwd=execjs.compile(open(r"web.js").read().decode("utf-8")).call('loginHandle','steam')语句解析,open后跟所执行的js文件位置,call后第一个单引号引起来的为所执行的js文件的某个function,第二个单引号是前面函数的参数这里为

系统 2019-09-27 17:54:54 2679

Python

Python实现平行坐标图的两种方法小结

平行坐标图,一种数据可视化的方式。以多个垂直平行的坐标轴表示多个维度,以维度上的刻度表示在该属性上对应值,相连而得的一个折线表示一个样本,以不同颜色区分类别。但是很可惜,才疏学浅,没办法在Python里实现不同颜色来区分不同的类别。如果对此比较在意的大神可以不要往下看了。。。。。。。。。上图是一个基于iris数据集所画的一个平行坐标图。隔开隔开.......................................隔开隔开不多扯了,下面正式上代码方法

系统 2019-09-27 17:48:19 2679

Python

Python自定义类的数组排序实现代码

首先把实现方法写出来,其实很简单,只需要一句代码即可:复制代码代码如下:productlist.sort(lambdap1,p2:cmp(p1.getPrice(),p2.getPrice()))数组productlist中存储的是自定义类Product,Product有一个方法是返回商品的价格,于是对productlist按照Product的价格从低到高进行排序,仅需要如此简单的一行代码即可实现。Python真的是一门简洁而强大的语言,实际上,我也是从写

系统 2019-09-27 17:38:08 2679

Python

Python matplotlib生成图片背景透明的示例代码

使用matplotlib生成图片,想要背景透明,而且图例部分也显示透明效果,找到了大概的设置方法,特此记录。#coding=utf-8#matplotlib背景透明示例图#python3.5importnumpyasnpimportmatplotlib.pyplotaspltfrompylabimportmplimportscipy.statsasstats#设置中文字体mpl.rcParams['font.sans-serif']=['SimHei']d

系统 2019-09-27 17:56:28 2678

Python

vim 中自动生成 python 函数注释文档 - 基于

Pydocstring-Python文档字符串的生成器能够自动生成函数文档注释、类文档注释,包含以下功能。插入一行文档字符串插入多行文档字符串插入评论这个插件深受phpdoc.vim和sonictemplate.vim的启发。原仓库地址:https://github.com/heavenshell/vim-pydocstring效果图:https://github.com/heavenshell/vim-pydocstring/blob/master/as

系统 2019-09-27 17:51:39 2678

Python

【Python】Python中的时间处理

一.datetimePython中处理时间最重要的一个Module就是datetime引用:importdatetime常用的类:datetime.date:代表日期(year,month,day)datetime.time:代表一天内时间(hour,minute,second,microsecond)datetime.datetime:代表完整的时间,也就是上面说的date+time(year,month,day,hour,minute,second,m

系统 2019-09-27 17:46:39 2678

Python

Python 列表排序方法reverse、sort、sorted详解

python语言中的列表排序方法有三个:reverse反转/倒序排序、sort正序排序、sorted可以获取排序后的列表。在更高级列表排序中,后两中方法还可以加入条件参数进行排序。reverse()方法将列表中元素反转排序,比如下面这样>>>x=[1,5,2,3,4]>>>x.reverse()>>>x[4,3,2,5,1]reverse列表反转排序:是把原列表中的元素顺序从左至右的重新存放,而不会对列表中的参数进行排序整理。如果需要对列表中的参数进行整理

系统 2019-09-27 17:38:35 2678

Python

python项目对接钉钉SDK的实现

钉钉SDK对接sdk还是遇到不少问题的钉钉python版SDK文档地址:https://dingtalk-sdk.readthedocs.io/zh_CN/latest/钉钉官方服务端文档:https://open-doc.dingtalk.com/microapp/serverapi2为了避免调试出现不必要的参数错误,前期钉钉配置要做好,血和泪的教训准备好下面几个参数DINGTALK_CORP_ID="重点:企业应用ID"#钉钉微应用DINGTALK_A

系统 2019-09-27 17:52:04 2677