Python - 军军小站|张军博客
Python

Python Pandas 如何shuffle(打乱)数据

在Python里面,使用Pandas里面的DataFrame来存放数据的时候想要把数据集进行shuffle会许多的方法,本文介绍两种比较常用而且简单的方法。应用情景:我们有下面以个DataFrame我们可以看到BuyInter的数值是按照0,-1,-1,2,2,2,3,3,3,3这样排列的,我们希望不保持这个次序,但是同时列属性又不能改变,即如下效果:实现方法:最简单的方法就是采用pandas中自带的sample这个方法。假设df是这个DataFramed

系统 2019-09-27 17:53:55 2281

Python

关于阿里云oss获取sts凭证 app直传 python的实例

首先安装需要的模块pipinstallaliyun-python-sdk-corepipinstallaliyun-python-sdk-sts获取需要的5个参数getsts.pyfromaliyunsdkcoreimportclientfromaliyunsdkcore.profileimportregion_providerfromaliyunsdksts.request.v20150401importAssumeRoleRequestimportjs

系统 2019-09-27 17:52:26 2280

Python

Python库Pandas《Pandas Cookbook》第05章 BOOL

这是书籍《PandasCookbook》书籍第05章的代码复现,所有代码运行在JupyterNotebook上,原讲解地址是:https://www.jianshu.com/p/d67080f59b06我上传代码的github地址是:https://github.com/Asunqingwen/PandasCookbook.gitgithub上有该书中用到的data,里面代码会不定期更新(因为工作原因,时间不定),直到本书学习完成!相比原讲解,会穿插一些自

系统 2019-09-27 17:52:02 2280

Python

vim 中自动生成 python 函数注释文档 - 基于

Pydocstring-Python文档字符串的生成器能够自动生成函数文档注释、类文档注释,包含以下功能。插入一行文档字符串插入多行文档字符串插入评论这个插件深受phpdoc.vim和sonictemplate.vim的启发。原仓库地址:https://github.com/heavenshell/vim-pydocstring效果图:https://github.com/heavenshell/vim-pydocstring/blob/master/as

系统 2019-09-27 17:51:39 2280

Python

python使用opencv对图像mask处理的方法

MASK图像掩膜处理在图像操作中有时候会用到掩膜处理,如果使用遍历法掩膜图像ROI区域对于python来讲是很慢的,所以我们要找到一种比较好的算法来实现掩膜处理。假设我们有一副图像:而我们关心的区域就在这一小堆线上,想把这一堆线提取出来,我们先通过numpy生成一个mask图像:sss=np.zeros([480,640],dtype=np.uint8)sss[300:350,310:400]=255生成一个640*480大小的一个图片,填充为0,然后在3

系统 2019-09-27 17:48:10 2280

Python

在Python的列表中利用remove()方法删除元素的教程

remove()方法从列表中删除第一个obj。语法以下是remove()方法的语法:list.remove(obj)参数obj--这是可以从列表中移除该对象返回值此方法不返回任何值,但从列表中删除给定的对象例子下面的例子显示了remove()方法的使用#!/usr/bin/pythonaList=[123,'xyz','zara','abc','xyz'];aList.remove('xyz');print"List:",aList;aList.remov

系统 2019-09-27 17:46:57 2280

Python

Windows python3.5版本,无CUDA下pip安装pytorch

1、进入PyTorch的官网:https://pytorch.org/get-started/locally/选择你需要安装的版本,RunthisCommand指的是cmd命令下运行的代码,分别安装torch和相应的深度学习库,当然有的时候会报错,如报错ReadTimeoutError,这个错误指的是你电脑下载这个文件速度太慢了超时了,有两种解决办法:1、设置超时时间:pip--default-timeout=100install-Upip(这一句运行在p

系统 2019-09-27 17:57:05 2279

Python

Python数据可视化编程实战:导入数据

1.从csv文件导入数据原理:with语句打开文件并绑定到对象f。不必担心在操作完资源后去关闭数据文件,with的上下文管理器会帮助处理。然后,csv.reader()方法返回reader对象,通过该对象遍历所读取文件的所有行。实验结果截图:2.从Excel中导入文件数据Excel文件可以转换成csv文件,然后通过上述的方法导入,但是如果想自动化地对大量文件进行数据管道处理(作为数据连续处理流程的一部分),那么手动把每个Excel文件转换成CSV文件的做法

系统 2019-09-27 17:55:11 2279

Python

浅析python实现scrapy定时执行爬虫

项目需要程序能够放在超算中心定时运行,于是针对scrapy写了一个定时爬虫的程序main.py,直接放在scrapy的存储代码的目录中就能设定时间定时多次执行。最简单的方法:直接使用Timer类importtimeimportoswhileTrue:os.system("scrapycrawlNews")time.sleep(86400)#每隔一天运行一次24*60*60=86400s或者,使用标准库的sched模块importsched#初始化sched

系统 2019-09-27 17:52:04 2279

Python

Python迭代器和生成器介绍

迭代器迭代器是一个实现了迭代器协议的对象,Python中的迭代器协议就是有next方法的对象会前进到下一结果,而在一系列结果的末尾是,则会引发StopIteration。在for循环中,Python将自动调用工厂函数iter()获得迭代器,自动调用next()获取元素,还完成了检查StopIteration异常的工作。常用的几个内建数据结构tuple、list、set、dict都支持迭代器,字符串也可以使用迭代操作。你也可以自己实现一个迭代器,如上所述,只

系统 2019-09-27 17:52:01 2279

Python

Python库Pandas《Pandas Cookbook》第06章 索引对齐

这是书籍《PandasCookbook》书籍第06章的代码复现,所有代码运行在JupyterNotebook上,原讲解地址是:https://www.jianshu.com/p/ab55e07418af我上传代码的github地址是:https://github.com/Asunqingwen/PandasCookbook.gitgithub上有该书中用到的data,里面代码会不定期更新(因为工作原因,时间不定),直到本书学习完成!相比原讲解,会穿插一些自

系统 2019-09-27 17:50:08 2279

Python

python在linux中输出带颜色的文字的方法

在开发项目过程中,为了方便调试代码,经常会向stdout中输出一些日志,默认的这些日志就直接显示在了终端中。而一般的应用服务器,第三方库,甚至服务器的一些通告也会在终端中显示,这样就搅乱了我们想要的信息。我们可以通过对有用的信息设置不同颜色来达到醒目的效果,因为我平时都是在linux下开发,而linux终端中的颜色是用转义序列控制的,转义序列是以ESC开头,可以用\033完成相同的工作(ESC的ASCII码用十进制表示就是27,等于用八进制表示的33)。书

系统 2019-09-27 17:48:16 2279

Python

python3.7环境下安装Anaconda的教程图解

下载Anaconda安装包官网下载或是在清华大学镜像站下载,我安装的是下面这个版本:安装过程配置环境将anaconda的scripts文件夹路径添加到环境变量中。如果命令行输入输出如图所示则安装成功:为了避免可能发生的错误,我们在命令行输入condaupgrade--all先把所有工具包进行升级。(也可以不安装升级)打开pycharm,如图点击addlocal点击第三个选项,systeminterpreter,选择python.exe路径,点击ok,就可以

系统 2019-09-27 17:47:33 2279

Python

Python3中的2to3转换工具使用示例

python3与python2的还是有诸多的不同,比如说在2中:复制代码代码如下:print"Hello,World!"raw_input()在3里面就成了:复制代码代码如下:print("Hello,World!")input()所以如果用的python2开发的项目要迁移到3中,就需要进行代码的转换。Python3中自带了个转换工具,下面用个最简单的例子来说说2to3转换工具。例子:(2to3Test.py里面只有print这行代码)复制代码代码如下:#

系统 2019-09-27 17:37:46 2279

Python

利用python和百度地图API实现数据地图标注的方法

如题,先上效果图:主要分为两大步骤使用python语句,通过百度地图API,对已知的地名抓取经纬度使用百度地图API官网的html例程,修改数据部分,实现呈现效果一、使用python语句,通过百度地图API,获取经纬度读取文件信息importpandasaspddata=pd.read_excel('test_baidu.xlsx')data图中可以看出,原始数据并没有经纬度。2.构建抓取经纬度函数importjsonfromurllib.requesti

系统 2019-09-27 17:56:54 2278