Gittle是一个高级纯pythongit库。构建在dulwich之上,提供了大部分的低层机制。InstallitpipinstallgittleExamples:ClonearepositoryfromgittleimportGittlerepo_path='/tmp/gittle_bare'repo_url='git://github.com/FriendCode/gittle.git'repo=Gittle.clone(repo_url,repo_p
系统 2019-09-27 17:38:20 2340
一些小提示和小技巧可能是非常有用的,特别是在编程领域。有时候使用一点点黑客技术,既可以节省时间,还可能挽救“生命”。一个小小的快捷方式或附加组件有时真是天赐之物,并且可以成为真正的生产力助推器。所以,这里有一些小提示和小技巧,有些可能是新的,但我相信在下一个数据分析项目中会让你非常方便。Pandas中数据框数据的Profiling过程Profiling(分析器)是一个帮助我们理解数据的过程,而PandasProfiling是一个Python包,它可以简单快
系统 2019-09-27 17:57:26 2339
python3.6threading和multiprocessing四核+三星250G-850-SSD自从用多进程和多线程进行编程,一致没搞懂到底谁更快。网上很多都说python多进程更快,因为GIL(全局解释器锁)。但是我在写代码的时候,测试时间却是多线程更快,所以这到底是怎么回事?最近再做分词工作,原来的代码速度太慢,想提速,所以来探求一下有效方法(文末有代码和效果图)这里先来一张程序的结果图,说明线程和进程谁更快一些定义并行是指两个或者多个事件在同一
系统 2019-09-27 17:54:48 2339
5位数日期戳读取.mat文件处理里面数据时,发现里面的日期数据全部都是“5位数”数字,很不解;后来查到可以在excel中通过设置单元格调回标准日期格式,如下:选中日期戳,右键选择“格式化单元格(FormatCells)”选择需要的日期格式,点击ok即可通过代码转成标准日期例如这个DataFrame中的日期,全部都是“日期戳”格式的,但我需要的是人能看懂的“标准日期”;确认起始日期首先需拿一个“日期戳”对应的时间(标准日期),减去这个日期戳,得出起始时间。获
系统 2019-09-27 17:54:46 2339
如下所示:#coding=utf-8importosimportos.pathimportreimportarrayimportcmdimportpdbimportpickleimporttempfileimportsubprocess#rootPath=os.getcwd()#printrootPathrootPath=raw_input('TheCheckPath:')nonCheckDir=raw_input('TheNonCheckDirName(
系统 2019-09-27 17:54:40 2339
整理一下配置的过程。mac自带python2.7,但是python3.6和python2.7在很多地方上还是有一些差别的,还是使用目前比较主流的3.6吧。官网下载python3.6https://www.python.org/downloads/mac-osx/选一个你喜欢的版本下载,我下的是3.6.8按照提示一步步安装就好,最终会出现:用IDLE写代码太boring了,我比较喜欢用Pycharm在终端Installpython3如果电脑里没有Homebr
系统 2019-09-27 17:54:32 2339
语义分割任务中,如果预测结果中包含有孤立的噪点、孔洞,则可以使用腐蚀膨胀进行处理,提高分割效果。#定义输入矩阵,结构核importcv2ascvimportnumpyasnpinput_data=np.array([[1,0,0,0,1],[0,1,1,1,0],[0,1,1,1,0],[0,1,1,1,0],[1,0,1,0,1]],dtype=np.uint8)kernel=np.uint8(np.zeros((3,3)))foriinrange(3)
系统 2019-09-27 17:53:59 2339
python获取mysql库信息/表信息/表结构/索引核心代码来自https://github.com/cookieY/Yearning此项目con_database.pyimportpymysqlclassSQLgo(object):def__init__(self,ip=None,user=None,password=None,db=None,port=None):self.ip=ipself.user=userself.password=passwo
系统 2019-09-27 17:53:48 2339
numpy.set_printtoptions(edgeitems=5):值过多,显示前5个和后5个偏度:衡量随机分布的不均衡性,偏度=0,数值相对均匀的分布在两侧峰度:概率密度在均值处峰值高低的特征python计算数据均值、标准差、偏度、峰度:importnumpyasnpfromscipyimportstatsx=np.random.randn(10000)mu=np.mean(x,axis=0)sigma=np.std(x,axis=0)skew=s
系统 2019-09-27 17:52:56 2339
随机森林是一种集成学习方法,基本思想是把几棵不同参数的决策树(参考:Python+sklearn决策树算法使用入门)打包到一起,每棵决策树单独进行预测,然后计算所有决策树预测结果的平均值(适用于回归分析)或所有决策树“投票”得到最终结果(适用于分类)。在随机森林算法中,不会让每棵树都生成最佳的节点,而是在每个节点上随机选择一个特征进行分裂。扩展库sklearn在ensemble模块中提供了随机森林分类器RandomForestClassifier和随机森林
系统 2019-09-27 17:52:35 2339
解决Python3控制台输出InsecureRequestWarning的问题问题:使用Python3requests发送HTTPS请求,已经关闭认证(verify=False)情况下,控制台会输出以下错误:InsecureRequestWarning:UnverifiedHTTPSrequestisbeingmade.Addingcertificateverificationisstronglyadvised.See:https://urllib3.re
系统 2019-09-27 17:52:19 2339
网络上现有的windows下搭建scrapy教程都比较旧,一般都是咔咔咔安装一堆软件,太麻烦,这是因为scrapy框架用到好多不同的模块,其实查阅最新的官网scrapy文档,在windows下搭建scrapy框架,官方文档是建议使用集成包的,以免安装太过复杂而出现问题,首先百度scrapy,就可以找到scrapy的官方文档1、找到windows下的框架安装的文档教程,这里建议我们安装Anaconda或者Miniconda集成包,下面我选择安装Minicon
系统 2019-09-27 17:50:07 2339
文章目录python文件处理文件的读取和关闭文件的打开文件的读取文件的写入文件的关闭文件的模式文件的读取位置从头读取3个字符从尾部读取3个字符实战1实战2python文件处理python对文件处理分为两种,一种是本地处理,而另外一种就是通过网络数据处理(也就是爬虫相关),而本地的数据处理,主要是通过文件的都和写完成我们先想一想平时对文件处理一般遇到过哪些问题:如何读取一个文件的内容,然后处理,最后写到一个新的文件如何更改一个文件夹下面的某一些文件名pyth
系统 2019-09-27 17:48:14 2339
min()方法返回它的参数最小值:最接近负无穷大的值。语法以下是min()方法的语法:min(x,y,z,....)参数x--这是一个数值表达式。y--这也是一个数值表达式。z--这也是一个数值表达式。返回值此方法返回最小的它的参数。例子下面的例子显示了min()方法的使用。#!/usr/bin/pythonprint"min(80,100,1000):",min(80,100,1000)print"min(-20,100,400):",min(-20,1
系统 2019-09-27 17:47:39 2339
文章目录一、做出决策一、做出决策使用双等号(==)做比较可以在数字之间比较,序列片段之间比较,序列之间比较,字符串之间比较、字典比较。同样也可以使用不等于(!=)比较大小(>或<)当比较字母的大小的时候,A最小,z最大。比较字符串的时候从左至右,依次比较。lower和upper方法将字母进行全部大写或者全部小写。>>>"Hello".upper()'HELLO'>>>"Hello".lower()'hello'>>>"Hello".upper()=="HE
系统 2019-09-27 17:47:17 2339