python3.6threading和multiprocessing四核+三星250G-850-SSD自从用多进程和多线程进行编程，一致没搞懂到底谁更快。网上很多都说python多进程更快，因为GIL(全局解释器锁)。但是我在写代码的时候，测试时间却是多线程更快，所以这到底是怎么回事？最近再做分词工作，原来的代码速度太慢，想提速，所以来探求一下有效方法(文末有代码和效果图)这里先来一张程序的结果图，说明线程和进程谁更快一些定义并行是指两个或者多个事件在同一
系统 2019-09-27 17:54:48 2339
如下所示：#coding=utf-8importosimportos.pathimportreimportarrayimportcmdimportpdbimportpickleimporttempfileimportsubprocess#rootPath=os.getcwd()#printrootPathrootPath=raw_input('TheCheckPath:')nonCheckDir=raw_input('TheNonCheckDirName(
系统 2019-09-27 17:54:40 2339
整理一下配置的过程。mac自带python2.7，但是python3.6和python2.7在很多地方上还是有一些差别的，还是使用目前比较主流的3.6吧。官网下载python3.6https://www.python.org/downloads/mac-osx/选一个你喜欢的版本下载，我下的是3.6.8按照提示一步步安装就好，最终会出现：用IDLE写代码太boring了，我比较喜欢用Pycharm在终端Installpython3如果电脑里没有Homebr
系统 2019-09-27 17:54:32 2339
语义分割任务中，如果预测结果中包含有孤立的噪点、孔洞，则可以使用腐蚀膨胀进行处理，提高分割效果。#定义输入矩阵，结构核importcv2ascvimportnumpyasnpinput_data=np.array([[1,0,0,0,1],[0,1,1,1,0],[0,1,1,1,0],[0,1,1,1,0],[1,0,1,0,1]],dtype=np.uint8)kernel=np.uint8(np.zeros((3,3)))foriinrange(3)
系统 2019-09-27 17:53:59 2339
numpy.set_printtoptions(edgeitems=5):值过多，显示前5个和后5个偏度：衡量随机分布的不均衡性，偏度=0，数值相对均匀的分布在两侧峰度：概率密度在均值处峰值高低的特征python计算数据均值、标准差、偏度、峰度：importnumpyasnpfromscipyimportstatsx=np.random.randn(10000)mu=np.mean(x,axis=0)sigma=np.std(x,axis=0)skew=s
系统 2019-09-27 17:52:56 2339
随机森林是一种集成学习方法，基本思想是把几棵不同参数的决策树（参考：Python+sklearn决策树算法使用入门）打包到一起，每棵决策树单独进行预测，然后计算所有决策树预测结果的平均值（适用于回归分析）或所有决策树“投票”得到最终结果（适用于分类）。在随机森林算法中，不会让每棵树都生成最佳的节点，而是在每个节点上随机选择一个特征进行分裂。扩展库sklearn在ensemble模块中提供了随机森林分类器RandomForestClassifier和随机森林
系统 2019-09-27 17:52:35 2339
网络上现有的windows下搭建scrapy教程都比较旧，一般都是咔咔咔安装一堆软件，太麻烦，这是因为scrapy框架用到好多不同的模块，其实查阅最新的官网scrapy文档，在windows下搭建scrapy框架，官方文档是建议使用集成包的，以免安装太过复杂而出现问题，首先百度scrapy，就可以找到scrapy的官方文档1、找到windows下的框架安装的文档教程，这里建议我们安装Anaconda或者Miniconda集成包，下面我选择安装Minicon
系统 2019-09-27 17:50:07 2339
在学习pygame模块过程中，我们可以通过使用pygame模块实现很多功能性的东西，但是很多人应该没有利用pygame实现过雪花飘落的效果吧，有时候可能是不知道从何入手或者是没有时间写，接下来我就教大家如何利用pygame模块实现雪花飘落的效果吧，总共都用不到40行代码就可以实现哦，希望对你们有所帮助第一步：我们先打开我们的pycharm软件，然后新建一个Python文件第二步：建立好文件之后，我们在编辑页面输入以下代码：importpygameimpor
系统 2019-09-27 17:49:10 2339
文章目录python文件处理文件的读取和关闭文件的打开文件的读取文件的写入文件的关闭文件的模式文件的读取位置从头读取3个字符从尾部读取3个字符实战1实战2python文件处理python对文件处理分为两种，一种是本地处理，而另外一种就是通过网络数据处理（也就是爬虫相关），而本地的数据处理，主要是通过文件的都和写完成我们先想一想平时对文件处理一般遇到过哪些问题:如何读取一个文件的内容，然后处理，最后写到一个新的文件如何更改一个文件夹下面的某一些文件名pyth
系统 2019-09-27 17:48:14 2339
前言文件和目录操作是很常见的功能，这里做个简单的总结，包括注意事项和实际的实现代码，基本日常开发都够用了目录操作判断目录或是文件是否存在os.path.exists(path)判断是否是文件或是目录#如果文件或是目录不存在也会返回Falseos.path.isfile(path)os.path.isdir(path)创建/删除目录os.mkdir(path)os.rmdir(path)得到当前的目录名称os.path.split(dir_path)[1]这
系统 2019-09-27 17:57:44 2338
python获取mysql库信息/表信息/表结构/索引核心代码来自https://github.com/cookieY/Yearning此项目con_database.pyimportpymysqlclassSQLgo(object):def__init__(self,ip=None,user=None,password=None,db=None,port=None):self.ip=ipself.user=userself.password=passwo
系统 2019-09-27 17:53:48 2338
目录：1、%用法2、format用法一、%用法1、整数的格式化%o——oct八进制%d——dec十进制%x——hex十六进制例>>>print('%o'%20)24>>>print('%d'%20)20>>>print('%x'%20)142、浮点数的格式化%e——保留小数点后面六位有效数字，指数形式输出%.3e，保留3位小数位，使用科学计数法%f——保留小数点后面六位有效数字%.3f，保留3位小数位%g——在保证六位有效数字的前提下，使用小数方式，否则使
系统 2019-09-27 17:52:22 2338
解决Python3控制台输出InsecureRequestWarning的问题问题：使用Python3requests发送HTTPS请求，已经关闭认证（verify=False）情况下，控制台会输出以下错误：InsecureRequestWarning:UnverifiedHTTPSrequestisbeingmade.Addingcertificateverificationisstronglyadvised.See:https://urllib3.re
系统 2019-09-27 17:52:19 2338
定时与邮件在这一关，我们希望为一般的爬虫程序新增两个实用性比较强的功能：第一是定时功能，即程序可以根据我们设定的时间自动爬取数据；第二是通知功能，即程序可以把爬取到的数据结果以邮件的形式自动发送到我们的邮箱。这两个功能可以让爬虫程序定时向我们汇报。试想一下，如果你是一位股票（或比特币）的持有者，你希望及时爬取股票（或比特币）每日的价格数据，方便你能及时卖出或买入，那每天都去启动一遍爬虫程序是极其不高效的。而此时，如果你的爬虫程序有定时和发送邮件功能，能自动
系统 2019-09-27 17:50:59 2338
一、要求boston房价数据是机器学习中著名的基础数据集，包含506条记录，每条记录包含房屋的13条属性，房价信息属性MEDV在boston.target中，具体（翻译成中文）可通过如下语句查看:print(boston.DESCR)各属性的中文解释如下：CRIM城镇人均犯罪率ZN占地面积超过25,000平方尺的住宅用地比例INDUS城镇中非商业用地比例CHASCharlesRiver虚拟变量（如果边界是河流则为1;否则为0）NOX一氧化氮浓度RM每栋住宅
系统 2019-09-27 17:50:16 2338
