前言我们在用Python进行机器学习建模项目的时候，每个人都会有自己的一套项目文件管理的习惯，我自己也有一套方法，是自己曾经踩过的坑踩过的雷总结出来的，现在在这里分享一下给大家，因为很多伙伴是接触Python编程入门不久，也希望大家少走弯路，多少有些地方可以给大家借鉴。目录先放出来项目文件事先做好归档永远不要手动修改源数据并且做好备份做好路径的正确配置代码必要的地方做好备注与说明加速你的Python循环代码可视化你的循环代码进度使用高效的异常捕获工具要多考
系统 2019-09-27 17:53:42 2587
base64数据加密，是一种可逆的编码格式，生成的编码是ascii格式的数据，通过encode加密，decode解密。原理：1、将所有字符转化为ASCII码。2、将ASCII码转化为8位二进制。3、将二进制3个归成一组(不足3个在后边补0)共24位，再拆分成4组，每组6位。4、统一在6位二进制前补两个0凑足8位。5、将补0后的二进制转为十进制。6、从Base64编码表获取十进制对应的Base64编码。importbase64classEncodeDecod
系统 2019-09-27 17:50:29 2587
第2章监督学习利用graphviz打开绘制的dot格式决策图出错，有两个坑需注意1、pipinstallgraphviz库还不够，还要安装graphviz软件，地址http://www.graphviz.org/download/。2、强烈建议安装地址为C盘，安装后添加软件所在文件夹（bin）地址到PATH环境。之前安装到其他盘，运行一直出错，makesuretheGraphvizexecutablesareonyoursystems’PATH，改为C盘就
系统 2019-09-27 17:57:03 2586
分析网站寻找需要的网址用谷歌浏览器摁F12打开开发者工具，然后打开斗鱼颜值分类的页面，如图：在这里插入图片描述在里面的请求中，最后发现它是以ajax加载的数据，数据格式为json，如图：在这里插入图片描述圈住的部分是我们需要的数据，然后复制它的网址为https://www.douyu.com/gapi/rknc/directory/yzRec/1，出于学习目的只爬取第一页（减少服务器压力）。然后把网址放到浏览器中测试是否可以访问。如图：在这里插入图片描述结
系统 2019-09-27 17:56:55 2586
最常见的一种形式是的是为一个或者多个参数指定默认值，这会创建一个可以使用比定义时允许的参数更少的参数调用的函数，defask_ok(prompt,retries=4,reminder='Pleasetryagain!'):whileTrue:ok=input(prompt)ifokin('y','ye','yes'):returnTrueifokin('n','no','nop','nope'):returnFalseretries=retries-1if
系统 2019-09-27 17:52:19 2586
Python数据科学入门DmitryZinoviev著熊子源译第6章使用Series和framePandas模块的初中时为了给Python添加Series和frame两个抽象的数据结构，它们其实是Python的竞争对手、最早的数据科学语言——R语言的核心。Pandas的frame本质是一个“智能”电子表格：具有标签、列（变量）、行（观测记录），以及大量内置操作的表。（Series是一个只有一列的frame）表的数据部分（单元格）以numpy数组的方式实现。
系统 2019-09-27 17:51:53 2586
CentOS6系统默认Python版本是：2.6.6平时在使用中，某些库要求是2.7.x版本的库，记录Python升级到2.7.x过程。1.准备安装包，系统是最小化安装#下载安装依赖的相关包[root@isTester.com~]#yuminstallvimgccmakewget-y[root@isTester.com~]#yuminstallopenssl-develzlib-develreadline-develsqlite-devel-y#下载[ro
系统 2019-09-27 17:47:54 2586
上一期博客，我本来想爬取美团美食的，但是由于请求头太复杂，没有破解开其中的几个参数，所以放弃，这次我们来用selenium来模式浏览器抓取数据，我们先来简单看一下流程：1，利用selenium驱动浏览器，得到美食列表2，分析网页，并给予翻页后续的美食列表3，分析提取数据（pyQuery）项目一：美团美食项目地址：https://gitee.com/dwyui/pyQuery_selenium.git由于美团反扒严重，只爬取到部分数据，可以尝试修改间隔时间来
系统 2019-09-27 17:45:51 2586
关于python性能提升的一些方案。一、函数调用优化（空间跨度，避免访问内存）程序的优化核心点在于尽量减少操作跨度，包括代码执行时间上的跨度以及内存中空间跨度。1.大数据求和，使用suma=range(100000)%timeit-n10sum(a)10loops,bestof3:3.15msperloop%%timeit...:s=0...:foriina:...:s+=i...:100loops,bestof3:6.93msperloop2.小数据求和
系统 2019-09-27 17:37:58 2586
一、问题这两天在学习使用flask+SQLAlchemy定制一个web查询页面的demo，在测试时，发现查询到的结果显示乱码。这里将解决方法记录下。二、解决思路1、flask程序上定位flask的文档中提到可以通过设置SQLALCHEMY_NATIVE_UNICODE来禁止使用SQLAlchemy默认的Unicode编码。有可能是SQLAlchemy默认的Unicode编码不是UTF-8，抱着这样的想法，在程序中指定了“SQLALCHEMY_NATIVE_
系统 2019-09-27 17:37:58 2586
本文实例讲述了python中metaclass原理与用法。分享给大家供大家参考，具体如下：什么是metaclass.metaclass(元类)就是用来创建类的类。在前面一篇文章《python动态创建类》里我们提到过，可以用如下的一个观点来理解什么是metaclass:MyClass=MetaClass()MyObject=MyClass()metaclass是python里面的编程魔法同时在前面一篇《python动态创建类》文章里描述动态创建class的时
系统 2019-09-27 17:56:42 2585
在GIS中，栅格属性里有关于栅格自身的信息，背景（nodatavalue）对于识别一张图像的边界像元尤为重要，我们目的只要把每行每列中的第一次出现不是nodata的像元和最后一次出现nodata的前一个像元就可以了。对于栅格，可以用ArcPy中的RasterToNumpyArray函数将将栅格转成numpy数组，然后就可以按照所想读取出每行列中首尾像元。以下是部分代码提取边界像元的核心算法，其实是很简单的一个思路(假设0是nodatavalue)。a=[[
系统 2019-09-27 17:47:41 2585
简介前边具体操作和实战已经讲解和分享了很多了，但是一些android的一些基础知识，你又知道多少了，你都掌握了吗？这篇就由宏哥给小伙伴们既是一个分享，又是对前边的一次总结。为什么要对这些做一个简单的分享了，因为在现实具体工作中经常会遇到这样的问题，这里还是通过一个小故事来说明一下。QA：“那个谁谁谁，我刚刚按照上一次那样操作这款款APP，我死活是跑不起测试脚本了。（内心独白：我去，这个奇怪的问题，一定是他给我的安装包有问题”）DEV：“嗯？还有这样的问题，
系统 2019-09-27 17:57:28 2584
为什么要降维？高维情形下，样本数据稀疏，距离计算困难。为什么能进行降维？收集的数据虽是高维但与学习任务密切相关的也许仅仅是某个低维分布无监督降维：PCA最大重构性：找到一个超平面使得样本点在这个超平面的投影尽量分开。PCA也可以看作是逐一筛选方差最大方向；对协方差矩阵XX^T特征分解，取最大特征值及其特征向量；在去掉该特征值以及特征向量后，继续取最大特征值；关于PCA的几个问题：投影方向应该取多少才好？根据博客https://blog.csdn.net/m
系统 2019-09-27 17:56:39 2584
前言djangowsgipython有个自带的wsgi模块可以写自定义web框架用wsgi在内部创建socket对象就可以了自己只写处理函数就可以了django只是web框架他也不负责写socketdjango依赖wsgi接口创建socketwsgi是一套规则是一套接口按照wsgi规则写以后想封装socket在内部封装socket就可以了我只要遵循规则把wsgi模块一导入我就可以使用wsgi写的socket了遵循wsgsocketi接口有哪些这些模块已经创
系统 2019-09-27 17:53:13 2584
