拥有Python标签的文章
Python

用Python写了个金融数据爬虫,半小时干了全组一周的工作量

最近,越来越多的研究员、基金经理甚至财务会计领域的朋友,向小编咨询:金融人需要学Python么?事实上在2019年,这已经不是一个问题了。Python已成为国内很多顶级投行、基金、咨询等泛金融、商科领域的必备技能。中金公司、银河证券、南方基金、银华基金在招聘分析师岗位时,纷纷要求熟练掌握Python数据分析技能。Excel我已经用的很好了,为什么还要学Python?我们都知道,无论是行业研究员、基金经理还是审计人员,工作的核心基本都是频繁处理大量数据。之前

系统 2019-09-27 17:51:08 2669

Python

用python对训练集和测试集进行特征规范化处理

个人理解这里的规范化处理指对提取后的特征集进行处理,不是对原始的数据信号进行处理,包括归一化和标准化。规范化的原因:不同特征具有不同量级时会导致:a.数量级的差异将导致量级较大的特征占据主导地位;b.数量级的差异将导致迭代收敛速度减慢;c.依赖于样本距离的算法对于数据的数量级非常敏感。归一化:,也就是原数据减去该特征列最小值,再除以该特征列的极差,将属性缩放到[0,1]之间。标准化:,也就是原数据减去该特征列的均值,再除以该特征列的标准差。注意:1.所谓规

系统 2019-09-27 17:48:10 2669

Python

Python itchat模块的使用,利用图灵机器人进行微信消息自动回复

一、下载安装itchat模块二、小实验:获取微信好友头像信息这需要用itchat模块中的一个方法itchat.get_friends()#获取微信所有微信好友信息现在我们导入itchat,打印一下,看看好友信息有哪些字段数据importitchat#itchat.login()生成一个登陆二维码,此方式每次程序运行都需要扫码itchat.auto_login(hotReload=True)#持续登录,只用扫一次二维码即可friends=itchat.get

系统 2019-09-27 17:45:53 2669

Python

Python实现备份文件实例

本文实例讲述了Python实现备份文件的方法,是一个非常实用的技巧。分享给大家供大家参考。具体方法如下:该实例主要实现读取一个任务文件,根据指定的任务参数自动备份.任务文件的格式:(注意,分号后面注释是不支持的)[task];一项任务开始dir=h:/Project;指定备份的目录recusive=1;是否递归子目录suffix=h|cpp|hpp|c|user|filters|vcxproj|sln|css|gif|html|bmp|png|lib|ds

系统 2019-09-27 17:56:50 2668

Python

Python facenet进行人脸识别测试过程解析

1.简介:facenet是基于TensorFlow的人脸识别开源库,有兴趣的同学可以扒扒源代码:https://github.com/davidsandberg/facenet2.安装和配置facenet我们先将facenet源代码下载下来:gitclonehttps://github.com/davidsandberg/facenet.git在使用facenet前,务必安装下列这些库包:或者直接移动到facenet目录下,一键安装pipinstall-r

系统 2019-09-27 17:54:52 2668

Python

Python3中的2to3转换工具使用示例

python3与python2的还是有诸多的不同,比如说在2中:复制代码代码如下:print"Hello,World!"raw_input()在3里面就成了:复制代码代码如下:print("Hello,World!")input()所以如果用的python2开发的项目要迁移到3中,就需要进行代码的转换。Python3中自带了个转换工具,下面用个最简单的例子来说说2to3转换工具。例子:(2to3Test.py里面只有print这行代码)复制代码代码如下:#

系统 2019-09-27 17:37:46 2668

Python

python中的global语句用法

在初学python时想要在函数内修改一个变量的引用,往往会出现如下情况:num=1deffun():num=2print(num)fun()print(num)#输出结果为2#1想改变num的值,在函数中修改后,在函数中调用返回值为修改后的值,但用print输出num的值仍为1。此时在函数内部,num的值是局部变量,而函数外部的num是全局变量。想要修改全局变量此时就应该引入global语句global语句的用法语法:声明此变量为全局变量。用法:globa

系统 2019-09-27 17:57:43 2667

Python

Python实现从url中提取域名的几种方法

从url中找到域名,首先想到的是用正则,然后寻找相应的类库。用正则解析有很多不完备的地方,url中有域名,域名后缀一直在不断增加等。通过google查到几种方法,一种是用Python中自带的模块和正则相结合来解析域名,另一种是使第三方用写好的解析模块直接解析出域名。要解析的url复制代码代码如下:urls=["http://meiwen.me/src/index.html","http://1000chi.com/game/index.html","htt

系统 2019-09-27 17:56:17 2667

Python

Python基本数据结构之字典类型dict用法分析

本文实例讲述了Python基本数据结构之字典类型dict用法。分享给大家供大家参考,具体如下:词典类型dict字典由键(key)和对应值(value)成对组成。字典也被称作关联数组或哈希表。dict赋值dict整体放在花括号{}中,每个键与值用冒号隔开(:),每对用逗号分割;d={'one':1,'two':2,'three':3}键必须独一无二,但值则不必;值可取任何数据类型,如字符串,数或元组;若创建时同一个键被赋值两次,后一个值会被记住;键必须不可变

系统 2019-09-27 17:55:22 2667

Python

Python数据可视化编程实战:导入数据

1.从csv文件导入数据原理:with语句打开文件并绑定到对象f。不必担心在操作完资源后去关闭数据文件,with的上下文管理器会帮助处理。然后,csv.reader()方法返回reader对象,通过该对象遍历所读取文件的所有行。实验结果截图:2.从Excel中导入文件数据Excel文件可以转换成csv文件,然后通过上述的方法导入,但是如果想自动化地对大量文件进行数据管道处理(作为数据连续处理流程的一部分),那么手动把每个Excel文件转换成CSV文件的做法

系统 2019-09-27 17:55:11 2667

Python

python-opencv在有噪音的情况下提取图像的轮廓实例

对于一般的图像提取轮廓,介绍了一个很好的方法,但是对于有噪声的图像,并不能很好地捕获到目标物体。比如对于我的鼠标,提取的轮廓效果并不好,因为噪声很多:所以本文增加了去掉噪声的部分。首先加载原始图像,并显示图像img=cv2.imread("temp.jpg")#载入图像h,w=img.shape[:2]#获取图像的高和宽cv2.imshow("Origin",img)然后进行低通滤波处理,进行降噪blured=cv2.blur(img,(5,5))#进行滤

系统 2019-09-27 17:53:51 2667

Python

模拟退火算法之特征选择的python实现(一)

目录1.模拟退火算法实现步骤2.python实现3.实验结果4.参考文献模拟退火算法的基本原理在这里就不一一赘述了,关于原理,可以参考百度百科、博客1、博客2在本节按照基本实现步骤实现模拟退火算法,对于模拟退火算法的高级封装(类封装),可以参考模拟退火算法之特征选择的python实现(二)1.模拟退火算法实现步骤2.python实现importnumpyasnpfromsklearn.preprocessingimportStandardScalerfro

系统 2019-09-27 17:51:34 2667

Python

Python 变量类型详解

变量存储在内存中的值。这就意味着在创建变量时会在内存中开辟一个空间。基于变量的数据类型,解释器会分配指定内存,并决定什么数据可以被存储在内存中。因此,变量可以指定不同的数据类型,这些变量可以存储整数,小数或字符。变量赋值Python中的变量赋值不需要类型声明。每个变量在内存中创建,都包括变量的标识,名称和数据这些信息。每个变量在使用前都必须赋值,变量赋值以后该变量才会被创建。等号(=)用来给变量赋值。等号(=)运算符左边是一个变量名,等号(=)运算符右边是

系统 2019-09-27 17:50:28 2667

Python

python爬虫---从零开始(三)Requests库

1,什么是Requests库Requests是用python语言编写,基于urllib,采用Apache2Licensed开源协议的HTTP库。它比urllib更加方便,可以节约我们大量的工作,完全满足HTTP测试需求,用一句话来说,Requests是python实现的简单易用的HTTP库。安装Request,直接输入pip3installrequests2,使用方法(底部有码云地址)相对上一期的urllib库要简单了很多了(个人觉得简单了不少的)各种请求

系统 2019-09-27 17:49:48 2667

Python

python关于矩阵重复赋值覆盖问题的解决方法

本文实例讲述了python关于矩阵重复赋值覆盖问题的解决方法。分享给大家供大家参考,具体如下:importitertoolsimportnumpyasnpcomb=list(itertools.combinations(list(range(regions)),2))bands_info=[]coeff=np.zeros([bands,len(comb)])forclainrange(classes):class_info=data[:,cla*bands

系统 2019-09-27 17:49:02 2667