一、写在前面我写爬虫已经写了一段时间了,对于那些使用GET请求或者POST请求的网页,爬取的时候都还算得心应手。不过最近遇到了一个有趣的网站,虽然爬取的难度不大,不过因为表单提交的存在,所以一开始还是有点摸不着头脑。至于最后怎么解决的,请慢慢往下看。二、页面分析这次爬取的网站是:https://www.ctic.org/crm?tdsourcetag=s_pctim_aiomsg,该网站提供了美国的一些农田管理的数据。要查看具体的数据,需要选择年份、单位、
系统 2019-09-27 17:53:08 2299
ftp登陆连接fromftplibimportFTP#加载ftp模块ftp=FTP()#设置变量ftp.set_debuglevel(2)#打开调试级别2,显示详细信息ftp.connect("IP","port")#连接的ftpsever和端口ftp.login("user","password")#连接的用户名,密码printftp.getwelcome()#打印出欢迎信息ftp.cmd("xxx/xxx")#进入远程目录bufsize=1024#设置
系统 2019-09-27 17:50:53 2299
win10环境下对于初装anaconda后cmd不能运行python或pip的问题问题描述有的时候买了新的电脑或重装系统后,装完anaconda后发现cmd居然运行不了python或者pip安装。发现网络上的解决法案不是很完善。所以写一篇博客来说明是如何解决这个问题的。问题的原因在于:没有配置python的系统环境第一步:查询python路径或者第三方模块安装路径博主使用jupyternotebook来查看路径代码.importsyssys.path查询后
系统 2019-09-27 17:50:20 2299
转眼又到了咱们中国传统的情人节七夕了,今天笔者就带大家来领略一下用Python表白的方式。让程序员的恋人们感受一下IT人的浪漫。一、词云制作首先咱们可以用之前介绍过的wordcould包制作词云。wordcloud包安装十分简单。pip即可完成安装pipinstallwordcloud然后需要制作一个背景图片,为了应急我用艺术字做了个七夕的图片,如果大家来不及直接图片另存为使用下图即可。具体制作的词云的代码如下:fromwordcloudimportWor
系统 2019-09-27 17:49:41 2299
这篇文章主要介绍了python图片二值化提高识别率代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下代码如下importcv2fromPILimportImagefrompytesseractimportpytesseractfromPILimportImageEnhanceimportreimportstringdefcreateFile(filePath,newFilePath):img=Imag
系统 2019-09-27 17:48:55 2299
作者:chen_h微信号&QQ:862251340微信公众号:coderpai(一)机器学习中的集成学习入门(二)bagging方法(三)使用Python进行交易的随机森林算法(四)Python中随机森林的实现与解释(五)如何用Python从头开始实现Bagging算法(六)如何利用Python从头开始实现随机森林算法介绍随机森林是集成学习中一个主要的算法。简而言之,集成方法是一种将几个弱学习器的预测结果进行组合,最终形成一个强学习器的方法。可以直观的猜测
系统 2019-09-27 17:48:27 2299
今天写一段代码,需要校验字符串中是否包含非中文字符,于是百度了一下,结果让我十分震惊,那就是几乎第一页都是错误的演示代码。全是复制的某一个人的错误代码,这样的搜索结果,实在是让百度很难堪,也让我们中文的编程环境很难堪。下面是错误代码:defis_Chinese(word):forchinword:if'\u4e00'<=ch<='\u9fff':returnTruereturnFalse就这段代码,大家可以稍微的分析一下,只要这个字符串第一个字符是汉字,不
系统 2019-09-27 17:48:25 2299
这篇文章主要介绍了python3反射的四种基本方法解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下classPerson(object):def__init__(self):passdefinfo(self):print('我是person类中的info方法')1.getattr()方法这个方法是根据字符串去某个模块中寻找方法instantiation=reflect.Person()#先实例化f=ge
系统 2019-09-27 17:47:57 2299
如果你还在为python的各种urllib和urlibs,cookielib头疼,或者还还在为python模拟登录和抓取数据而抓狂,那么来看看我们推荐的requests,python采集数据模拟登录必备利器!这也是python推荐的HTTP客户端库:本文就以一个模拟登录的例子来加以说明,至于采集大家就请自行发挥吧。代码很简单,主要是展现python的requests库的简单至极,代码如下:s=requests.session()data={'user':'
系统 2019-09-27 17:47:52 2299
NumPy是一个优秀的科学计算库,提供了很多实用的数学函数、强大的多维数组对象和优异的计算性能,不仅可以取代Matlab和Mathematica的许多功能,而且业已成为Python科学计算生态系统的重要组成部分。但与这些商业产品不同,它是免费的开源软件。本书从NumPy安装讲起,逐渐过渡到数组对象、常用函数、矩阵运算、线性代数、金融函数、窗函数、质量控制等内容,致力于向初中级Python编程人员全面讲述NumPy及其使用。另外,通过书中丰富的示例,你还将学
系统 2019-09-27 17:47:44 2299