搜索到与相关的文章
Python

python爬虫---从零开始(二)Urllib库

接上文再继续我们的爬虫,这次我们来述说Urllib库1,什么是Urllib库Urllib库是python内置的HTTP请求库urllib.request请求模块urllib.error异常处理模块urllib.parseurl解析模块urllib.robotparserobots.txt解析模块不需要额外安装,python自带的库。注意:python2importurllib2response=urllib2.urlopen('http://baidu.c

系统 2019-09-27 17:50:06 2413

Python

Python实现FM算法解析

1.什么是FM?FM即FactorMachine,因子分解机。2.为什么需要FM?1、特征组合是许多机器学习建模过程中遇到的问题,如果对特征直接建模,很有可能会忽略掉特征与特征之间的关联信息,因此,可以通过构建新的交叉特征这一特征组合方式提高模型的效果。2、高维的稀疏矩阵是实际工程中常见的问题,并直接会导致计算量过大,特征权值更新缓慢。试想一个10000*100的表,每一列都有8种元素,经过one-hot独热编码之后,会产生一个10000*800的表。因此

系统 2019-09-27 17:48:36 2413

Python

python从list列表中选出一个数和其对应的坐标方法

例1:给一个列表如下,里面每个元素对应的是x和y的值a=[[5,2],[6,3],[8,8],[1,3]]现在要挑出y的值为3对应的x的值,即6和1importnumpyasnpa=[[5,2],[6,3],[8,8],[1,3]]#c=np.mat(a),因为只有矩阵(也可以用array)才能用a[0,0]这样的调用#表示第一个数的用法而list没有,故在最后append需要用到#注意:array也没有index这样的用法(只有list有,此题a已经是l

系统 2019-09-27 17:48:10 2413

Python

python实现爬虫抓取小说功能示例【抓取金庸小说】

本文实例讲述了python实现爬虫抓取小说功能。分享给大家供大家参考,具体如下:#-*-coding:utf-8-*-frombs4importBeautifulSoupfromurllibimportrequestimportreimportos,time#访问url,返回html页面defget_html(url):req=request.Request(url)req.add_header('User-Agent','Mozilla/5.0')res

系统 2019-09-27 17:47:40 2413

Python

Linux下原码安装 python-3.6.6

Linux下原码安装python-3.6.6下载#wgethttps://www.python.org/ftp/python/3.6.6/Python-3.6.6.tgz安装依赖包#yum-yinstallzlib-develbzip2-developenssl-develsqlite-develreadline-develgcc解压并进入到解压目录#tarxvfPython-3.6.6.tgz#cdPython-3.6.6/修改Modules/Setup

系统 2019-09-27 17:47:22 2413

Python

python爬取百度贴吧前1000页内容(requests库面向对象思想实现)

此程序以李毅吧为例子,以面向对象的设计思想实现爬取保存网页数据,暂时并未用到并发处理,以后有机会的话会加以改善首先去百度贴吧分析贴吧地址栏中url后的参数,找到分页对应的参数pn,贴吧名字对应的参数kw首先创建类,写好__init__方法,run方法,__init__方法里先可以直接写passrun方法里大概整理一下整体的思路构造url列表,因为要爬取1000页,每页需对应一个url遍历发送请求,获取响应保存将可封装的步骤封装到单独的方法,所以这里又增加了

系统 2019-09-27 17:46:58 2413

编程技术

人生需要放下的8样东西

1、放下压力累与不累,取决于自己的心态心灵的房间,不打扫就会落满灰尘。蒙尘的心,会变得灰色和迷茫。我们每天都要经历很多事情,开心的,不开心的,都在心里安家落户。心里的事情一多,就会变得杂乱无序,然后心也跟着乱起来。有些痛苦的情绪和不愉快的记忆,如果充斥在心里,就会使人委靡不振。所以,扫地除尘,能够使黯然的心变得亮堂;把事情理清楚,才能告别烦乱;把一些无谓的痛苦扔掉,快乐就有了更多更大的空间。紧紧抓住不快乐的理由,无视快乐的理由,就是你总是觉得难受的原因了。

系统 2019-08-29 23:48:49 2413

编程技术

解决Opera的本地化字体显示问题!

因为黄金的存储量少,所以价值高,Opera的市场占有率蛮低,想必也应该蛮好的吧!上官网下载Opera的国际化版,安装之后打开来看,字体渲染一它糊涂,如下图:经多方查证和搜索,现得出如下解决方法:首选项-高级-字体。修改浏览器菜单、浏览器工具栏、对话框、面板、工具提示、普通文字为宋体好了,最小字体大小设置为12就ok了。(当然你也可以修改为其他字体)。解决Opera的本地化字体显示问题!

系统 2019-08-29 23:40:56 2413