接上文再继续我们的爬虫,这次我们来述说Urllib库1,什么是Urllib库Urllib库是python内置的HTTP请求库urllib.request请求模块urllib.error异常处理模块urllib.parseurl解析模块urllib.robotparserobots.txt解析模块不需要额外安装,python自带的库。注意:python2importurllib2response=urllib2.urlopen('http://baidu.c
系统 2019-09-27 17:50:06 2273
相信很多小伙伴平时写python的时候都是需要调试程序的,出问题了,需要了解函数内部是怎么跑的,而这个时候很多人都会想到在疑惑的地方使用print函数来打印一下参数来调试。虽然用print也是不失为是一种方法,但是有时如果疑惑的地方多就要每个地方都要加print,这样就显得比较麻烦了。今天发现在Github开源了一个神器,可以清楚让你清楚了解函数内部的运行以及参数值的变化,PySnooper,项目地址:https://github.com/cool-RR/
系统 2019-09-27 17:50:04 2273
前提1.python环境及tensorflow安装成功2.Anaconda安装好,Anaconda安装步骤安装步骤1.下载facenet,https://github.com/davidsandberg/facenet.git2.下载好后解压安装包。3.在自己电脑对应的Anaconda3\Lib\site-packages目录下,新建facenet文件夹4.将下载的facenet文件夹下的src文件夹下的所有文件拷贝到新建的文件夹中。5.最后,在Anaco
系统 2019-09-27 17:48:50 2273
1.什么是FM?FM即FactorMachine,因子分解机。2.为什么需要FM?1、特征组合是许多机器学习建模过程中遇到的问题,如果对特征直接建模,很有可能会忽略掉特征与特征之间的关联信息,因此,可以通过构建新的交叉特征这一特征组合方式提高模型的效果。2、高维的稀疏矩阵是实际工程中常见的问题,并直接会导致计算量过大,特征权值更新缓慢。试想一个10000*100的表,每一列都有8种元素,经过one-hot独热编码之后,会产生一个10000*800的表。因此
系统 2019-09-27 17:48:36 2273
Atom是一款功能强大的跨平台编辑器,插件化的解决方案为atom社区的繁荣奠定了基础。任何人都可以把自己做的组件贡献在github上,并能方便的安装到Atom上使用。JupyterNotebook是另一款广受欢迎的交互式笔记本,支持40多种编程语言。Atom上有一款广受欢迎的插件名叫Hydrogen,是用来在Atom上支持Jupyter的运行,有了它,我们就可以摆脱浏览器,回到IDE里愉快的借助Jupyter写代码了!但是,由于现在处于python向pyt
系统 2019-09-27 17:46:06 2273
Trifinder事件实例实例展示Trifinder对象对的使用。当鼠标移动到一个被分割的三角形上,这个三角形高亮显示,并且它的标签在图标题显示。展示下演示结果:完整代码:importmatplotlib.pyplotaspltfrommatplotlib.triimportTriangulationfrommatplotlib.patchesimportPolygonimportnumpyasnpdefupdate_polygon(tri):iftri=
系统 2019-09-27 17:38:42 2273
今天用dom4j解析的时候报了这个错误Accessrestriction:ThetypeSAXReaderisnotaccessibleduetorestrictiononrequiredlibraryG:\dom4j-1.6.1\dom4j-1.6.1.jar解决方法是:Windows->Preferences->Java->Compiler->Errors/Warnings(Project)Properties->JavaCompiler->Error
系统 2019-08-29 23:45:28 2273
vs2008中文版提供下载(包含中文msdn),包括vs2008序列号和破解方法。下载:MSDNLibraryforVisualStudio2008(MSND)http://www.microsoft.com/downloads/details.aspx?FamilyID=6ff3bc60-32c8-4c22-8591-a20bf8dff1a2&DisplayLang=zh-cnVisualStudioTeamSystem2008TeamSuite(vs2
系统 2019-08-29 23:42:08 2273
多年来,假防病毒软件FAKEAV变种一直是Windows平台的困扰。但最近,该恶意软件也开始转战MacOSX平台。就像Windows平台的假防病毒软件FAKEAV变种一样,Mac平台的假防病毒软件最常利用的感染途径同样也是毒化的搜索引擎关键词。作者:JoeyCostoya(趋势科技资深威胁研究员)举例来说,以下就是一个遭到毒化的搜索结果:如果在Mac计算机上点选该链接,用户将被连到下列网页:单击上图中的OK按钮,就会出现一个看似在帮系统扫瞄病毒的界面。假的
系统 2019-08-29 23:25:50 2273
前段时间写了一个javasocket相关的程序,大概意思就是client和server是采用socket长连接方式,之间通信都是通过通过ObjectOutputStream和OjbectInputStream来进行写和读操作。其实以前就很多次的用到过ObjectOutputStream,不过没有详细的琢磨过,这次就想着琢磨一下,主要也是因为我发现程序中存在内存泄漏的问题,通过Jprobe跟踪,排除了别的泄漏因素,最后定位在是在socket这里发生了泄漏,具
系统 2019-08-29 22:55:39 2273