实验环境1.环境问题python2.7以上自带的pyunitbottle作为一个python的简易服务器在python安装目录打开命令窗口(具体shift+鼠标右键)执行代码pipinstallbottle2.写一个bottle服务,也就是所谓的一个接口,供给浏览器调用的接口#接口登陆@route('/login//')#是URL中参数defindex(uname,password):sql=get_login(uname,password)#我自己写的登
系统 2019-09-27 17:57:25 2565
码字不易,喜欢请点赞!!!背景:其实两年前就爬了天眼查的很多信息,包括电话、地址等基本信息之外,还有公司的股东、专利以及对外投资等信息,但是当时的电脑没备份,代码都没了。这次山东的某个教育机构有偿找我帮爬天眼查公司电话以及地址信息,所以就重新爬了一下天眼查。准备:selenium+PhatomJS或者selenium+Firefox我这里直接用的后者selenium+Firefox思路爬取这部分信息的话,代码其实不难,主要包括模拟登陆、获得页面网址以及抓取
系统 2019-09-27 17:56:18 2565
原文链接:https://stackoverflow.com/questions/19798153/difference-between-map-applymap-and-apply-methods-in-pandas原文链接:https://stackoverflow.com/questions/19798153/difference-between-map-applymap-and-apply-methods-in-pandasapply()、map(
系统 2019-09-27 17:55:30 2565
目录写在前面一:使用数据库的宏观过程二:数据库使用1、导入数据库模块2、打开数据库2.1、在硬盘上建立数据库2.2、在内存上建立数据库3、创建游标4、执行SQL语句4.1、创建表4.2、新增数据4.2、更新数据4.3、删除数据4.4、查询数据4.5、删除表5、查询并显示数据5.1、全部显示5.2、显示一条5.2、显示多条6、事务提交或回滚6.1、提交6.2、回滚7、关闭数据库连接和游标写在前面SQLite3数据库是一款非常小巧轻量级的嵌入式开源数据库软件,
系统 2019-09-27 17:55:21 2565
看知乎的时候发现了一个“如何正确地吐槽”收藏夹,里面的一些神回复实在很搞笑,但是一页一页地看又有点麻烦,而且每次都要打开网页,于是想如果全部爬下来到一个文件里面,是不是看起来很爽,并且随时可以看到全部的,于是就开始动手了。工具1.Python2.72.BeautifulSoup分析网页我们先来看看知乎上该网页的情况网址:,容易看到,网址是有规律的,page慢慢递增,这样就能够实现全部爬取了。再来看一下我们要爬取的内容:我们要爬取两个内容:问题和回答,回答仅
系统 2019-09-27 17:53:19 2565
描述:通常我们selenium元素的时间经常遇到只要跳转页面了,定位就总是找不到我要找的元素,这是因为的你定位指针driver没有指向第二个页面,所以无法定位。知道原因后哪怎么来切换定位窗口呢,很简历。通过下面语句可获取当前指定的窗口handlename,但是这里很多学者会觉得他获取的就是第二个页面的handlename,从页面显示可得知,其实错了,我也犯过这些的错。我们需要获取driver会话中的所有窗口的handlename,然后在列表中通过遍历切换想
系统 2019-09-27 17:52:57 2565
需求:将utf-8格式的文件转换成gbk格式的文件实现代码如下:复制代码代码如下:defReadFile(filePath,encoding="utf-8"):withcodecs.open(filePath,"r",encoding)asf:returnf.read()defWriteFile(filePath,u,encoding="gbk"):withcodecs.open(filePath,"w",encoding)asf:f.write(u)de
系统 2019-09-27 17:52:51 2565
一、说明本期培训主要是面向想通过python来提高SEO工作效率的SEOer或者是对python爬虫感兴趣的目标人群。主要内容是学习如何通过python来开发各种SEO工具,以及python爬虫的开发。采用最新的python3版本,课程从零基础开始讲起,因此对于python方面完全零基础的小白也是适用的。本期课程用到的操作系统有win7、win10、MacOS、centos等,主要是为了适应适用不同操作系统的学员。课程主要是在MacOS上面讲解,但是对于其
系统 2019-09-27 17:49:00 2565
队列特性:先进先出(FIFO)――先进队列的元素先出队列。来源于我们生活中的队列(先排队的先办完事)。Queue模块最常与threading模块一起构成生产-消费者模型,提供了一个适用于多线程编程的先进先出的数据结构,即队列。该模块源码中包含5个类:其中,Empty和Full是两个异常类,当队列的Queue.get(block=0)或者调用get_nowait()时,如果队列为空,则抛EmptyException异常。同理,当队列的Queue.put(bl
系统 2019-09-27 17:37:55 2565
com.opensymphony.xwork2.interceptor.ParametersInterceptorsetParameters严重:ParametersInterceptor-[setParameters]:UnexpectedExceptioncaughtsetting'submit'on'classcom.learning.action.LoginAction:Errorsettingexpression'submit'withvalue
系统 2019-08-29 22:52:45 2565