课程作业要求,遂学习了python的自动化selenium工具,并爬取京东商品评论数据练练手。目录:一、环境二、第三方库三、分析1.1chrome驱动1.2定位评论元素1.3循环爬取评论数据并保存为CVS文件导出其中xpath对应网页元素评论:用户名:四、代码五、结果一、环境我使用的是windows+python3.6+pycharm,大家自己去下载对应的环境。二、第三方库fromseleniumimportwebdriverfromtimeimports
系统 2019-09-27 17:55:01 2540
基于requests模块发起ajax的get请求需求:爬取豆瓣电影分类排行榜https://movie.douban.com/中的电影详情数据用抓包工具捉取使用ajax加载页面的请求鼠标往下下滚轮拖动页面,会加载更多的电影信息,这个局部刷新是当前页面发起的ajax请求,用抓包工具捉取页面刷新的ajax的get请求,捉取滚轮在最底部时候发起的请求这个get请求是本次发起的请求的urlajax的get请求携带参数获取响应内容不再是页面数据,是json字符串,是
系统 2019-09-27 17:53:20 2540
python运维必须会用的库:1os,pathlib(系统操作库)2logging(运维用到的核心库,用于快速写入日志,非常好用)3pymysql,pymssql,cx_oracle(这些是常用数据库驱动,很多,不一一列举)4datetime(日期计算最常用的库),time(经常在统计性能的时候用到,以及sleep)5random(随机数库,时常会用到)6threading,multiprocessing(多线程,多进程,什么区别就不赘述了,自己百度),q
系统 2019-09-27 17:51:46 2540
不扯没用的,直接上代码1、环境:windows(Linux下应该也没问题)2、python版本:3.63、所需依赖:PyMuPDF(pipinstallpymupdf)以下是代码#-*-coding:utf-8-*-"""1、安装库pipinstallpymupdf2、直接运行"""importfitz#打开PDF文件,生成一个对象doc=fitz.open('1.pdf')forpginrange(doc.pageCount):page=doc[pg]r
系统 2019-09-27 17:49:25 2540
词云图是将词汇按照频率的高低显示不同大小而形成的图,可以一目了然地看出关键词。下面是词云图的python代码~#导入需要模块importjiebaimportnumpyasnpimportmatplotlib.pyplotaspltfromPILimportImagefromwordcloudimportWordCloud,STOPWORDS,ImageColorGeneratortext_road=str(input('请输入文章的路径:'))pictu
系统 2019-09-27 17:48:34 2540
上一篇文章中我们介绍了python语言的几个特点,并在最后留了一个问题,python除了上下执行以外有没有其他的执行方式。今天我们就来介绍python中的数据类型和控制流。数据类型python中包含六个标准数据类型分别为:Number(数字)、String(字符串)、List(列表)、Tuple(元组)、Set(集合)、Dictionary(字典)。不同的数据类型往往对应不同的用途。这个很好理解。比如你可以用一个字符串用来储存一个人的名字。name="六小
系统 2019-09-27 17:48:08 2540
本文实例为大家分享了PythonOpenCV调用摄像头检测人脸并截图的具体代码,供大家参考,具体内容如下注意:需要在python中安装OpenCV库,同时需要下载OpenCV人脸识别模型haarcascade_frontalface_alt.xml,模型可在OpenCV-PCA-KNN-SVM_face_recognition中下载。使用OpenCV调用摄像头检测人脸并连续截图100张#-*-coding:utf-8-*-#import进openCV的库i
系统 2019-09-27 17:46:16 2540
floor()方法返回不大于x的最大整数(向下取整)。语法以下是floor()方法的语法:importmathmath.floor(x)注意:此函数是无法直接访问的,所以我们需要导入math模块,然后需要用math的静态对象来调用这个函数。参数x--这是一个数值表达式。返回值此方法返回不大于x的最大整数。例子下面的例子显示了floor()方法的使用。#!/usr/bin/pythonimportmath#Thiswillimportmathmodulepr
系统 2019-09-27 17:38:10 2540
Java异常处理1:概念:异常是java程序中运行时出现的错误的一种机制。抛出异常是指程序中如果出现异常,则抛出实例,通过实例封装了异常的信息提交到Java运行时系统,这个过程叫做抛出异常。Exception这个术语是对词组“exceptionalevent”简短表达,其定义如下:Anexceptionisaneventthatoccursduringtheexecutionofaprogramthatdisruptsthenormalflowofinst
系统 2019-08-29 23:25:42 2540
在京东购买了i7500U,却发现除了Googlemaps,其他的Google产品,如gmail、greader全部被阉割了,费了好长时间也没有搜索到解决办法,索性刷机到1.6。期间看了很多大侠的攻略,特别是hiapk的liudidi、白熊等大侠,这里一并谢过。这里总结的方法都是跟这些大侠学来的,我主要是对这些方法进行了一些优化组合,主要目的是自己做个总结,日后刷机时可能用得上,当然,也可能能让新手少走一些弯路,放在这里就算是一个交流贴吧。刷机准备:电脑、数
系统 2019-08-29 23:22:41 2540