1.知乎文章图片爬取器之二博客背景昨天写了知乎文章图片爬取器的一部分代码,针对知乎问题的答案json进行了数据抓取,博客中出现了部分写死的内容,今天把那部分信息调整完毕,并且将图片下载完善到代码中去。首先,需要获取任意知乎的问题,只需要你输入问题的ID,就可以获取相关的页面信息,比如最重要的合计有多少人回答问题。问题ID为如下标红数字编写代码,下面的代码用来检测用户输入的是否是正确的ID,并且通过拼接URL去获取该问题下面合计有多少答案。在学习过程中有什么
系统 2019-09-27 17:55:50 2442
Python自带一个轻量级的关系型数据库SQLite。这一数据库使用SQL语言。SQLite作为后端数据库,可以搭配Python建网站,或者制作有数据存储需求的工具。SQLite还在其它领域有广泛的应用,比如HTML5和移动端。Python标准库中的sqlite3提供该数据库的接口。我将创建一个简单的关系型数据库,为一个书店存储书的分类和价格。数据库中包含两个表:category用于记录分类,book用于记录某个书的信息。一本书归属于某一个分类,因此boo
系统 2019-09-27 17:53:53 2442
先配图看一下框架:从上面两张结构图,大概讲讲每个模块下的类实现的一些方法:1、config||-config.yml配置文件,主要存放一些全局配置变量,如:(1)截图、报告、驱动存放路径;(2)发送邮件使用到的发件人邮箱及登录密码(因为发送邮件一般用于自动发送测试报告,所以发件人比较固定);(3)绕过登录验证码要写入的cookies信息||-config.py包含读取配置文件方法和一些全局参数2、data||-存放一些数据文件!!-generator一个生
系统 2019-09-27 17:53:05 2442
前言:json是一种通用的数据类型,任何语言都认识,长得像字典,形式也是k-v{},其实json是字符串。字符串不能用key、value来取值,要先转成字典才可以格式如下:{"error_code":0,#要使用双引号,如果是单引号则运行时会报错,可以上网做在线json格式校验"stu_info":[{"id":0,"name":"a","sex":"男","age":22,"grade":"天蝎座","gold":100},{"id":1,"name":
系统 2019-09-27 17:50:53 2442
OpenCV是应用最被广泛的的开源视觉库。他允许你使用很少的代码来检测图片或视频中的人脸。这里有一些互联网上的教程来阐述怎么在OpenCV中使用仿射变换(affinetransform)旋转图片--他们并没有处理旋转一个图片里的矩形一般会把矩形的边角切掉这一问题,所以产生的图片需要修改。当正确的使用一点代码时,这是一点瑕疵。defrotate_about_center(src,angle,scale=1.):w=src.shape[1]h=src.shap
系统 2019-09-27 17:49:24 2442
决策树①——信息熵&信息增益&基尼系数决策树②——决策树算法原理(ID3,C4.5,CART)决策树③——决策树参数介绍(分类和回归)决策树④——决策树Sklearn调参(GridSearchCV调参及过程做图)决策树应用实例①——泰坦尼克号分类决策树应用实例②——用户流失预测模型决策树应用实例③——银行借贷模型上一篇总结了Sklearn库用GridSearchCV调参的过程,今天用python依据现代女生的审美创建一颗简单的决策树,看下是否能代表大众的心
系统 2019-09-27 17:45:44 2442
引用计数在Python源码中,每一个对象都是一个结构体表示,都有一个计数字段。typedefstruct_object{intob_refcnt;struct_typeobject*ob_type;}PyObject;PyObject是每个对象必有的内容,其中ob_refcnt就是作为引用计数。当一个对象有了新的引用时,它的ob_refcnt就会增加,引用它的对象被删除时则减少。一旦对象的引用计数为0,该对象立即被回收,占用空间就会被释放。优点简单易用实时
系统 2019-09-27 17:45:38 2442
在Python中,有四类最常见的内建容器类型:列表(list)、元组(tuple)、字典(dict)、集合(set)。通过单独或是组合使用它们,可以高效的完成很多事情。Python语言自身的内部实现细节也与这些容器类型息息相关。比如Python的类实例属性、全局变量globals()等就都是通过字典类型来存储的。在这篇文章里,我首先会从容器类型的定义出发,尝试总结出一些日常编码的最佳实践。之后再围绕各个容器类型提供的特殊机能,分享一些编程的小技巧。当我们谈
系统 2019-09-27 17:45:32 2442
1.首先确认python的版本为2.3.4以上,如果不是需要升级python的版本python-V检查python版本2.安装mysql,比如安装在/usr/local/mysql目录下3.下载MySQL-python-1.2.2.tar.gz地址https://sourceforge.net/projects/mysql-python/4.安装MySQl-python复制代码代码如下:tarxvzfMySQL-python-1.2.2.tar.gzcdM
系统 2019-09-27 17:37:47 2442
我们都知道Python中else的基本用法是在条件控制语句中的if...elif...else...,但是else还有两个其它的用途,一是用于循环的结尾,另一个是用在错误处理的try中。这原本是Python的标准语法,但由于和大部分其它编程语言的习惯不太一样,致使人们有意或无意地忽略了这些用法。另外,对于这些用法是否符合0×00TheZenofPython的原则以及该不该广泛使用也存在很多争议。例如在我看到的两本书里(EffectivePythonVSWr
系统 2019-09-27 17:37:37 2442