- 军军小站|张军博客
搜索到与相关的文章
Python

Python使用scrapy爬取阳光热线问政平台过程解析

目的:爬取阳光热线问政平台问题反映每个帖子里面的标题、内容、编号和帖子urlCrawlSpider版流程如下:创建爬虫项目dongguangscrapystartprojectdongguang设置items.py文件#-*-coding:utf-8-*-importscrapyclassNewdongguanItem(scrapy.Item):#definethefieldsforyouritemherelike:#name=scrapy.Field()

系统 2019-09-27 17:57:06 1947

Python

python print出共轭复数的方法详解

复数是由一个实数和一个虚数组合构成,表示为:x+yj一个复数时一对有序浮点数(x,y),其中x是实数部分,y是虚数部分。Python语言中有关复数的概念:1、虚数不能单独存在,它们总是和一个值为0.0的实数部分一起构成一个复数2、复数由实数部分和虚数部分构成3、表示虚数的语法:real+imagej4、实数部分和虚数部分都是浮点数5、虚数部分必须有后缀j或J复数的内建属性:复数对象拥有数据属性,分别为该复数的实部和虚部。复数还拥有conjugate方法,调

系统 2019-09-27 17:56:19 1947

Python

浅析Python3中的对象垃圾收集机制

###概述GC作为现代编程语言的自动内存管理机制,专注于两件事:1.找到内存中无用的垃圾资源2.清除这些垃圾并把内存让出来给其他对象使用。在Python中,它在每个对象中保持了一个计数器,用于记录指向该对象的的引用的个数。一旦这个计数器为0时,则立即回收该对象,对象占用的内存空间将被释放。引用计数我们可以利用简单的变量引用和销毁窥见引用计数过程。增加引用计数增加引用计数的方式多种,即对象进行引用,那么计数器都会+1#创建第一个引用a=3#用其他变量名引用b

系统 2019-09-27 17:56:09 1947

Python

python爬虫(4)——scrapy框架

安装urllib库更适合写爬虫文件,scrapy更适合做爬虫项目。步骤:先更改pip源,国外的太慢了,参考:https://www.jb51.net/article/159167.htm升级pip:python-mpipinstall--upgradepippipinstallwheelpipinstalllxmlpipinstallTwistedpipinstallscrapy常用命令核心目录新建项目:scrapystartprojectmcq运行独立的

系统 2019-09-27 17:55:57 1947

Python

Python的语言类型(详解)

Python是强类型的动态脚本语言。强类型:不允许不同类型相加动态:不使用显示数据类型声明,且确定一个变量的类型是在第一次给它赋值的时候脚本语言:一般也是解释型语言,运行代码只需要一个解释器,不需要编译强类型语言和弱类型语言1.强类型语言:使之强制数据类型定义的语言。没有强制类型转化前,不允许两种不同类型的变量相互操作。强类型定义语言是类型安全的语言,如Java、C#和python,比如Java中“inti=0.0;”是无法通过编译的;2.弱类型语言:数据

系统 2019-09-27 17:54:55 1947

Python

Python3.6+selenium2.53.6自动化测试_ddt数据驱动(二)

环境:编辑工具:浏览器:有问题可以联系qq:1776376537安装DDT一分析1导入DDT2类前引入ddt3分三次,作为三个字典把数据传过来二代码#导入包fromseleniumimportwebdriverimportunittestfrompages.login_pageimportLoginPage,lgoing_urlfromcommon.baseimportBaseimportddt'''先思考下手工操作顺序(主要流程)第1个用例:输入admi

系统 2019-09-27 17:54:12 1947

Python

Python之OpenGL笔记(18):正弦波的绘制

一、目的1、正弦函数的基本画法;2、GLSL方式实现练习。二、程序运行结果三、glDrawArrays函数GLSL画这些基本的类型使用的函数主要是glDraw*系列的函数:voidglDrawArrays(GLenummode,GLintfirst,GLsizeicount);mode有以下类型,画点GL_POINTS,画线GL_LINES,顺连线段GL_LINE_STRIP,回环线段GL_LINE_LOOP,三角形GL_TRIANGLES,GL_TRIA

系统 2019-09-27 17:53:38 1947

Python

【跟着Head First学python】4、代码重用:函数与模块

1、函数相比于C++,python中写一个函数需要一个关键字def。其主要结构如下:def函数名(函数参数):"""函数文档,docstring"""函数体return如果一个函数是一个类的一部分,它就称为一个方法。注意函数没有类型信息,无论是函数参数还是返回值,都不需要类型信息,当然为了便于阅读,可以使用函数注解。函数注解是py3新增的一项功能,类似注释,它们只负责提高程序的可读性,而不会对程序功能做出任何改变。推荐python代码为了可读性,遵循PEP

系统 2019-09-27 17:53:32 1947

Python

python统计指定目录内文件的代码行数

python统计指定目录内文件的代码行数,程序实现统计指定目录内各个python文件的代码总行数,注释行数,空行数,并算出所占百分比这符合一些公司的小需求,实际代码量的统计工作效果如图代码如下:#coding:utf-8importos,re#代码所在目录FILE_PATH='./'defanalyze_code(codefilesource):'''打开一个py文件,统计其中的代码行数,包括空行和注释返回含该文件总行数,注释行数,空行数的列表:param

系统 2019-09-27 17:51:01 1947

Python

Centos下实现安装Python3.6和Python2共存

写在前面centos6.8中默认自带的python版本为python2.6,那么这里需要将其改为python3下载并解压官方下载地址为https://www.python.org/downloads/,这里已3.6.3为例。#下载wgethttps://www.python.org/ftp/python/3.6.3/Python-3.6.3.tgz#解压tar-zxvfPython-3.6.3.tgzcdPython-3.6.3安装[root@localh

系统 2019-09-27 17:50:51 1947