搜索到与相关的文章
Python

python网络爬虫原理

爬虫即网络爬虫,英文是WebSpider。翻译过来就是网络上爬行的蜘蛛,如果把互联网看作一张大网,那么爬虫就是在大网上爬来爬去的蜘蛛,碰到想要的食物,就把他抓取出来。我们在浏览器中输入一个网址,敲击回车,看到网站的页面信息。这就是浏览器请求了网站的服务器,获取到网络资源。那么,爬虫也相当于模拟浏览器发送请求,获得到HTML代码。HTML代码里通常包含了标签和文字信息,我们就从中提取到我们想要的信息。通常爬虫是从某个网站的某个页面开始,爬取这个页面的内容,找

系统 2019-09-27 17:51:06 2142

Python

python爬虫---从零开始(一)初识爬虫

我们开始来谈谈python的爬虫。1,什么是爬虫:网络爬虫是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。互联网犹如一个大蜘蛛网,我们的爬虫就犹如一个蜘蛛,当在互联网遇到所需要的资源,我们就会爬取下来,即为爬虫是一个请求网站并且提取数据的自动化程序。2,下面我们来提到两个名词:1)请求,request即为我们的请求,当我们在浏览器内输入网址,敲击回车时,这时浏览器就会发送消息给该网址所在

系统 2019-09-27 17:50:56 2142

Python

Python使用matplotlib实现交换式图形显示功能示例

本文实例讲述了Python使用matplotlib实现交换式图形显示功能。分享给大家供大家参考,具体如下:一代码fromrandomimportchoiceimportnumpyasnpimportmatplotlib.pyplotaspltfrommatplotlib.widgetsimportRadioButtons,Buttont=np.arange(0.0,2.0,0.01)s0=np.sin(2*np.pi*t)s1=np.sin(4*np.pi

系统 2019-09-27 17:50:22 2142

Python

Python画图示例(4) 3D绘图

Python画图示例(1)一维数据集绘图Python画图示例(2)二维数据集绘图Python画图示例(3)其他绘图样式,散点图,直方图等Python画图示例(4)3D绘图importnumpyasnpimportmatplotlib.pyplotaspltstike=np.linspace(50,150,24)ttm=np.linspace(0.5,2.5,24)stike,ttm=np.meshgrid(stike,ttm)print(stike[:2]

系统 2019-09-27 17:50:08 2142

Python

python threading模块(全)

一、线程与进程的介绍参考之前写的VC++的多线程与互斥对象:https://blog.csdn.net/Gordennizaicunzai/article/details/52268343二、python全局解析器锁(GIL)。python代码相对于其它语言在多线程效率上有个“先天性缺陷”——python有个虚拟机(又名解析器主循环)对代码进行执行控制,在解析器主循环中单位时间内只能有一个控制线在执行。意思是任意时刻只能有一个程序在运行,即使内存中有多个程

系统 2019-09-27 17:48:22 2142

Python

Python3+Pycharm+PyQt5环境搭建步骤图文详解

搭建环境:操作系统:Win1064bitPython版本:3.7Pycharm:社区免费版一、Python3.7安装下载链接:官网https://www.python.org/downloads/windows/或腾讯软件中心下载https://pc.qq.com/detail/5/detail_24685.html或其他站点下载。我下载的是python-3.7.0-amd64。下载到安装包后打开,如果想安装到默认路径(C盘)的话一直点下一步就可以了,或者

系统 2019-09-27 17:48:17 2142

Python

分析运行中的 Python 进程详细解析

在Java中打印当前线程的方法栈,可以用kill-3命令向JVM发送一个OS信号,JVM捕捉以后会自动dump出来;当然,也可以直接使用jstack工具完成,这些方法好几年前我在这篇性能分析的文章中介绍过。这样的需求可以说很常见,比如定位死锁,定位一个不工作的线程到底卡在哪里,或者定位为什么CPU居高不下等等问题。现在工作中我用的是Python,需要线上问题定位的缘故,也有了类似的需求――想要知道当前的Python进程“在干什么”。但是没有了JVM的加持,

系统 2019-09-27 17:46:00 2142

Python

CentOS中使用virtualenv搭建python3环境

问题描述环境:CentOS6.5想在此环境下使用python3进行开发,但CentOS6.5默认的python环境是2.6.6版本。之前的做法是直接从源码安装python3,替换掉现有的开发环境,但在随后使用过程中发现系统很多脚本依赖python2.6,直接替换会导致很多软件不正常。今天发现有朋友使用virtualenv搭建python3开发环境,这里记录下,也方便我以后查阅。安装python3安装脚本如下:复制代码代码如下:wgethttps://www

系统 2019-09-27 17:45:51 2142

编程技术

Hessian源码分析(三)

HessianSkeleton是Hessianserver端的核心类,主要功能是接收网络输入流(被包装为AbstractHessianInput),反序列化输入流得到methodName和参数,然后调用服务端的服务,得到结果后序列化为输出流,返回给客户端,主要流程如下图所示:HessianSkeleton的核心代码如下所示:publicvoidinvoke(Objectservice,AbstractHessianInputin,AbstractHessi

系统 2019-08-29 22:05:03 2142