- 军军小站|张军博客
搜索到与相关的文章
Python

Python爬虫爬有道翻译

python爬取有道翻译实现原理操作步骤注意事项实现原理利用urllib包中的request对象模拟浏览器访问有道翻译服务器(发送相同格式的request)。用urllib包中的parse来将数据转化为相同格式。得到的相应通过编码之后,以dict形式取出翻译内容。importurllib.requestimporturllib.parseimportjsonurl='http://fanyi.youdao.com/translate?smartresult

系统 2019-09-27 17:57:02 1968

Python

Python:Scrapy爬虫简单使用

创建爬虫目录:scrapystartprojectspiderName调试命令scrapyshell网站名调试命令可直接进行css和xpath的调试;成功执行命令之后可使用:response.xpath(xpath表达式)获取所需的内容。xpath说明:XPath是一门在XML文档中查找信息的语言表达式描述实例nodename选取nodename节点的所有子节点//div/从根节点选取/div//不考虑位置选择节点//div.选取当前节点./div…选取当

系统 2019-09-27 17:56:45 1968

Python

python-爬虫初识-采集汽车资讯信息案例(一)

目录一,什么是爬虫二,初识爬虫-采集汽车资讯信息三,requests和BeautifulSoup模块基本使用requests:importrequestsBeautifulSoup:frombs4importBeautifulSoup四,初识爬虫-自动登录购酒网http://order.gjw.com/login/login五,requests模块详细介绍六,一大波"自动登陆"示例一,什么是爬虫很久很久以前,还没有"百度","谷歌",有的还是传说中的"大黄

系统 2019-09-27 17:56:42 1968

Python

Python学习二:关于VS2017中pip3 install

Python3.6执行pip3installtesserocrpillow,报错:error:MicrosoftVisualC++14.0isrequired.Getitwith"MicrosoftVisualC++BuildTools":http://landinghub.visualstudio.com/visual-cpp-build-tools解决办法:去下方链接下载匹配版本的whl文件https://github.com/simonfluecki

系统 2019-09-27 17:55:28 1968

Python

【Python3爬虫】当爬虫碰到表单提交,有点意思

一、写在前面我写爬虫已经写了一段时间了,对于那些使用GET请求或者POST请求的网页,爬取的时候都还算得心应手。不过最近遇到了一个有趣的网站,虽然爬取的难度不大,不过因为表单提交的存在,所以一开始还是有点摸不着头脑。至于最后怎么解决的,请慢慢往下看。二、页面分析这次爬取的网站是:https://www.ctic.org/crm?tdsourcetag=s_pctim_aiomsg,该网站提供了美国的一些农田管理的数据。要查看具体的数据,需要选择年份、单位、

系统 2019-09-27 17:53:08 1968

Python

Python用户推荐系统曼哈顿算法实现完整代码

出租车几何或曼哈顿距离(ManhattanDistance)是由十九世纪的赫尔曼・闵可夫斯基所创词汇,是种使用在几何度量空间的几何学用语,用以标明两个点在标准坐标系上的绝对轴距总和。图中红线代表曼哈顿距离,绿色代表欧氏距离,也就是直线距离,而蓝色和黄色代表等价的曼哈顿距离。曼哈顿距离――两点在南北方向上的距离加上在东西方向上的距离,即d(i,j)=|xi-xj|+|yi-yj|。对于一个具有正南正北、正东正西方向规则布局的城镇街道,从一点到达另一点的距离正

系统 2019-09-27 17:53:07 1968

Python

python 排列 组合

排列defperm(arr,stack):ifnotarr:print(stack)#到树的最后,输出结果tmp=stack.copy()res.append(tmp)else:#没有到树的叶子节点的时候,使用递归继续往下找。foriinrange(len(arr)):stack.append(arr[i])delarr[i]perm(arr,stack)arr.insert(i,stack.pop())arr=[1,2,3]stack=[]res=[]p

系统 2019-09-27 17:50:13 1968

Python

Python中的面向对象编程详解(下)

继承继承描述了基类的属性如何“遗传”给派生类。一个子类可以继承它的基类的任何属性,不管是数据属性还是方法。创建子类的语法看起来与普通(新式)类没有区别,一个类名,后跟一个或多个需要从其中派生的父类:复制代码代码如下:classSubClassName(ParentClass1[,ParentClass2,...]):'optionalclassdocumentationstring'class_suite实例复制代码代码如下:classParent(obj

系统 2019-09-27 17:50:10 1968

Python

python基于C/S模式实现聊天室功能

最简单的模式,C/S模式实现聊天室从半双工开始,何谓半双工?半双工即是说双方可以互发消息,但一次只能一个用户发送。只要稍微会点socket编程的人都会觉得很简单,所以过过场,直接上代码。服务器端代码:fromsocketimport*fromtimeimportctimeHOST=''PORT=4568BUFSIZE=1024ADDR=(HOST,PORT)tcpSerSocket=socket(AF_INET,SOCK_STREAM)tcpSerSock

系统 2019-09-27 17:50:06 1968

Python

Python中的Matplotlib模块入门教程

1关于Matplotlib模块Matplotlib是一个由JohnHunter等开发的,用以绘制二维图形的Python模块。它利用了Python下的数值计算模块Numeric及Numarray,克隆了许多Matlab中的函数,用以帮助用户轻松地获得高质量的二维图形。Matplotlib可以绘制多种形式的图形包括普通的线图,直方图,饼图,散点图以及误差线图等;可以比较方便的定制图形的各种属性比如图线的类型,颜色,粗细,字体的大小等;它能够很好地支持一部分Te

系统 2019-09-27 17:49:31 1968