搜索到与相关的文章
Python

【Python3爬虫】快就完事了--使用Celery加速你的爬虫

一、写在前面在上一篇博客中提到过对于网络爬虫这种包含大量网络请求的任务,是可以用Celery来做到加速爬取的,那么,这一篇博客就要具体说一下怎么用Celery来对我们的爬虫进行一个加速!二、知识补充1.classcelery.groupgroup这个类表示创建一组要并行执行的任务,不过一组任务是懒惰的,所以你需要运行并对其进行评估。要了解这个类,可以查看文档,或者在Pycharm中直接Ctrl+左键就能直接查看源码了,如下图:当然了,直接看源码还不够,最好

系统 2019-09-27 17:48:01 2256

Python

详解Python发送邮件实例

Python发送邮件需要smtplib和email两个模块。也正是由于我们在实际工作中可以导入这些模块,才使得处理工作中的任务变得更加的简单。今天,就来好好学习一下使用Python发送邮件吧。SMTP是发送邮件的协议,Python内置对SMTP的支持,可以发送纯文本邮件、HTML邮件以及带附件的邮件。Python对SMTP支持有smtplib和email两个模块,email负责构造邮件,smtplib负责发送邮件。1.邮件正文是文本的格式#-*-codin

系统 2019-09-27 17:38:40 2256

Python

跟老齐学Python之画圈还不简单吗?

在python中,循环有一个语句:for语句。简单的for循环例子>>>hello="world">>>foriinhello:...printi...world上面这个for循环是怎么工作的呢?hello这个变量引用的是"world"这个str类型的数据变量i通过hello找到它所引用的"world",然后从第一字符开始,依次获得该字符的引用。当i="w"的时候,执行printi,打印出了字母w,结束之后循环第二次,让i="e",然后执行printi,打

系统 2019-09-27 17:38:21 2256

Python

python批量制作雷达图的实现方法

前言因为工作需要有时候要画雷达图,但是数据好多组怎么办?不能一个一个点excel去画吧,那么可以利用python进行批量制作,得到样式如下:首先制作一个演示的excel,评分为excel随机数生成:1=INT((RAND()+4)*10)/10加入标签等得到的excel样式如下(部分,共计32行):那么接下来就是打开python写码了,本文是基于pycharm进行编写wb=load_workbook(filename=r'C:\Users\Administ

系统 2019-09-27 17:37:48 2256

编程技术

Spring jdbcTemplate应用(一)

JdbcTemplate中的封装了很多实用的方法。首先来介绍一下用JdbcTemplate来查询数据的方法。1.返回指定对象类型的List(query方法)看代码:Java代码publicListgetProductModle(Stringvalue)throwsDataAccessException{ListresultList=newArrayList();Listargs=newArrayList();Stringsql="selectF_CPUT_

系统 2019-08-29 23:24:23 2256

编程技术

Google机器人眼里的百度

今天利用google的网站管理员工具,怀着好奇的心理把国内几个比较大的网站都当成自己的给加了进来,看了一下,竟然发现百度被歧视了,:)。大家都知道,google是根据pr值来评估其他网站的好坏,从而决定其引擎的机器人多长时间抓取一下该网站的页面,而pr值是由外部的链接数量和质量决定的,一般上大的网站pr值都比较高,baidu、sina、sohu和qq这几个网站的pr值都为7。按理他们在google机器人的眼里应该差不多才对,但是今天却发现了一个例外,而且这

系统 2019-08-29 22:52:31 2256

Python

日用 Python —— 压缩图片尺寸

自己写了用来压缩DC照片的,批量处理整目录文件,非常方便。需要安装PIL#!/usr/bin/envpythonimportImageimportosimportos.pathimportsyspath=sys.argv[1]small_path=(path[:-1]ifpath[-1]==/elsepath)+_smallifnotos.path.exists(small_path):os.mkdir(small_path)forroot,dirs,fi

系统 2019-08-29 22:21:26 2256

编程技术

基于上一篇写的SimplePairListPopupWindow

这次使用Pair实现一个简单的SimplePairListPopupWindow,还是为了快速迭代,谅解importjava.util.ArrayList;importandroid.content.Context;importandroid.util.Pair;importandroid.view.View;importandroid.widget.AdapterView;importandroid.widget.LinearLayout.La

系统 2019-08-29 22:17:43 2256

编程技术

ITeye如何在博客中插入图片

使用ITeye已经很长时间了,突然发现自己好像不会在博客中上传图片,于是在网上找了相关的资料,提供给大家参考具体操作步骤如下:在自己的空间中上传对应的影像打开照片,查看网页的代码,找到图片引用httpURL地址将URL地址指明到博客编辑器中ITeye如何在博客中插入图片

系统 2019-08-29 22:11:10 2256

编程技术

参加完OpenParty组织的“微雨薰风”系列讲座后

前两天在Iteye上看到了一篇帖子:技术人员为什么应该参加社区活动?该文主要讲述了作为IT技术人才参与社区的重要性。列出几点如下:让你有机会展示其它才能。比如贫这个特点,在组织中会被视为不正经,在社区中可能就会被很多人视为有趣。让你有机会进行人际交往。社区靠兴趣聚合,是个容易让人放松进行交往的场所。面对机器的时间太多的技术人员来讲,更需要这类场所,来多和人打打交道。提供很多锻炼机会。你希望锻炼演讲演讲,社区就是个舞台;你希望锻炼组织能力,社区有的是这方面需

系统 2019-08-29 22:09:57 2256