搜索到与相关的文章
Python

【Python3爬虫】快就完事了--使用Celery加速你的爬虫

一、写在前面在上一篇博客中提到过对于网络爬虫这种包含大量网络请求的任务,是可以用Celery来做到加速爬取的,那么,这一篇博客就要具体说一下怎么用Celery来对我们的爬虫进行一个加速!二、知识补充1.classcelery.groupgroup这个类表示创建一组要并行执行的任务,不过一组任务是懒惰的,所以你需要运行并对其进行评估。要了解这个类,可以查看文档,或者在Pycharm中直接Ctrl+左键就能直接查看源码了,如下图:当然了,直接看源码还不够,最好

系统 2019-09-27 17:48:01 2316

Python

教你如何将 Sublime 3 打造成 Python/Django IDE开发

1.安装SublimeText3虽然现在的Sublime3还处于beta阶段,但已经非常稳定了,而且速度比Sublime2得到了增强.Sublime3可以到官网下载并安装.Sublime虽然是免费软件,但如果有足够的经济能力,可以考虑购买以表示支持.2.安装PackageControlSublimePackageControl可以说是必须安装的插件,因为其方便的提供了安装/升级/删除Sublime插件的功能,安装方法见PackageControl官网.安装

系统 2019-09-27 17:47:56 2316

Python

Python基础小结

目录一、执行Python程序的两种方式1.1交互式1.2命令行式二、执行Python程序的两种IDE2.1Pycharm2.2Jupyter三、变量3.1什么是变量?3.2变量的组成?3.3变量名的定义规范3.4定义变量的两种方式3.5常量四、注释4.1单行注释4.2多行注释4.3引用计数4.4垃圾回收机制4.5小整数池五、花式赋值5.1链式赋值5.2交叉赋值六、与用户交互七、input八、格式化输出8.1占位符8.2format格式化8.3f-strin

系统 2019-09-27 17:45:33 2316

编程技术

创建人物特写视频flash教程(五)

现在您已创建了该视频,下面介绍了如何在FlashProfessional8中使用视频导入向导创建FLV:打开一个新的FlashProfessional8文档,然后选择“文件”›“导入”›“导入视频”以打开视频导入向导。当“选择视频”对话框打开时,单击“浏览”按钮并导航到特写视频。打开该对话框时,单击“下一步”按钮以进入“部署”屏幕。一般情况下,会询问您如何在FlashPlayer8中播放该视频。选择“从Web服务器渐进式下载”选项,并单击“下一步”以打开“

系统 2019-08-29 23:36:16 2316

编程技术

程序员妻子自述: 那些程序员教给我的

我曾经跟朋友开玩笑说,这个时代,有两种人的妻子应该要受人尊敬,第一种是军嫂,这是毫无争议的,第二种就是像我这样的,程序员的老婆。当然,这个玩笑半分自嘲半分真。我的本科是穿着大白褂在各种挂着植物、动物、有机化学、无机化学的门牌的实验室里度过的,在显微镜下给三段生的夹竹桃画过横切片图,在大头针和解剖剪子的辅助下找过蚯蚓的三条神经,闻过带有臭鸡蛋味的硫化氢气体……是的,你们都猜对了,我确实是相貌平平,不修边幅,素面朝天的理科女。见了人就开始习惯性地科普:蝴跟蝶,

系统 2019-08-29 23:13:23 2316

编程技术

蓝杰学习小结—线程

线程:一个独立的运行单位31号学习了线程,在此之前我编写的所有Java程序都只有一个主线程,而线程的加入可以让程序在主线程下加入分线程,让程序具备同时进行多项工作的可能在多线程OS中,通常是在一个进程中包括多个线程,每个线程都是作为利用CPU的基本单位,是花费最小开销的实体。线程具有以下属性。1)轻型实体线程中的实体基本上不拥有系统资源,只是有一点必不可少的、能保证独立运行的资源,比如,在每个线程中都应具有一个用于控制线程运行的线程控制块TCB,用于指示被

系统 2019-08-29 23:05:02 2316

编程技术

spagobi bug 20120412 highchart柱状图不显示重

BUG编号2013041201BUG名称HighChart图表不显示重复值BUG症状HighChart柱状图不显示重复值。假设有如下表和数据:通过模板设计出如下图的柱状图:这时候列year2008存在重复值400,而在柱状图中只显示了name=1的400柱,其他name的400柱未显示。BUG原因Spagobi源代码存在bug。BUG解除1.SpagoBI/web-content/js/src/ext/sbi/engines/chart/GenericCh

系统 2019-08-29 22:34:50 2316

Python

日用 Python —— 压缩图片尺寸

自己写了用来压缩DC照片的,批量处理整目录文件,非常方便。需要安装PIL#!/usr/bin/envpythonimportImageimportosimportos.pathimportsyspath=sys.argv[1]small_path=(path[:-1]ifpath[-1]==/elsepath)+_smallifnotos.path.exists(small_path):os.mkdir(small_path)forroot,dirs,fi

系统 2019-08-29 22:21:26 2316

编程技术

前端工程与性能优化(下):静态资源管理与模板

本系列文章从一个全新的视角来思考web性能优化与前端工程之间的关系,通过解读百度前端集成解决方案小组(F.I.S)在打造高性能前端架构并统一百度40多条前端产品线的过程中所经历的技术尝试,揭示前端性能优化在前端架构及开发工具设计层面的实现思路。静态资源管理与模板框架让我们再来看看前面的优化原则表还剩些什么:优化方向优化手段请求数量合并脚本和样式表,拆分初始化负载请求带宽移除重复脚本缓存利用使Ajax可缓存页面结构将样式表放在顶部,将脚本放在底部,尽早刷新文

系统 2019-08-29 22:13:18 2316