搜索到与相关的文章
Python

Python中Scrapy爬虫图片处理详解

下载图片下载图片有两种方式,一种是通过Requests模块发送get请求下载,另一种是使用Scrapy的ImagesPipeline图片管道类,这里主要讲后者。安装Scrapy时并没有安装图像处理依赖包Pillow,需手动安装否则运行爬虫出错。首先在settings.py中设置图片的存储路径:IMAGES_STORE='D:/'图片处理相关的选项还有:#图片最小高度和宽度设置,可以过滤太小的图片IMAGES_MIN_HEIGHT=110IMAGES_MIN

系统 2019-09-27 17:37:58 2107

Python

关于Python作用域自学总结

作用域:顾名思义,作用的范围。如果你是自学者,而且已经进军到函数这一部分了,那么就应当了解下Python的作用域。否则你可能会像我一样,总是对一个变量名同时存在函数内和函数外且有不同值搞的晕头转向。在这里就总结一下,在本人的知识范围内所了解到的作用域是什么样的,LEGB规则到底规定了什么。全局范围的产生(global):我们创建一个xxx.py文件,就是一个模块,这时一个作用域就产生了。这个范围是整个模块,称作Global,全局范围。例如:创建一个文件de

系统 2019-09-27 17:37:48 2107

编程技术

初步认识 LESS

LESS是一个流行的样式表语言,它提供了CSS3也未曾实现的多种功能,让您编写CSS更加方便,更加直观。LESS已经被广泛使用在多种框架中(例如:BootStrap)。本文将介绍LESS产生的背景、优势、演化与CSS之间的转化,及其典型的应用场景,并将其与其他样式表语言进行比较。相信前端开发工程师会喜欢LESS,灵活运用LESS以提高开发效率。LESS背景介绍LESS提供了多种方式能平滑的将写好的代码转化成标准CSS代码,在很多流行的框架和工具盒中已经能经

系统 2019-08-29 23:45:45 2107

编程技术

服务器用户xxx不是数据库bbb的有效用户

网上买了一空间,支持MSSQL,可用MSSQL的“连接到服务器”远程连接上去,连接上去后直接点“新建查询”即可直接输入SQL语句查我自己的数据库,但是在“对象资源管理器”中刷新“数据库”,弹出“服务器用户xxx不是数据库bbb的有效用户”的对话框,如图:因为该MSSQL中不仅仅有我买的数据库,还有其他人买的数据库,而我的登陆用户只能操纵我的数据库,所以就会出来“。。。。不是有效用户”的提示,这样子的话我想在图形界面下查询、更新、备份数据库的时候就不行了。要

系统 2019-08-29 23:40:42 2107

编程技术

程序员妻子自述: 那些程序员教给我的

我曾经跟朋友开玩笑说,这个时代,有两种人的妻子应该要受人尊敬,第一种是军嫂,这是毫无争议的,第二种就是像我这样的,程序员的老婆。当然,这个玩笑半分自嘲半分真。我的本科是穿着大白褂在各种挂着植物、动物、有机化学、无机化学的门牌的实验室里度过的,在显微镜下给三段生的夹竹桃画过横切片图,在大头针和解剖剪子的辅助下找过蚯蚓的三条神经,闻过带有臭鸡蛋味的硫化氢气体……是的,你们都猜对了,我确实是相貌平平,不修边幅,素面朝天的理科女。见了人就开始习惯性地科普:蝴跟蝶,

系统 2019-08-29 23:13:23 2107

编程技术

ESFramework介绍之(9)-- 插件对(Addin Pai

使用ESFramework开发C/S(通常为4层、3层也没问题)应用,当需要增加一项新的业务时,我们需要做的仅仅是开发两个插件,一个是服务端的业务功能插件(FunAddin),一个是客户端插件(PassiveAddin),这两个插件合在一起称为AddinPair。开发这两个插件,只需要关注于业务,而其它与业务无关的比如网络通信、加密、数据安全,都不用管。ESFramework很好的将这些关注点分离开来,使得写“业务”插件的程序员的工作变得非常单纯,在ESF

系统 2019-08-29 23:05:26 2107

编程技术

好困好困

过完年回来都没有好好的休息过,现在每天最怕的早上一醒来,因为意味着新的一天又将开始,而人也老了一天,又要面对不知道多少的事情,昨天的任务还没完成,今天又要为很多事情而忙碌,一听到手机的闹铃就害怕了现在,呵呵。这段真的很忙很累,回到家洗个澡,基本想睡觉了。真的想好好的休息一个月,也许哪一天真的突然辞职不干了,我会去旅游,放松自己的心情,把身体调整好来,毕竟身体才是最重要的。广州的空气越来越不好,真的怀念桂林的环境,不过听说最近要搞什么工业,不知道那些领导是疯

系统 2019-08-29 22:57:11 2107

编程技术

HTML5 audio 實驗

HTML5audio實驗转载自http://zespia.tw/blog/2012/02/04/lab-html5-audio/寒假即將結束,不巧膝蓋突然中了一箭,便決定實驗HTML5audio標籤的效果,雖然已有jPlayer這款輕便好用的播放器,但不折騰一下就沒辦法消磨時間了,所以本次的實驗品完全由我操刀。開始之前首先必須了解audio標籤的使用方式:1234

系统 2019-08-29 22:37:41 2107

编程技术

JSON 数据的4中解析方式比较

作为一种轻量级的数据交换格式,json正在逐步取代xml,成为网络数据的通用格式。有的json代码格式比较混乱,可以使用此“http://www.bejson.com/”网站来进行JSON格式化校验(点击打开链接)。此网站不仅可以检测Json代码中的错误,而且可以以视图形式显示json中的数据内容,很是方便。从IOS5开始,APPLE提供了对json的原生支持(NSJSONSerialization),但是为了兼容以前的ios版本,可以使用第三方库来解析J

系统 2019-08-29 22:37:34 2107

编程技术

藉由分离来降低风险:云端内的职权分离

作者:ToddThiemann许多政府法规都规定企业在内部控管机制上必须采取职权分离原则。职权分离原则是将一项关键工作由不同人员共同负责,藉由「监督与制衡」来达到防弊与防错。国际计算机稽核协会在这里有一篇关于职权分离的不错文章,此外,网络作家NickSzabo在这里也讨论了一些职权分离的概念。内部控管与职权分离适用于Sarbanes-Oxley沙宾法案(请看这里的内部控管报告)、PCIDSS、FERC等等法规的遵规。产业知名分析机构Forrester和Ga

系统 2019-08-29 22:31:52 2107