声明：仅为了学习爬虫，请勿用于商业和恶意爬取数据，否则后果自负，作者享有该文章的所有解释权原创文章：只需要在程序运行时输入一个数字，就会爬取1-该页数的图片，并且爬取小图对应的详情大图（套图），代码复制可用，下面是我爬取的部分数据。小图太过性感，这里就不截图了importrequestsimportreimportosheaders={"User-Agent":"Mozilla/5.0(WindowsNT6.1;WOW64)AppleWebKit/537.
系统 2019-09-27 17:48:57 2222
不得不说python的自制包的相关工具真是多且混乱，什么setuptools,什么distutils，什么wheel，什么egg！！怎么有这么多啊？？而且我的需求且且是创建一个自制包管理自己常用的代码，也必不想提交到PyPI，仅仅只需要安装到本机就行。下面就是几个关键步骤。文件目录布局├──package1│└──-├──init.py||──mod1.py│└──mod2.py├──setup.py|──README.md编写setup.py文件，类似如
系统 2019-09-27 17:47:59 2222
文章目录H5数据集的使用使用h5py的group分割GB级数据H5数据集的使用#创建withh5py.File("data_train.h5",'w')ashf:hf.create_dataset('train_input',data=shuffled_input)hf.create_dataset('train_label',data=shuffled_label)#打开withh5py.File("data_train.h5",'r')ashf:tra
系统 2019-09-27 17:46:09 2222
1.将类似如下程序中的切片变得更可读###位置##0123456789012345678901234567890123456789012345678901234567890'record='....................100.......513.25..........'cost=int(record[20:32])*float(record[40:48])利用slice()函数创建slice对象，该对象可用于任何切片可应用的地方如：>>>it
系统 2019-09-27 17:45:24 2222
下载图片下载图片有两种方式，一种是通过Requests模块发送get请求下载，另一种是使用Scrapy的ImagesPipeline图片管道类，这里主要讲后者。安装Scrapy时并没有安装图像处理依赖包Pillow，需手动安装否则运行爬虫出错。首先在settings.py中设置图片的存储路径：IMAGES_STORE='D:/'图片处理相关的选项还有：#图片最小高度和宽度设置，可以过滤太小的图片IMAGES_MIN_HEIGHT=110IMAGES_MIN
系统 2019-09-27 17:37:58 2222
下面是struts2标签的常用的用法一定要注意：url中includeParams的属性的默认值是get，如果没有在struts.xml指定新的值，那么使用url标签引用的所有的静态文件都会带上通过get方法传递的参数值。另外：includeParams的属性值还有none、allall,是把get和post
系统 2019-08-29 23:50:44 2222
这是学习AJAX的第一篇文章，我把自己学习一些心得写出来，因为是从初学者的脚度出发，可能会写得比较详细，因为我就是一个初学者，也知道作为一个初学者，随随便便的拿一个例子就看看，是只知道要这样，但为什么要这样却不清楚，我这里就尽我自己的语言，让初学者和我一样，能够看了这篇文章之后，“哦，这里原来是这样的”。我个人还是喜欢从实例出发，对我自己而言，看了过后如果没有实例巩固，效果就不会那么好，也就不会减除对这个东西的神秘感，其实，从我个人的脚度出发后，因为前面写
系统 2019-08-29 23:46:15 2222
有时是在局域网内新增机器，但新增机器的IP地址设置是个问题，该网段内到底有哪些地址还未分配出去呢?总不能一台一台机器的IPCONFIG吧!那工作量可不小。还有一种情况就是，网络管理员在服务器端做了一些设置，有些IP地址可以访问Internet，有些IP地址不能访问Internet，因此这时候想访问Internet，就必须把自己的IP地址改成网管设置的可以访问Internet的范围内才可以。无论是哪一种情况，首先我们都必须要知道哪个地址尚未使用，那我们又怎样
系统 2019-08-29 23:26:58 2222
上一篇我主要介绍dwr的概况。这一篇我用dwr做了个可以不刷新页面就更新的表格。运行环境：windowsxpprosp2j2sdk1.2.4_03weblogic8.1struts1.2.4开发工具eclipse3.0其实dwr和struts没有什么关系，只不过最近我们项目组在用struts作东西。我就顺便用把我的程序建立在Struts上。主要文件。dwr.jar--dwr的类库包struts的类库包，具体我不说了，这东西谁都知道。jdts0.9.jar-
系统 2019-08-29 22:50:15 2222
下面是老早看到的一个关于十二生肖的故事,这个故事的真实性我认为不太重要,而其中对先人的理解却是超出我们常人的生活常识.有人会说,这是胡说,祖先哪有那个智慧,等等,再举出无数的学术考证,最后得出祖先关于十二生肖的解释就是逗小孩子玩儿的,等等诸如此类的结论.但是我要说,这样的解读先人虽然没有错误,也是建立在研究证据基础上的,作为科学研究很是不错,但是作为人文研究,作为传统发扬,那就缺乏了该文作者的开拓和思辨.其实,现实社会中,就是缺乏作者这样善于思考的智慧的闪
系统 2019-08-29 22:02:03 2222
