最近需要爬取某网站，无奈页面都是JS渲染后生成的，普通的爬虫框架搞不定，于是想到用Phantomjs搭一个代理。Python调用Phantomjs貌似没有现成的第三方库（如果有，请告知小编），漫步了一圈，发现只有pyspider提供了现成的方案。简单试用了一下，感觉pyspider更像一个为新手打造的爬虫工具，好比一个老妈子，有时无微不至，有时喋喋不休。轻巧的小工具应该更受人喜爱，我也怀着一点私心，可以带着我最爱的BeautifulSoup一块儿用，而不用
系统 2019-09-27 17:38:44 2045
前言每个人写脚本时的格式都会有所不同，有的会注明脚本本身的一些信息，有的则开门见山，这在小团队里其实没什么，基本别人做什么你也都知道，但如果放到大的团队就比较麻烦了，因为随着人数的增多，脚本成指数增长，如果每个人风格不统一，到最后就会造成非常大的弊端，所以当团队人数增长后，就必须有一套标准，形成大家统一的编码规则，这样即使不看脚本具体实现，也知道这个脚本的功能是什么。我们今天分享的一段脚本是自动添加注释信息的脚本，添加的信息包括脚本名称、作者、时间、描述、
系统 2019-09-27 17:38:27 2045
我在工作的时候，在测试环境下使用的数据库跟生产环境的数据库不一致，当我们的测试环境下的数据库完成测试准备更新到生产环境上的数据库时候，需要准备更新脚本，真是一不小心没记下来就会忘了改了哪里，哪里添加了什么，这个真是非常让人头疼。因此我就试着用Python来实现自动的生成更新脚本，以免我这烂记性，记不住事。主要操作如下：1.在原先basedao.py中添加如下方法，这样旧能很方便的获取数据库的数据，为测试数据库和生产数据库做对比打下了基础。defselect
系统 2019-09-27 17:38:12 2045
集合特点：集合对象是一组无序排列的可哈希的值：集合成员可以做字典的键，与列表和元组不同，集合无法通过数字进行索引。此外，集合中的元素不能重复。定义set()->newemptysetobjectset(iterable)->newsetobjects={0}应用：去重>>>lst1=[1,1,2,2,3,4,2]>>>list(set(lst1))[1,2,3,4]常用操作集合支持一系列标准操作，包括并集|、交集&、差集-和对称差集^子集<<=及超集>>=
系统 2019-09-27 17:37:45 2045
如果不想允许随意修改一个类的某个属性，常用的方法是使用property装饰器以及在属性前加下划线。classV:def__init__(self,x):self._x=x@propertydefx(self):returnself._x虽然这样是没法直接修改x了，但还是可以通过_x很轻易地修改x。>>>v=V(5)>>>v.x5>>>v._x5>>>v.x=4Traceback(mostrecentcalllast):File"",line1,inAttr
系统 2019-09-27 17:37:43 2045
一、安装mod_wsgi3.4：./configure--with-apxs=/Users/levin/dev/apache2.2.27/bin/apxs--with-python=/usr/bin/pythonmakemakeinstall编辑httpd.conf使Apache导入模块mod_wsgi.so以及引入vhost配置文件：LoadModulewsgi_modulemodules/mod_wsgi.soIncludeconf/extra/htt
系统 2019-09-27 17:37:36 2045
在学数据可视化，缺少点数据进行实操，就想着从饿了么上面爬点外卖店信息。主要是获取数据，所以代码比较简陋，直接上代码：importrequestsimportjsonimportcsvdefcrawler_ele(page=0):defget_page(page):url='https://h5.ele.me/restapi/shopping/v3/restaurants?latitude=xxxx&longitude=xxxx&offset={page}&
系统 2019-09-27 17:32:50 2045
ADF应用通常部署在Weblogic中，本文介绍如何在Weblogic中创建JDNI数据源，并将该数据源提供给ADF应用中的AM使用。1，在AM中，ConnectionType选择JDBCDataSource，输入自定义的DatasourceName2，启动Weblogic服务器，在主页中选择JDBC->数据源->新建数据源名称任意，JNDI名称需要跟AM中的DatasourceName保持一致。3，下一步，数据库驱动一般选择下图的选项：4，下一步，信息默
系统 2019-08-29 23:33:04 2045
(二二)相信网络上有一些深刻的灵魂，一如相信爱情。然而，网路茫茫，人海茫茫，萍水相逢，真的要靠造化。想起一句话:因为懂得，所以慈悲(二三)在来北京之前,Lunar是我北京唯一一个熟悉的朋友.在2002年10月的时候,Lunar就游说我来京.还记得有一次,Lunar和biti在一起她让biti来劝说我.那是我和biti第一次的亲密接触我说担心工作，biti就说，那就和我一起去珠海吧.结果biti被Lunar抢了电话,教训了一顿,说差点被你把eygle拐走了再
系统 2019-08-29 23:23:13 2045
1、按“Ctrl+M”打开影片属性对话框，设定动画的大小：宽为240，高为400，背景为黑色，单击“确定”。2、单击“insert→newsymbol”（ctrl+f8)，在弹出对话框中命名为“city”，类型选“movieclip”。3、用acdsee等看图软件找一张可以作为闪电效果背景的图片，用firework等图像编辑工具编辑一下，去掉背景（去背的技巧有很多的，这里就不多说了，但是有一点要注意，输出的时候一定要输出为gif文件，这样才能够让去掉的背景
系统 2019-08-29 23:18:57 2045
