之前在公司做一个项目，项目需求是按照标签分类，去不同网站上爬取文章的内容，标题等。然后我就一个网站一个网站的去配xpath，可是网站特别多的时候，领导就会对我提出一个需求能不能，写一种程序然后用来解析所有的网站，也就是智能化解析。这对我一个刚刚做爬虫不久的新手就是很头疼了。于是各种网上找资料，于是发现了DIFFBOT这个东西。官网https://www.diffbot.com，注册后会有15天的免费使用的时间。注册后会发邮件给你一个token,通过toke
系统 2019-09-27 17:57:24 2242
python版本3.3系统：windows问题：链接时报告1>pythonIniti.obj:errorLNK2019:无法解析的外部符号__imp___Py_NegativeRefcount，该符号在函数"public:__thiscallboost::python::api::object_base::~object_base(void)"(??1object_base@api@python@boost@@QAE@XZ)中被引用1>pythonInit
系统 2019-09-27 17:56:29 2242
打印旋转矩阵应该是很经典的算法问题了。题目描述如下：给定一个m*n要素的矩阵。按照螺旋顺序，返回该矩阵的所有要素。思路：1，先定义矩阵的左上和右下的坐标，然后通过两个坐标来打印这一圈矩阵；2，将左上的坐标下右下移动，右下的坐标向左上移动，来缩小打印圈，进行下一圈矩阵的打印；3，一直缩小打印直到结束。代码：defprint_circle(matrix,up_hang,up_lie,down_hang,down_lie):result=[]ifup_lie==
系统 2019-09-27 17:56:26 2242
Burp提供了一系列的api，可以用于开发自己的插件。api的文档可以直接在burp的扩展处查看插件入口：IBurpExtender+IBurpExtenderCallbacks辅助功能：IExtensionHelpers消息接口：IHttpRequestResponse,IRequestInfo,IResponseInfo等等组件接口：Intruder相关和Scanner相关UI接口：ITab,IContextMenuFactoryjava的swing图
系统 2019-09-27 17:53:23 2242
看知乎的时候发现了一个“如何正确地吐槽”收藏夹，里面的一些神回复实在很搞笑，但是一页一页地看又有点麻烦，而且每次都要打开网页，于是想如果全部爬下来到一个文件里面，是不是看起来很爽，并且随时可以看到全部的，于是就开始动手了。工具1.Python2.72.BeautifulSoup分析网页我们先来看看知乎上该网页的情况网址：，容易看到，网址是有规律的，page慢慢递增，这样就能够实现全部爬取了。再来看一下我们要爬取的内容：我们要爬取两个内容：问题和回答，回答仅
系统 2019-09-27 17:53:19 2242
摘要：不同方法读取excel中的多个不同sheet表格性能比较#方法1defread_excel(path):df=pd.read_excel(path,None)print(df.keys())#fork,vindf.items():#print(k)#print(v)#print(type(v))returndf#方法2defread_excel1(path):data_xls=pd.ExcelFile(path)print(data_xls.shee
系统 2019-09-27 17:46:23 2242
描述ceil(x)函数返回一个大于或等于x的的最小整数。语法以下是ceil()方法的语法:importmathmath.ceil(x)注意：ceil()是不能直接访问的，需要导入math模块，通过静态对象调用该方法。参数x--数值表达式。返回值函数返回返回一个大于或等于x的的最小整数。实例以下展示了使用ceil()方法的实例：#!/usr/bin/python3importmath#导入math模块print("math.ceil(-45.17):",ma
系统 2019-09-27 17:38:17 2242
Python很慢和/或它不是的两个最常见的原因高性能：解读GIL第一个是相当直接的，但在高级别编译器将更高级别的语言翻译成更低级别（更快）的语言，因此编译语言几乎总是比非编译语言执行得更快。这个经验法则有一些例外（例如JIT可能比AOT编译更快的情况），但它们会分散讨论。第二个是更臭名昭着，但是Python有一个叫做全局解释器锁的东西，它通过强制解释器一次只在一个进程（Python解释器的实例）中执行单个线程来基本上防止多线程。它的工作原理也很有趣，但也像
系统 2019-09-27 17:57:24 2241
Python基本数据类型数字类型整数类型可正可负，取值范围不限；四种进制（二进制0b、八进制0o、十进制0d、十六进制0x）；浮点数类型取值范围存在限制，常规计算可忽略，取值范围数量级-10^307~10^308,精度数量级10^-16；运算时存在不确定尾数，不是bug,可用round()函数，截取尾数位数；科学技术法e表示a*10^b，例如:5e3==5x10^3,5e-3==5x10^-3；复数类型如果x^2=-1,那么x的值是什么？定义j=,以此为基
系统 2019-09-27 17:53:28 2241
来源：ApacheCN『USFMSDS501计算数据科学中文讲义』翻译项目原文：AfirsttasteofPythontools译者：飞龙协议：CCBY-NC-SA4.0加载命令行应用启动Terminal.app（Mac）或任何bash终端，shell，它是UNIX风格的命令行提示符程序。你应该看到一个闪烁的光标和一个$提示符：$上面的$符号只是提示，终端正在等待您输入内容。执行命令后，您将再次看到$提示符。命令行是一个非常低级的接口，用于与计算机的操作系
系统 2019-09-27 17:51:22 2241
pyinstaller我们在平常学习使用python的时候经常会自己编写一些小程序来使用，虽然python是跨平台的语言，但是如果我们想要在一个没有python以及很多库环境的电脑上使用我们的小程序该怎么办呢？我们想到，在Windows平台可以将程序打包成exe可执行文件，这样就可以放进U盘或者直接传输给需要用的电脑，而pyinstaller就可以帮我们将程序打包成exe文件PyInstaller工具是跨平台的，它既可以在Windows平台上使用，也可以在
系统 2019-09-27 17:48:09 2241
seed()设置生成随机数用的整数起始值。调用任何其他random模块函数之前调用这个函数。语法以下是seed()方法的语法：seed([x])注意：此函数是无法直接访问的，所以需要导入seed模块，然后需要使用random静态对象来调用这个函数。参数x--这是下一个随机数的种子。如果省略，则需要系统时间，以产生下一个随机数。返回值此方法不返回任何值。例子下面的例子显示了seed()方法的使用。#!/usr/bin/pythonimportrandomra
系统 2019-09-27 17:47:34 2241
aaptdumpbadgingD:\chinaaccschool.apk#这个是文件的路径运行后可得到包名和Activity也有可能没有Activity用另一种方法需要先知道其中一个应用的Activity先打开连接上模拟器。然后在安卓模拟器上面打开需要获取的应用。然后用这个方法得到当前应用的b=driver.current_activityprint(b)desired_caps={'platformName':'Android',#平台名称'platfo
系统 2019-09-27 17:45:49 2241
EXCEL的数值排序功能还是挺强大的，升序、降序，尤其自定义排序，能够对多个字段进行排序工作。那么，在Python大法中，有没有这样强大的排序功能呢？答案是有的，而且本人觉得Python的排序功能，一点不比EXCEL的差。同样，我们依然用到的是强大的pandas这个三方库。我们先将numpy和pandas导入进来：接着构造一个今天要用到的DataFrame，我们用字典的形式来构造。都是随意构造的，内容别较真。我们先来个简单点的热热身，按照身高的降序来排列一
系统 2019-09-27 17:56:44 2240
Python数据可视化进阶Python数据可视化教程:基于plotly动态可视化绘图https://edu.51cto.com/sd/4bff8Python数据可视化教程Seabornhttps://edu.51cto.com/sd/19627Python数据分析实战视频课程https://edu.51cto.com/sd/63225Python数据可视化pyecharts实战https://edu.51cto.com/sd/22a0cPython数据可视
系统 2019-09-27 17:56:39 2240
