搜索到与相关的文章
各行各业

[Nutch]如何利用HTML页面中meta元素?

[Nutch]如何利用HTML页面中meta元素?[郑昀]1:假如说你的站点页面中有这么一句:你利用Nutch抓取并分析时,如何得到这个meta数值并处理呢?2:你可以从HtmlParseFilter扩展出一个RobotsParserFilter,用下面的代码得到meta值:PropertiesgeneralMetaTags=metaTags.getGeneralTags()

系统 2019-08-12 01:32:23 2409

各行各业

SupportedPackages – PyInstaller

SupportedPackages–PyInstallerThislisttrackscompatibilitystatusofthird-partypackageswithPyInstaller.Thislistislargelyincomplete.MostpackageswillworkoutoftheboxwithPyInstaller,eveniftheyarenotlistedhere.Youareencouragedtotryanyway(a

系统 2019-08-12 01:32:19 2409

Python

python脚本实现分析dns日志并对受访域名排行

前段时间有个需求是要求查一段时间的dns上的域名访问次数排行(top100),没办法,只好慢慢的去解析dns日志呗,正好学习了python,拿来练练手。1.原始数据分析:首先看下原始数据文件,即dns日志内容,下面是抽取的几条有代表性的日志,2×8.2×1.2x.1×5这种中间的x是相应的数字被我抹去了。复制代码代码如下:13-08-3003:11:34,226INFO:queries:�C|1×3.2×8.2×0.2×0|config.dengluqi.

系统 2019-09-27 17:56:48 2408

Python

python 寻找离散序列极值点的方法

使用scipy.signal的argrelextrema函数(API),简单方便importnumpyasnpimportpylabasplimportmatplotlib.pyplotaspltimportscipy.signalassignalx=np.array([0,6,25,20,15,8,15,6,0,6,0,-5,-15,-3,4,10,8,13,8,10,3,1,20,7,3,0])plt.figure(figsize=(16,4))plt

系统 2019-09-27 17:56:11 2408

Python

python文件处理

1,linux文件知识补充~$ls-alldrwxr-xr-x2qiaozanqiaozan40968月621:21Templates-rw-r--r--1qiaozanqiaozan09月1707:53test.txt解读:d和-分别代表目录和普通文件。rwxr-xr-x分别代表"(用户/用户组/其它用户)“的”(可读/可写/可执行)"权限。可以使用chmod修改文件权限。如:linux中给一个文件加可执行权限:**chmod+x文件或用0~7的数字ch

系统 2019-09-27 17:54:35 2408

Python

Python爬取破解无线网络wifi密码过程解析

前言今天从WiFi连接的原理,再结合代码为大家详细的介绍如何利用python来破解WiFi。Python真的是无所不能,原因就是因为Python有数目庞大的库,无数的现成的轮子,让你做很多很多应用都非常方便。wifi跟我们的生活息息相关,无处不在。如何连接wifi首先我们的电脑是如何连接wifi的呢?就拿我们的笔记本电脑来说,我们的笔记本电脑都有无线网卡,如下图所示:当我们连接WiFi时,无线网卡会自动帮助我们扫描附近的WiFi信号,并且会返回WiFi信号

系统 2019-09-27 17:54:22 2408

Python

【备忘】解析Python网络爬虫:核心技术、Scrapy框架、分布式爬虫

原文链接:http://www.javaxxz.com/thread-389327-1-1.htmlBXG-2018-58.95GB高清视频第一章:解析python网络爬虫:核心技术、Scrapy框架、分布式爬虫1-1初识爬虫1-1-11.1-爬虫产生背景1-1-21.2-什么是网络爬虫1-1-31.3-爬虫的用途1-1-41.4-爬虫分类1-2爬虫的实现原理和技术1-2-12.1-通用爬虫的工作原理1-2-22.2-聚焦爬虫工作流程1-2-32.3-通用

系统 2019-09-27 17:54:11 2408

Python

Python中模拟enum枚举类型的5种方法分享

以下几种方法来模拟enum:(感觉方法一简单实用)复制代码代码如下:#way1classDirections:up=0down=1left=2right=3printDirections.down#way2dirUp,dirDown,dirLeft,dirRight=range(4)printdirDown#way3importcollectionsdircoll=collections.namedtuple('directions',('UP','DOW

系统 2019-09-27 17:54:03 2408

Python

python mysql 存储过程 快速生成千万级测试数据

原文链接:http://blog.fenlanli.com/articles/2019/08/20/1566293147402.htmlMysql配置修改配置文件:sudovim/etc/mysql/my.cnf,避免插入数据时出现内存表isfull的错误。添加如下内容:[mysqld]#避免内存表iffull,自行设置max_heap_table_size=4096M重启mysql服务:sudoservicemysqlrestart创建数据表创建一个商品

系统 2019-09-27 17:53:43 2408

Python

python+opnecv+dlib+face_recognition跟随视频

这次算是对之前几篇的联合使用,虽然使用效果并不是很理想,但是至少是有个思路??!!对都是小细节不允许细究!首先展示下我用来测试的视频与识别的图像,视频是从抖音提取出来的无水印视频,因为感觉抖音上面的视频时间短易获得易测试还高清,这也是我为什么不看抖音却还在手机上留着它的原因,它就是我的玩物!至于怎么提取抖音无水印视频呢,很简单,只要把链接发到我的微信上,就会自动回复给你啦,如图所以我又在给我的微信推广告??好了说正事,我在这里使用opencv主要是打开目录

系统 2019-09-27 17:53:35 2408