urllib库是python内置的http请求库，包含四个模块：函数说明urllib.request请求模块urllib.error异常处理模块urllib.parseURL解析模块urllib.robotparserrobots.txt模块robots.txt是Robots协议（网络爬虫排除协议），是互联网界通行的道德模范，基于以下原则：搜索技术应服务于人类，同时尊重信息提供者的意愿，并维护其隐私权网站有义务保护其使用者的个人信息和隐私不被侵犯爬取白度网
系统 2019-09-27 17:48:19 2440
一、time的常用方法：importtime,datetime#时间有三种展现方式：时间戳，时间元组，格式化的时间print(time.time())#当前时间戳print(int(time.time()))print(time.strftime('%Y-%m-%d%H:%M:%S'))#格式化的时间print(time.strftime('%Y-%m-%d'))print(time.strftime('%H:%M:%S'))print(time.gmti
系统 2019-09-27 17:45:45 2440
用法本脚本用于批量扫描端口1.在同目录下创建输入文件,属性inputFile为输入文件名2.属性th为线程数3.属性port为探测的目标端口4.属性arg为默认的命令不推荐扫描全端口,速度非常慢.脚本中有常见端口,可直接使用默认命令下端口对应服务可能存在不准确的情况,可加-sV对版本进行详细探测,或对本脚本的输出使用此脚本进行专门的探测代码#依赖python-nmap,openpyxl包importnmapimportopenpyxlimportIPyfr
系统 2019-09-27 17:57:13 2439
本文实例讲述了Python循环中else,break和continue的用法。分享给大家供大家参考，具体如下：在看Python的文档的时候看到了for和while语句和C语言中有一个最大的区别―可以有一个可选的else语句。这个语句的执行触发机制让我不大明白，通过代码测试才了解了什么情况下触发else语句。“凡存在，皆合理”，Python的设计者肯定是有他的目的，现在咱们来探究一番。以for语句为例，开发环境Python3.4。Python循环中的else
系统 2019-09-27 17:54:43 2439
近来有些东西需要监控报警发邮件，然后在网上找了点材料，自己写了一个简单发送邮件的脚本，主要就是运用python的smtplib模块，分享给大家看一下：复制代码代码如下:#!/usr/bin/envpython#-*-coding:utf-8-*-#导入smtplib和MIMETextimportsmtplib,sysfromemail.mime.textimportMIMETextdefsend_mail(sub,content):############
系统 2019-09-27 17:54:42 2439
SVD将一个矩阵分解为U，V（U,V均为列正交矩阵，即列向量直接内积为0），中间的矩阵为对角阵，元素为奇异值。A[m∗n]=U[m∗r]∗∑[r∗r]∗(V[n∗r])TA_{[m*n]}=U_{[m*r]}*\sum_{[r*r]}*(V_{[n*r]})^TA[m∗n]=U[m∗r]∗[r∗r]∑∗(V[n∗r])TSVD计算方式A=U∗∑∗VTAT=V∗∑∗UTAAT=U∗∑∗VT∗V∗∑∗UTA=U*\sum*V^T\\A^T=V*\sum
系统 2019-09-27 17:52:40 2439
Python3快速入门（十四）——Pandas数据读取一、DataFrameIO1、CSV文件pandas.read_csv(filepath_or_buffer,na_values='NAN',parse_dates=['LastUpdate'])从CSV文件中读取数据并创建一个DataFrame对象，na_vlaues用于设置缺失值形式，parse_dates用于将指定的列解析成时间日期格式。dataframe.to_csv("xxx.csv",mod
系统 2019-09-27 17:50:45 2439
Python资源大全中文版我想很多程序员应该记得GitHub上有一个Awesome-XXX系列的资源整理。awesome-python是vinta发起维护的Python资源列表，内容包括：Web框架、网络爬虫、网络内容提取、模板引擎、数据库、数据可视化、图片处理、文本处理、自然语言处理、机器学习、日志、代码分析等。由伯乐在线持续更新。Awesome系列虽然挺全，但基本只对收录的资源做了极为简要的介绍，如果有更详细的中文介绍，对相应开发者的帮助会更大。这也是
系统 2019-09-27 17:49:41 2439
目录基础部分shutil.copyfileobj(file1，file2)：shutil.copyfile(file1，file2)：其他shutil.copymode(file1，file2)：shutil.copystat(file1，file2)：shutil.copy(file1，file2)：shutil.copy2(file1，file2)：shutil.copytree(源目录，目标目录)：shutil.rmtree(目标目录)：shutil
系统 2019-09-27 17:49:32 2439
特么的，上次写了一堆，发现，原来下载网易云的歌曲根本不用这么费劲，直接用！http://music.163.com/song/media/outer/url?id=这里填歌曲id.mp3这个URL就可以下载了，真特么操蛋！！现在再来做一次！根据歌单下载歌曲importrequests,os,time,sys,refromscrapy.selectorimportSelectorclasswangyiyun():def__init__(self):self.
系统 2019-09-27 17:49:00 2439
爬虫前奏爬虫的实际例子搜索引擎（百度、谷歌、360搜索等）伯乐在线惠惠购物助手数据分析与研究（数据冰山知乎专栏）抢票软件等什么是网络爬虫通俗理解：爬虫是一个模拟人类请求网站行为的程序，可以自动请求网页，并将数据爬取下来，然后使用一定的规则提取有价值的数据通用爬虫和聚焦爬虫**通用爬虫：**通用爬虫是搜索引擎抓取系统（百度、谷歌、搜狗等）的重要组成部分，主要是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份**聚焦爬虫：**是面向特定需求的一种网络爬
系统 2019-09-27 17:48:25 2439
利用flask自带的werkzeug模块实现#监控脚本#首先需要pipinstallflask#pymonitor.pydefrun_with_reloader(main_func,args=(),kwargs=None,extra_files=None,interval=1,reloader_type='auto'):"""Runthegivenfunctioninanindependentpythoninterpreter."""importosimp
系统 2019-09-27 17:57:14 2438
如下所示：importsysfromPyQt5.QtWidgetsimportQMainWindow,QApplication,QTextEdit,QAction,QFileDialogfromPyQt5.QtGuiimportQIconclassExample(QMainWindow):def__init__(self):super(Example,self).__init__()self.initUI()definitUI(self):self.tex
系统 2019-09-27 17:54:30 2438
要理解深度学习，需要熟悉很多简单的数学概念：张量，张量运算，微分，梯度下降等。首先给出一个神经网络的示例，引出张量和梯度下降的概念。该示例神经网络的问题是，将手写数据的灰度图像划分到10个类别中，使用MNIST数据集。fromkeras.datasetsimportmnistfromkerasimportmodelsfromkerasimportlayersfromkeras.utilsimportto_categorical#train_images,t
系统 2019-09-27 17:53:39 2438
前几天遇到一个问题,需要把网页中的一部分内容挑出来,于是找到了urllib和HTMLParser两个库.urllib可以将网页爬下来,然后交由HTMLParser解析,初次使用这个库,在查官方文档时也遇到了一些问题,在这里写下来与大家分享.一个例子复制代码代码如下:fromHTMLParserimportHTMLParserclassMyHTMLParser(HTMLParser):defhandle_starttag(self,tag,attrs):pr
系统 2019-09-27 17:52:26 2438
