url组成：协议域名端口（如果url里面没有端口，那么采用默认端口）文件路径文件名参数锚点HTTP：超文本传输协议端口：80工作原理：请求响应模型无连接无状态http请求包含哪些内容请求行（请求方法[get、post]url协议版本）请求头（每个参数以键值对形式存在）空行请求数据（请求参数）请求头参数1、user-agent:请求发起者的身份信息User-Agent:Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKi
系统 2019-09-27 17:46:58 1844
fileinput模块可以遍历文本文件的所有行.它的工作方式和readlines很类似,不同点在于,它不是将全部的行读到列表中而是创建了一个xreadlines对象.下面是fileinput模块中的常用函数input()#它会返回能够用于for循环遍历的对象.filename()#返回当前文件的名称lineno()#返回当前(累计)的行数filelineno()#返回当前文件的行数isfirstline()#检查当前行是否是文件的第一行复制代码代码如下:#
系统 2019-09-27 17:46:52 1844
forsplitValueinset(dataset[:,featureIndex].tolist()):首先set是一个无序，无重复的数据结构，所以很多时候使用它来进行去重；但是set接收的函数是原生array，这个怎么办？我现在有的numpy里面的matrix；于是我查了一下，直接使用matrix.tolist()，但是发现返回值有问题：importosos.chdir("D:\\galaxy\\aliyunsvn\\code\\MLInAction\
系统 2019-09-27 17:46:43 1844
文|yangrq1018经常在腾讯视频上看电影，在影片库里有一个"豆瓣好评"板块。我一般会在这个条目下面挑电影。但是电影很多，又缺乏索引，只能不停地往下来，让js加载更多的条目。然而前面的看完了，每次找新的片就要拉很久。所以用爬虫将"豆瓣好评"里的电影都爬下来整理到一个表中，方便选片。项目地址：https://github.com/yangrq1018/vqq-douban-film依赖需要如下Python包：requestsbs4-Beautifulso
系统 2019-09-27 17:46:04 1844
保证只能运行一个脚本实例，方法是程序运行时监听一个特定端口，如果失败则说明已经有实例在跑。使用装饰器实现，便于重用复制代码代码如下:importfunctoolsdefjust_one_instance(func):'''装饰器如果已经有实例在跑则退出复制代码代码如下::return:'''@functools.wraps(func)deff(*args,**kwargs):importsockettry:#全局属性，否则变量会在方法退出后被销毁globa
系统 2019-09-27 17:45:27 1844
在介绍yield前有必要先说明下Python中的迭代器(iterator)和生成器(constructor)。一、迭代器(iterator)在Python中，for循环可以用于Python中的任何类型，包括列表、元祖等等，实际上，for循环可用于任何“可迭代对象”，这其实就是迭代器迭代器是一个实现了迭代器协议的对象，Python中的迭代器协议就是有next方法的对象会前进到下一结果，而在一系列结果的末尾是，则会引发StopIteration。任何这类的对象
系统 2019-09-27 17:38:45 1844
通过下面的步骤让你由浅入深明白装饰器是什么。假定你拥有最基本的Python知识，本文阐述的东西可能对那些在工作中经常接触Python的人有很大的帮助。1、函数（Functions）在Python里，函数是用def关键字后跟一个函数名称和一个可选的参数表列来创建的，可以用关键字return指定返回值。下面让我们创建和调用一个最简单的函数：>>>deffoo():...return1>>>foo()1该函数的函数体（在Python里将就是多行语句）是强制性的并
系统 2019-09-27 17:38:30 1844
python中的单引号双引号有什么区别呢？下面给大家详细的介绍一下：先说双引号与三引号的区别，双引号所表示的字符串通常要写成一行。如：s1="hello,world"如果要写成多行，那么就要使用\(“连行符”)吧，如：s2="hello,\world"s2与s1是一样的。如果你用3个双引号的话，就可以直接写了，如下：s3="""hello,world,hahaha."""相关推荐：《Python视频教程》那么s3实际上就是"hello,\nworld,\n
系统 2019-09-27 17:38:13 1844
python中对文件、文件夹（文件操作函数）的操作需要涉及到os模块和shutil模块。得到当前工作目录，即当前Python脚本工作的目录路径:os.getcwd()返回指定目录下的所有文件和目录名:os.listdir()函数用来删除一个文件:os.remove()删除多个目录：os.removedirs（r“c：\python”）检验给出的路径是否是一个文件：os.path.isfile()检验给出的路径是否是一个目录：os.path.isdir()判
系统 2019-09-27 17:38:10 1844
安装Tornado省事点可以直接用grequests库，下面用的是tornado的异步client。异步用到了tornado，根据官方文档的例子修改得到一个简单的异步爬虫类。可以参考下最新的文档学习下。pipinstalltornado异步爬虫#!/usr/bin/envpython#-*-coding:utf-8-*-importtimefromdatetimeimporttimedeltafromtornadoimporthttpclient,gen,
系统 2019-09-27 17:38:10 1844
