学习python以来的第一爬虫,参考《Python3网络爬虫开发实践》爬取目标为:猫眼电影Top100榜完全是依葫芦画瓢,首先请求网页内容,然后在通过正则表达式提取自己感兴趣的数据,最后转成json格式存入文本文件。importjsonimporttimeimportrequestsimportredefget_one_page(url):headers={'User-agent':'Mozilla/5.0(Macintosh;IntelMacOSX10_
系统 2019-09-27 17:50:24 3359
代码如下:#生成内推码importrandomimportstring#code_str由字母和数字组成code_str=string.ascii_letters+string.digitsprint(code_str)#内推码的长度是4defgen_code(len=4):return''.join(random.sample(code_str,len))print([gen_code()foriinrange(10)])
系统 2019-09-27 17:46:08 3359
函数:split()例子我们想要将以下字符串rule进行拆分。字符串表示的是一个规则,由“…”得到“…”。我们需要将规则中的条件属性与取值分别提取出来,存放在条件属性列表cf_list与值列表cv_list中,规则的结论的属性与取值也提取出来,分别存放结果属性列表rf_list与值列表rc_list。rule='{age=Middle-aged,sex=Male,education=Bachelors}=>{native-country=United-St
系统 2019-09-27 17:50:50 3358
有一组4096长度的数据,需要找到一阶导数从正到负的点,和三阶导数从负到正的点,截取了一小段。394.0388.0389.0388.0388.0392.0393.0395.0395.0394.0394.0390.0392.0按照之前所了解的,对离散值求导其实就是求差分,例如第i点的导数(差分)为:即在一个宽度为2m+1的窗口内通过计算前后m个值加权后的和得到。但是在实际使用过程中效果不是很好。于是想到了同样在一个宽度为2k+1的窗口内,将这2k+1个点拟合
系统 2019-09-27 17:56:06 3356
1.下载python并安装地址:https://www.python.org/downloads/2.下载SublimeText2并安装地址:http://www.sublimetext.com/3.安装插件PackageControl在Sublime里直接安装附加插件的包管理器。这是唯一一个你必须手动安装的插件。这边列出的其他所有插件都可以通过PackageControl来安装。也可以通过它来更新已安装过的插件。简单得想做是Sublimepackages
系统 2019-08-12 09:27:37 3353
前言中位数是一个可将数值集合划分为相等的上下两部分的一个数值。如果列表数据的个数是奇数,则列表中间那个数据就是列表数据的中位数;如果列表数据的个数是偶数,则列表中间那2个数据的算术平均值就是列表数据的中位数。在这个任务里,你将得到一个含有自然数的非空数组(X)。你必须把它分成上下两部分,找到中位数。输入:一个作为数组的整数(int)列表(list)的。输出:数组的中位数(int,float).示例get_median([1,2,3,4,5])==3get_
系统 2019-09-27 17:37:39 3352
1.适当的空格逻辑行首的空白表示逻辑表示层次关系从而决定分组语句从新行的第一列开始风格统一都用四个空格不能随便加空格奥运五环#绘制奥运五环importturtleturtle.width(10)turtle.color("blue")turtle.circle(50)turtle.penup()turtle.goto(120,0)turtle.pendown()turtle.color("black")turtle.circle(50)turtle.pen
系统 2019-09-27 17:56:51 3346
如下所示:importnumpyasnpimportmatplotlib.pyplotasplt#生成测试数据x=np.linspace(0,10,10)y=11-x#绘制柱状图plt.bar(x,y)#循环,为每个柱形添加文本标注#居中对齐forxx,yyinzip(x,y):plt.text(xx,yy+0.1,str(yy),ha='center')#显示图形plt.show()运行效果:以上这篇Python+pyplot绘制带文本标注的柱状图方法就
系统 2019-09-27 17:45:51 3345
在定义类(class)的时候发现属性这个地方有很多坑,类属性、实例属性、局部变量傻傻分不清。在在本文中介绍以下内容(全部跟定义类有关)类属性实例属性一.类属性:定义类的模块添加的属性1.调用:在内部用类名.类属性名调用,外部既可以用类名.类属性名又可以用实例化对象.类属性名来调用demo1classCar():type="new"my_car=Car()print(my_car.type)###实例对象.类属性名调用print(Car.type)###类名
系统 2019-09-27 17:57:40 3344
Python的安装以及报错处理方法一、下载下载路径:https://www.python.org/downloads/二、安装(以安装python3.7为例)在win下安装:1、创建新的安装目录:c:/python372、环境变量的配置(勾选自动配置)检查安装是否正确#第一步::C:\Users\cuiljiang>pythonPython3.7.0(v3.7.0:1bf9cc5093,Jun272018,04:06:47)[MSCv.191432bit(
系统 2019-09-27 17:54:55 3342
C#中不能对字符串表达式进行编译执行,我想到一种解决办法是,添加对Ironpython(python与.net平台交互的版本)的引用,从而利用python来执行。首先,去http://ironpython.codeplex.com/releases/view/54498下载ironpython,安装。我用的是ironpython2.0(之前尝试过用Ironpython2.7,但发现在vs2008中不能添加对Ironpython的引用,所以如果发现使用不了,
系统 2019-08-12 09:30:27 3340
1、编写一个函数cacluate,可以接收任意多个数,返回的是一个元组.元组的第一个值为所有参数的平均值,第二个值是大于平均值的所有数.结果:2、编写一个函数,接收字符串参数,返回一个元组,‘ehlloWROLD’元组的第一个值为大写字母的个数,第二个值为小写字母个数。结果:3、编写函数,随机生成一个列表(包含30个整形数),用户输入一个整形数k,返回生成的随机列表去重后的结果和列表下标k之前对应(不包含k)的元素逆序,下标k及之后的元素逆序的新列表函数需
系统 2019-09-27 17:57:22 3338
缘起大家都知道,最近的网络不怎么和谐,速度慢不说,VPN还总断,好在云梯提供了挺多的服务器可以切换,但云梯的服务器又挺多,Linux的NetworkManager又不支持批量添加配置,甚至配置文件都不能复制新建,每个服务器的配置都得手动加,非常麻烦。当然,也可以每次切换时打开配置,光改地址,但是这也非常不方便。作为一个合格的开发人员,当然会想到用程序批量生成配置,我选择使用Python。寻找配置文件的位置要批量创建配置,首先得知道配置文件在哪里,比如自己的
系统 2019-09-27 17:48:12 3337
先给大家介绍下pythonpickle存储、读取大数据量列表、字典的数据针对于数据量比较大的列表、字典,可以采用将其加工为数据包来调用,减小文件大小#列表#存储list1=[123,'xiaopingguo',54,[90,78]]list_file=open('list1.pickle','wb')pickle.dump(list1,list_file)list_file.close()#读取list_file=open('list1.pickle','
系统 2019-09-27 17:46:37 3337
数据集数据集:ris鸢尾花数据集,它包含3个不同品种的鸢尾花:[Setosa,Versicolour,andVirginica]数据,特征:[‘sepallength’,‘sepalwidth’,‘petallength’,‘petalwidth’],一共150个数据。由于这是2分类问题,所以选择前两类数据进行算法测试。代码实现importnumpyasnpimportpandasaspdfromsklearn.datasetsimportload_iri
系统 2019-09-27 17:46:36 3337