Python

python3 实现爬取TOP500的音乐信息并存储到mongoDB数据库中

爬取TOP500的音乐信息,包括排名情况、歌曲名、歌曲时间。网页版酷狗不能手动翻页进行下一步的浏览,仔细观察第一页的URL:http://www.kugou.com/yy/rank/home/1-8888.html这里尝试将1改为2,再进行浏览,恰好是第二页的信息,再改为3,恰好是第三页的信息,多次尝试发现不同的数字即为不同的页面。因此只需更改home/后面的数字即可。由于每页显示的为22首歌曲,所以总共需要23个URL。importrequestsfro

系统 2019-09-27 17:49:04 2530

Python

【Python数据分析】Pandas按行遍历Dataframe

Pandas按行遍历Dataframe的方法主要有两种:iterrows()和itertuples(),具体用法如下:#构建数据集importpandasaspdimportnumpyasnpN=20dataset=pd.DataFrame({'date':pd.date_range(start='2016-01-01',periods=N,freq='D'),'x1':np.linspace(0,stop=N-1,num=N),'x2':np.rando

系统 2019-09-27 17:48:46 2530

Python

python打印9宫格、25宫格等奇数格 满足横竖斜相加和相等

相信大家都做过九宫格的游戏,规则是要求填数字1-9在九个方格内,使横竖斜相加和相等。只填九个那可能有些简单,但是填25个,填49个,81个等奇数个那,这时候就要求我们去找其中的规律。找到规律又要如何用代码实现?希望大家看代码之前,先来看下这个口诀:首居上行正中央,依次斜向右上方,上出框时往下写,右出框时左边放,排重退回下格填,右上排重一个样。释义:1要放在第一行的正中央,每次按依次向上的格式去填值,如果超出上边框就把它竖直往下移到最后一行,如果超出右边框就

系统 2019-09-27 17:48:35 2530

Python

Python 之父的解析器系列之四:可视化 PEG 解析

原题|VisualizingPEGParsing作者|GuidovanRossum(Python之父)译者|豌豆花下猫(“Python猫”公众号作者)声明|本翻译是出于交流学习的目的,基于CCBY-NC-SA4.0授权协议。为便于阅读,内容略有改动。上周我展示了一个简单的PEG解析器生成器。本周我将展示生成的解析器在解析程序时实际执行的操作。我深入研究了ASCII艺术的复古世界,特别是一个名为“curses”的库,它可以在Linux和Mac的Python标

系统 2019-09-27 17:46:14 2530

Python

Python爬虫模拟登录带验证码网站

爬取网站时经常会遇到需要登录的问题,这是就需要用到模拟登录的相关方法。python提供了强大的url库,想做到这个并不难。这里以登录学校教务系统为例,做一个简单的例子。首先得明白cookie的作用,cookie是某些网站为了辨别用户身份、进行session跟踪而储存在用户本地终端上的数据。因此我们需要用Cookielib模块来保持网站的cookie。这个是要登陆的地址http://202.115.80.153/和验证码地址http://202.115.80

系统 2019-09-27 17:38:34 2530

Python

Python将string转换到float的实例方法

Python如何转换string到float?简单几步,让你轻松解决。打开软件,新建python项目,如图所示右键菜单中创建.py文件,如图所示步骤中文件输入代码如下:defstring_to_float(str):returnfloat(str)if__name__=='__main__':str='3.1415926'res=string_to_float(str)print(res+1)空白后,右键菜单中选择【Run'test'】查看运行结果如下图所

系统 2019-09-27 17:54:45 2529

Python

Python面试的一些心得,与Python练习题分享

关于基础项目打算招聘一个自动化运维,主要需求是python、Linux与shell脚本能力。但面试几天发现一些问题:简历虚假这个不管哪行,简历含水量大都是普遍存在的,看简历犀利的一比,一面是能力弱的一腿。谁都希望自己80分的能力写成120,但有时候假的有些离谱,问一两个问题就漏气了…年龄与薪酬目前的IT行业,最敢坐地起薪的就是27–33这年龄段的,低于范围的往往因为能力或者说跳槽经验少,而不敢要高价,高于这个年龄的感觉失去了针对年轻人的干劲与学习能力,所以

系统 2019-09-27 17:54:20 2529

Python

Python-基本数据类型

Python基本数据类型数字类型整数类型可正可负,取值范围不限;四种进制(二进制0b、八进制0o、十进制0d、十六进制0x);浮点数类型取值范围存在限制,常规计算可忽略,取值范围数量级-10^307~10^308,精度数量级10^-16;运算时存在不确定尾数,不是bug,可用round()函数,截取尾数位数;科学技术法e表示a*10^b,例如:5e3==5x10^3,5e-3==5x10^-3;复数类型如果x^2=-1,那么x的值是什么?定义j=,以此为基

系统 2019-09-27 17:53:28 2529

Python

python中的global关键字的使用方法

摘要global标志实际上是为了提示python解释器,表明被其修饰的变量是全局变量。这样解释器就可以从当前空间(currentscope)中读写相应变量了。Python的全局变量是模块(module)级别的每个python函数拥有对应的__globals__字典,该字典与函数所属模块的__dict__字典完全相同。函数的全局变量也会从这个字典中获取注:上面三句话的意思就是,python解释器发现函数中的某个变量被global关键字修饰,就去函数的__gl

系统 2019-09-27 17:52:50 2529

Python

python2.7的flask框架之引用js&css等静态文件的实现方法

动态web应用也会需要静态文件,通常是CSS和JavaScript文件。理想状况下,我们已经配置好Web服务器来提供静态文件,但是在开发中,Flask也可以做到。只要在我们的包中或是模块的所在目录中创建一个名为static的文件夹,在应用中使用/static即可访问。我们要给静态文件生成URL,需要使用特殊的'static'端点名:url_for('static',filename='style.css')这个css文件应该存储在文件系统上的static/

系统 2019-09-27 17:50:50 2529

Python

python + pyinstaller 实现将python程序打包成exe

pyinstaller我们在平常学习使用python的时候经常会自己编写一些小程序来使用,虽然python是跨平台的语言,但是如果我们想要在一个没有python以及很多库环境的电脑上使用我们的小程序该怎么办呢?我们想到,在Windows平台可以将程序打包成exe可执行文件,这样就可以放进U盘或者直接传输给需要用的电脑,而pyinstaller就可以帮我们将程序打包成exe文件PyInstaller工具是跨平台的,它既可以在Windows平台上使用,也可以在

系统 2019-09-27 17:48:09 2529

Python

Python 卸载一个第三方模块,并卸载其依赖包

原文链接:https://www.jianshu.com/p/81bffb457ac4使用pip安装了一个Python的第三方模块的时候,总会安装其依赖的其他模块。而当我们卸载的时候,却不能将其依赖的模块一并删除。现在我想要达到的效果就是当我删除某一个模块的时候,我希望将其依赖的模块也删掉。想要达到这个目标,需要知道下面这些东西:pipshow<模块名>这个命令行命令可以查看一个包的详细信息,包括这个包的依赖关系。重要的一点是,如果输入的模块包根本不存在,

系统 2019-09-27 17:47:41 2529

Python

Python面试的一些心得,与Python练习题分享

关于基础项目打算招聘一个自动化运维,主要需求是python、Linux与shell脚本能力。但面试几天发现一些问题:简历虚假这个不管哪行,简历含水量大都是普遍存在的,看简历犀利的一比,一面是能力弱的一腿。谁都希望自己80分的能力写成120,但有时候假的有些离谱,问一两个问题就漏气了…年龄与薪酬目前的IT行业,最敢坐地起薪的就是27–33这年龄段的,低于范围的往往因为能力或者说跳槽经验少,而不敢要高价,高于这个年龄的感觉失去了针对年轻人的干劲与学习能力,所以

系统 2019-09-27 17:45:58 2529

Python

python根据多个文件名批量查找文件

本文实例为大家分享了python根据多个文件名批量查找文件的具体代码,供大家参考,具体内容如下老板给了我一个文件列表,让我在一堆文件中挑出来,他要的文件有500多个,一堆文件有上千个,而且给的是关键词,不是完整的文件名。我先做了类似的文件测试一下,一个名为filename的excel表又做了一个文件夹接下来运行代码importosimportnumpyasnpimportpandasaspdimportshutilfile_path='/home/disk

系统 2019-09-27 17:45:26 2529

Python

浅谈c++调用python链接的问题及解决方法

python版本3.3系统:windows问题:链接时报告1>pythonIniti.obj:errorLNK2019:无法解析的外部符号__imp___Py_NegativeRefcount,该符号在函数"public:__thiscallboost::python::api::object_base::~object_base(void)"(??1object_base@api@python@boost@@QAE@XZ)中被引用1>pythonInit

系统 2019-09-27 17:56:29 2528