目标:使用Python爬取豆瓣电影并保存MongoDB数据库中我们先来看一下通过浏览器的方式来筛选某些特定的电影:我们把URL来复制出来分析分析:https://movie.douban.com/tag/#/?sort=T&range=0,10&tags=%E7%94%B5%E5%BD%B1,%E7%88%B1%E6%83%85,%E7%BE%8E%E5%9B%BD,%E9%BB%91%E5%B8%AE有3个字段是非常重要的:1.sort=T2.range
系统 2019-09-27 17:52:44 2232
原文链接：https://jinshuju.net/f/kb1Bcq♚豌豆花下猫，某985高校毕业生，兼具极客思维与人文情怀。专注python技术、数据科学和深度学习，力图创造一个有趣又有用的学习分享平台。Python中的sys模块极为基础而重要，它主要提供了一些给解释器使用（或由它维护）的变量，以及一些与解释器强交互的函数。本文将会频繁地使用该模块的getsizeof()方法，因此，我先简要介绍一下：该方法用于获取一个对象的字节大小（bytes）它只计算
系统 2019-09-27 17:51:49 2232
今天我们讲一下用Python写的GUI小程序。一个小闹钟（只是屏幕提示，没有声音哦）让我们先介绍这个闹钟如何奇葩。需要通过命令行启动。没有标题栏。没菜单。甚至没有关闭按钮。没有运行界面。看到这里想必大家要问了，何必去做一个这样弱爆了的程序呢。显然，教育意义大于其实际用处。像其他的模块一样，QT界面包是需要加载的。我们用到了命令行输入，所以，sys模块也是必须的。用到了时间，但是我们不需要使用time模块，我们用QT提供的QTime模块。让我们先写impor
系统 2019-09-27 17:50:44 2232
字典是另一种可变容器模型，且可存储任意类型对象。字典的每个键值(key=>value)对用冒号(:)分割，每个对之间用逗号(,)分割，整个字典包括在花括号({})中；字典值可以没有限制地取任何python对象，既可以是标准的对象，也可以是用户定义的；但键不行，如果同一个键被赋值两次，后一个值会被记住。值可以取任何数据类型，但键必须是不可变的，如字符串，数字或元组（列表这样的可变类型不能作为键）。一、字典的创建、访问：dict={'Name':'Zara',
系统 2019-09-27 17:50:44 2232
压缩数据创建gzip文件先看一个略麻烦的做法importStringIO,gzipcontent='Lifeisshort.Iusepython'zbuf=StringIO.StringIO()zfile=gzip.GzipFile(mode='wb',compresslevel=9,fileobj=zbuf)zfile.write(content)zfile.close()但其实有个快捷的封装，不用用到StringIO模块f=gzip.open('fil
系统 2019-09-27 17:50:34 2232
代码示例支持平台:Centos6.3Python:2.7.14代码示例:菜单-Python踩坑指南代码示例1.1踩坑案例长期运行的daemon进程或者socket测试类进程,经常遇到的坑是:IOError:[Errno24]Toomanyopenfiles即进程遇到IO错误,无法打开更多的文件.1.2填坑和分析一般从两个方面入手:1.2.1从程序优化入手检查文件打开是否遵循了"谁打开谁关闭"原则文件是否存在关闭泄露a.谁打开谁关闭是个普适的原则:只有逻辑设
系统 2019-09-27 17:49:40 2232
1.创建一个边界值为1而内部都是0的数组，图例如下：[提示：]解此题可以先把所有值都设置为1，这是大正方形；其次，把边界除外小正方形全部设置为0。本题用到numpy的切片原理。多维数组同样遵循x[start:stop:step]的原理。[1.1.1.1.1.1.1.1.1.1.][1.0.0.0.0.0.0.0.0.1.][1.0.0.0.0.0.0.0.0.1.][1.0.0.0.0.0.0.0.0.1.][1.0.0.0.0.0.0.0.0.1.][1
系统 2019-09-27 17:49:14 2232
1、Python函数函数是Python为了代码最大程度的重用和最小化代码冗余而提供的基本程序结构，用于将相关功能打包并参数化Python中可以创建4种函数：1）、全局函数：定义在模块中，每个模块都是一个全局作用域，因此，全局作用域的范围仅限于单个程序文2）、局部函数：嵌套在其它函数中3）、lambda函数：表达式4）、方法：与特定数据类型关联的函数表，并且只能与数据类型关联一起使用Python提供众多内置函数Python创建、改变、查找变量名都是在名称空间
系统 2019-09-27 17:49:01 2232
【摘要】本节中，我们看一下正则表达式的相关用法。正则表达式是处理字符串的强大工具，它有自己特定的语法结构，有了它，实现字符串的检索、替换、匹配验证都不在话下。当然，对于爬虫来说，有了它，从HTML里提取想要的信息就非常方便了。1.实例引入说了这么多，可能我们对它到底是个什么还是比较模糊，下面就用几个实例来看一下正则表达式的用法。打开开源中国提供的正则表达式测试工具http://tool.oschina.net/regex/，输入待匹配的文本，然后选择常用的
系统 2019-09-27 17:48:57 2232
6月17日22分25分，四川省宜宾市长宁县发生了6.0级地震，成都高新减灾研究所与应急管理部门联合建设的大陆地震预警网成功预警本次地震，提前10秒向宜宾市预警，提前61秒向成都预警。虽然自己还不能写出这么牛逼的系统，但是今天我想结合自己学到的Python知识，用Python获取地震信息，然后微信实时推送给你的群组或你的朋友。1.前期准备1.爬虫基本知识，比如requests库，以及lxml库；2.利用Xpath进行HTML的解析；之前写的一些简单项目，提取
系统 2019-09-27 17:47:21 2232
