Python

Python爬虫运用正则表达式的方法和优缺点

前言我看到最近几部电影很火,查了一下猫眼电影上的数据,发现还有个榜单,里面有各种经典和热映电影的排行榜,然后我觉得电影封面图还挺好看的,想着一张一张下载真是费时费力,于是突发奇想,好像可以用一下最近学的东西实现我的需求,学习了正则表达式之后,想着要感受一下它在爬虫里面的效果和优缺点。目标:爬取Top100榜单上电影的封面图Top100榜单规则:将猫眼电影库中的经典影片,按照评分和评分人数从高到低综合排序取前100名,每天上午10点更新。相关数据来源于“猫眼

系统 2019-09-27 17:48:31 2386

Python

python调用摄像头拍摄数据集

之前需要做一些目标检测的训练,需要自己采集一些数据集,写了一个小demo来实现图片的采集使用方法:指定name的名称,name为分类的标签按n键拍摄图片程序会在当前目录下生成一个pictures的文件夹,图片存放在其中print("正在初始化摄像头...")importcv2importosimportdatetimecap=cv2.VideoCapture(0)print("初始化成功!")#name='play_phone'#name='haqian'

系统 2019-09-27 17:46:30 2386

Python

【Python 100天从新手到大师】那些年我们踩过的那些坑

那些年我们踩过的那些坑坑1-整数比较的坑在Python中一切都是对象,整数也是对象,在比较两个整数时有两个运算符==和is,它们的区别是:is比较的是两个整数对象的id值是否相等,也就是比较两个引用是否代表了内存中同一个地址。==比较的是两个整数对象的内容是否相等,使用==时其实是调用了对象的__eq__()方法。知道了is和==的区别之后,我们可以来看看下面的代码,了解Python中整数比较有哪些坑:defmain():x=y=-1whileTrue:x

系统 2019-09-27 17:57:31 2385

Python

python一键升级所有pip package的方法

pip_ungrade_all.py代码如下:#-*-coding:utf-8-*-importpipfromsubprocessimportcallfordistinpip.get_installed_distributions():call("pipinstall--upgrade"+dist.project_name,shell=True)以管理身份执行脚本pip_ungrade_all.py#pythonpip_ungrade_all.py以上这篇

系统 2019-09-27 17:56:56 2385

Python

Python基于百度地图API根据地址获取经纬度

根据一个中文的地址信息,获取该地址所对应的经纬度信息。(专业的说法是地理编码)。编程语言:Python3,百度地图API接口:http://lbsyun.baidu.com/index.php?title=webapi获取地址的经纬度大致步骤如下:1.注册百度账号、登录百度地图,申请秘钥:http://lbsyun.baidu.com/apiconsole/key?application=key2.查看百度地图中关于地址解析的服务文档:http://lbs

系统 2019-09-27 17:56:50 2385

Python

005 Python的IDE之Pycharm的使用

一、为什么用IDE(Python集成开发环境-Pycharm)到现在为止,我们也是写过代码的人啦,但你有没有发现,每次写代码要新建文件、写完保存时还要选择存放地点,执行时还要切换到命令行调用python解释器,好麻烦呀,能否一气呵成,让我简单的写代码?此时开发工具IDE上场啦,一个好的IDE能帮你大大提升开发效率。很多语言都有比较流行的开发工具,比如JAVA的Eclipse,C#,C++的VisualStudio,Python的是啥呢?Pycharm和Ju

系统 2019-09-27 17:55:55 2385

Python

python获取多线程及子线程的返回值

最近有个需求,用多线程比较合适,但是我需要每个线程的返回值,这就需要我在threading.Thread的基础上进行封装importthreadingclassMyThread(threading.Thread):def__init__(self,func,args=()):super(MyThread,self).__init__()self.func=funcself.args=argsdefrun(self):self.result=self.fun

系统 2019-09-27 17:53:22 2385

Python

Python 私有属性和名字重整、魔法属性和方法、上下文管理器

修改、查看私有属性、名字重整如下,Test类定义一个私有属性__name实例化一个对象a,无法调用该属性,打印a.__dict__(可以检查一个对象的所有属性)查看,发现__name存在并且名字变为_Test__name(无法调用的原因,名字被改变)改变规则:私有属性前添加类名,再在类名前添加一个下划线(名字重整)我们验证一下,打印修改后的属性,如下这里有个疑问,既然无法直接打印,那我们为什么可以直接修改?修改测试一下,打印输出,此时__name并不是私有

系统 2019-09-27 17:53:05 2385

Python

python实现壁纸批量下载代码实例

项目地址:https://github.com/jrainlau/wallpaper-downloader前言好久没有写文章了,因为最近都在适应新的岗位,以及利用闲暇时间学习python。这篇文章是最近的一个python学习阶段性总结,开发了一个爬虫批量下载某壁纸网站的高清壁纸。注意:本文所属项目仅用于python学习,严禁作为其他用途使用!初始化项目项目使用了virtualenv来创建一个虚拟环境,避免污染全局。使用pip3直接下载即可:pip3inst

系统 2019-09-27 17:52:28 2385

Python

python输入多行字符串的方法总结

Python中输入多行字符串:方法一:使用三引号>>>str1='''Leventselève,ilfauttenterdevivre.起风了,唯有努力生存。(纵有疾风起,人生不言弃。)'''>>>str1'Leventselève,ilfauttenterdevivre.\n起风了,唯有努力生存。\n(纵有疾风起,人生不言弃。)'>>>print(str1)Leventselève,ilfauttenterdevivre.起风了,唯有努力生存。(纵有疾风

系统 2019-09-27 17:51:17 2385

Python

Python 之 json 模块

前言:json是一种通用的数据类型,任何语言都认识,长得像字典,形式也是k-v{},其实json是字符串。字符串不能用key、value来取值,要先转成字典才可以格式如下:{"error_code":0,#要使用双引号,如果是单引号则运行时会报错,可以上网做在线json格式校验"stu_info":[{"id":0,"name":"a","sex":"男","age":22,"grade":"天蝎座","gold":100},{"id":1,"name":

系统 2019-09-27 17:50:53 2385

Python

Python机器学习经典实例

在如今这个处处以数据驱动的世界中,机器学习正变得越来越大众化。它已经被广泛地应用于不同领域,如搜索引擎、机器人、无人驾驶汽车等。本书首先通过实用的案例介绍机器学习的基础知识,然后介绍一些稍微复杂的机器学习算法,例如支持向量机、极端随机森林、隐马尔可夫模型、条件随机场、深度神经网络,等等。本书特色用最火的Python语言、通过各种各样的机器学习算法来解决实际问题!书中介绍的主要问题如下。探索分类分析算法并将其应用于收入等级评估问题使用预测建模并将其应用到实际

系统 2019-09-27 17:47:46 2385

Python

centos7安装Python3及出现BUG记录

一、安装(傻瓜式)1、mkdir/usr/local/python32、cd/usr/local/python33、wgethttps://www.python.org/ftp/python/3.6.5/Python-3.6.5.tgz4、yum-yinstallzlib-develbzip2-developenssl-develncurses-develsqlite-develreadline-develtk-develgdbm-develdb4-dev

系统 2019-09-27 17:47:23 2385

Python

python同步windows和linux文件

写python脚本的初衷,每次在windows编辑完文件后,想同步到linux上去,只能够登录服务器,然后再利用网络copy,重复性很大,就想着能不能写一个小脚本帮我同步。逻辑:比对本地和服务器文件的md5,如果md5不一致,则备份服务器上的文件,将本地的给上传上去。代码分为windows端和服务器端,有些东西,都让python一个做了,写着有点累,就想着,能否服务端提供一个端口,windows去调用这个接口,来完成一部分工作。python代码如下:需要额

系统 2019-09-27 17:57:00 2384