Python

python爬虫系列(一)

前言关于python爬虫目前有两个主流的库一个是urllib和requests在python3中urllib2已经没有了,取而代之的是urllib.request。这里的话我将首先介绍urllib.request的使用。之后我再介绍request,我本人是打算做一个系列的爬虫教程不仅仅包括入门还有实战进阶所以我希望浏览我写的博客时可以按顺序浏览学习。那么废话不多说奉上名言成功没有偶然。即便有些胜利者谦虚地说,自己的成功是偶然的缘故。——尼采开始正片!!!u

系统 2019-09-27 17:57:27 2365

Python

python爬虫之快速对js内容进行破解

前言一般js破解有两种方法,一种是用Python重写js逻辑,一种是利用第三方库来调用js内容获取结果。这两种方法各有利弊,第一种方法性能好,但对js和Python要求掌握比较高;第二种方法快捷便利,对一些复杂js加密很有效。这次我们就用第三方库来进行js破解。目标网站本次网站是[企名片],网站对展示的数据进行了加密,所以直接找根本找不到。目标url:https://www.qimingpian.com/finosda/project/pinvestmen

系统 2019-09-27 17:57:02 2365

Python

python操作小程序云数据库实现简单的增删改查功能

不止python,你可以利用任何语言那实现通过http请求来操作你自己的小程序云数据库了背景也是在最近吧,小程序更新了云开发HTTPAPI文档,提供了小程序外访问云开发资源的能力,使用HTTPAPI开发者可在已有服务器上访问云资源,实现与云开发的互通。原本云数据库还是相对封闭的,只能通过自己的小程序或者云函数来进行访问,而现在,你只要调用官方提供的接口就能实现对云函数的增删改查了。这里通过python作为演示来进行简单的测试,当然你也可以使用java,ph

系统 2019-09-27 17:56:08 2365

Python

利用python numpy+matplotlib绘制股票k线图的方法

一、pythonnumpy+matplotlib画股票k线图#--coding:utf-8--importrequestsimportnumpyasnpfrommatplotlibimportpyplotaspltfrommatplotlibimportanimationfig=plt.figure(figsize=(8,6),dpi=72,facecolor="white")axes=plt.subplot(111)axes.set_title('Sha

系统 2019-09-27 17:55:36 2365

Python

零基础写python爬虫之urllib2中的两个重要概念:Openers和

在开始后面的内容之前,先来解释一下urllib2中的两个个方法:info/geturlurlopen返回的应答对象response(或者HTTPError实例)有两个很有用的方法info()和geturl()1.geturl():这个返回获取的真实的URL,这个很有用,因为urlopen(或者opener对象使用的)或许会有重定向。获取的URL或许跟请求URL不同。以人人中的一个超级链接为例,我们建一个urllib2_test10.py来比较一下原始URL

系统 2019-09-27 17:54:49 2365

Python

浅析 python 属性描述符(上)

转载自我自己的github博客——>半天钟的博客元编程相关博文的目录及链接这篇博文是元编程系列博文中的其中一篇、这个系列中其他博文的目录和连接见下:使用python特性管理实例属性浅析python属性描述符(上)浅析python属性描述符(下)python导入时与运行时python元编程之动态属性python元编程之类元编程Review在上一篇博文中、我们使用python特性(property)管理了实例属性,最大的好处是:在使用property装饰器后,

系统 2019-09-27 17:53:35 2365

Python

简单使用Python自动生成文章

为了应付某些情况,需要做17份记录。虽然不很重要,但是17份完全雷同也不很好。大体看了一下,此记录大致分为四段。于是决定每段提供四种选项,每段四选一,拼凑成四段文字,存成一个文件。文件名就叫“XX记录+日期”。应急的随手创作,使用了“文件操作”和“生成随机数”的功能。比较简陋。后期扩展可以考虑搭配个数据库。复制代码代码如下:#-*-coding:cp936-*-importrandomtitle='XXX周例会\n会议时间:'timelist=['6月6日

系统 2019-09-27 17:53:26 2365

Python

Python探索性数据分析,这样才容易掌握

原文链接:https://www.tinymind.cn/competitions/48作者|RitiDass译者|LJY整理|Lemonbit译文来源|Python数据之道(ID:PythonDataLab)导语:理解你的数据的最佳方法是花时间去研究它。Python探索性数据分析教程介绍每个数据科学家都必须掌握的最重要的技能之一是正确研究数据的能力。彻底的探索性数据分析(EDA,ExploratoryDataAnalysis)是必要的,这是为了确保收集数

系统 2019-09-27 17:51:45 2365

Python

leetcode 139. 单词拆分 Python

分类题目解题思路Python实现题目给定一个非空字符串s和一个包含非空单词列表的字典wordDict,判定s是否可以被空格拆分为一个或多个在字典中出现的单词,地址。说明:拆分时可以重复使用字典中的单词。你可以假设字典中没有重复的单词。示例1输入:s="leetcode",wordDict=["leet","code"]输出:true解释:返回true因为"leetcode"可以被拆分成"leetcode"。示例2输入:s="catsandog",wordD

系统 2019-09-27 17:50:35 2365

Python

Python 实用技巧之正则表达式查找和替换文本的操作方法

1、需求我们想对字符串中的文本做查找和替换。2、解决方案对于简单的文本模式,使用str.replace()即可。例如:text='mark,帅哥,18,183帅,mark'print(text.replace('18','19'))print(text)运行结果:mark,帅哥,19,193帅,markmark,帅哥,18,183帅,mark针对更为复杂的模式,可以使用re模块中的sub()函数。实例:将日期格式从“11/28/2018”改为“2018-1

系统 2019-09-27 17:49:23 2365

Python

python实现文件的备份流程详解

python实现输入要备份的文件名称:test.txt12行代码实现文件备份功能第一步:打开我们的pycharm软件,然后新建一个Python文件第二步:新建好我们的Python文件后,我们在编辑界面输入以下代码:oldfilename=input("请输入要备份的文件名:")#输入需要备份的旧文件名oldfile=open(oldfilename,'r')#打开旧文件ifoldfile:#如果文件存在,则执行下面的语句fileflagnum=oldfil

系统 2019-09-27 17:49:08 2365

Python

python实现爬取百度图片的方法示例

本文实例讲述了python实现爬取百度图片的方法。分享给大家供大家参考,具体如下:importjsonimportitertoolsimporturllibimportrequestsimportosimportreimportsysword=input("请输入关键字:")path="./ok"ifnotos.path.exists(path):os.mkdir(path)word=urllib.parse.quote(word)url=r"http:/

系统 2019-09-27 17:47:09 2365

Python

【python】Leetcode(primer)

(2019.7.26)不断更新中……【python】Leetcode(DataStructure/Algorithm)【python】Leetcode(DynamicProgramming)【python】Leetcode(Map)【python】Leetcode(String)【python】Leetcode(Tree)【python】Coding(Interview)文章目录数字260.只出现一次的数字III(字典/位运算)136.只出现一次的数字(字

系统 2019-09-27 17:47:04 2365

Python

python async with和async for的使用

网上asyncwith和asyncfor的中文资料比较少,我把PEP492中的官方陈述翻译一下。异步上下文管理器”asyncwith”异步上下文管理器指的是在enter和exit方法处能够暂停执行的上下文管理器。为了实现这样的功能,需要加入两个新的方法:__aenter__和__aexit__。这两个方法都要返回一个awaitable类型的值。异步上下文管理器的一种使用方法是:classAsyncContextManager:asyncdef__aente

系统 2019-09-27 17:47:04 2365

Python

解决Python传递中文参数的问题

今天有个需要需要传递中文参数给URL但是在GBK环境下的脚本传递GBK的参数老是给我报UNICODE的解码错误。烦的很。所以我们果断选择用urlencode来处理中文,由于国内外网站编码不同,国内是GBK的,国外是UTF8的。>>>importsys>>>sys.stdin.encoding'GBK'表示我们的环境是GBK的>>>importurllib>>>urllib.quote('编码坑爹')'%B1%E0%C2%EB%BF%D3%B5%F9'这样我

系统 2019-09-27 17:38:34 2365