Python - 军军小站|张军博客
Python

Python爬虫入门【23】:scrapy爬取云沃客项目外包网数据!

闲暇写一个外包网站的爬虫,万一你从这个外包网站弄点外快呢数据分析官方网址为https://www.clouderwork.com/进入全部项目列表页面,很容易分辨出来项目的分页方式得到异步请求RequestURL:https://www.clouderwork.com/api/v2/jobs/search?ts=1546395904852&keyword=&budget_range=&work_status=&pagesize=20&pagenum=3&s

系统 2019-09-27 17:55:39 2056

Python

详解Python 多线程 Timer定时器/延迟执行、Event事件

Timer继承子Thread类,是Thread的子类,也是线程类,具有线程的能力和特征。这个类用来定义多久执行一个函数。它的实例是能够延迟执行目标函数的线程,在真正执行目标函数之前,都可以cancel它。Timer源码:classTimer(Thread):def__init__(self,interval,function,args=None,kwargs=None):Thread.__init__(self)self.interval=interval

系统 2019-09-27 17:54:46 2056

Python

Python openpyxl 打开excel,修改某个参数值,读取到随着这个

记录一下这个历史性的时刻!纠结了好久的问题终于解决了。首先要感谢一下这个帖子:https://bbs.csdn.net/topics/392568534这个博主针对问题:openpyxl用data_only=True后,读取公式的值后save后,发现文件中公式都没了,请问有解决办法吗?提出,用win32打开再保存:defjust_open(filename):xlApp=Dispatch("Excel.Application")xlApp.Visible=

系统 2019-09-27 17:52:22 2056

Python

Python实现论坛自动签到

[文件]DakeleSign.py~4KB#!/usr/bin/envpython#-*-coding:utf-8-*-__author__='poppy''''dakelebbssigin'''importsysimporturllib2importurllibimportrequestsimportcookielibimportjsonfrompyqueryimportPyQueryaspqimportlogginglogging.basicConfi

系统 2019-09-27 17:50:06 2056

Python

在Gnumeric下使用Python脚本操作表格的教程

关于GnumericGnumeric是linux平台下的一款功能强大且易于使用的电子表格软件,与其他常用电子表格软件如Excel等在风格上非常一致。Gnumeric当前的稳定版是1.2.13,对中文的支持已经比较成熟。据官方信息,Gnumeric除实现了MSExcel所有的函数外,还实现了60多个Excel中不存在的函数和基本的金融方面函数,并已经具备了高级统计分析、可扩展的随机数产生器、线性或非线性求解的计算能力。更令人惊喜的是,现在Gnumeric已经

系统 2019-09-27 17:45:53 2056

Python

Python - 爬虫中文乱码之请求头 Accept-Encoding

原文链接:https://www.jianshu.com/p/70c3994efcd8?utm_source=oschina-app当用Python3做爬虫的时候,一些网站为了防爬虫会设置一些检查机制,这时我们就需要添加请求头,伪装成浏览器正常访问。header的内容在浏览器的开发者工具中便可看到,将这些信息添加到我们的爬虫代码中即可。Accept-Encoding:是浏览器发给服务器,声明浏览器支持的编码类型。一般有gzip,deflate,br等等。P

系统 2019-09-27 17:57:30 2055

Python

跟老齐学Python之for循环语句

废话少说,上干活。for的基本操作for是用来循环的,是从某个对象那里依次将元素读取出来。看下面的例子,将已经学习过的数据对象用for循环一下,看看哪些能够使用,哪些不能使用。同时也是复习一下过往的内容。复制代码代码如下:>>>name_str="qiwsir">>>foriinname_str:#可以对str使用for循环...printi,...qiwsir>>>name_list=list(name_str)>>>name_list['q','i',

系统 2019-09-27 17:55:50 2055

Python

关联算法②——Apriori算法原理及python实现

一、关联规则关联规则,顾名思义,就是寻找事物之间的关联关系。比如《啤酒与尿布》中,在某个特定时间段,会出现啤酒与尿布同时出现在购物篮中的现象,且出现频率非常高。调研发现这是一群爱喝啤酒的奶爸群体。如果可以通过类似的方式挖掘更多特定的群体需求,就可以进行交叉销售或捆绑销售来提升销售额和利润。Apriori算法就是经典的寻找物品的关联算法。二、Apriori算法原理1、基础概念项集:包含0个或者多个项的集合称为项集频繁项集:那些经常一起出现的物品集合2、关联规

系统 2019-09-27 17:55:14 2055

Python

学生时代的经历,利用Python在机房杀红蜘蛛,脱离老师控制!

这个为什么说是一次学生时代的经历呢,我的出发点并没有是为了吊胃口。确实,这个Python小应用,只能在学生时代用得着吧,尤其是高中和大学,如果你没有想到也没关系,看完我下面说的就会明白了。对红蜘蛛软件感到陌生?由于电脑教学机房都是没有投影仪的,所以才有了这款红蜘蛛控制软件,在局域网络上控制学生电脑,实现屏幕监视和远程控制的功能。简单来说,就是老师为了防止学生不好好上课,利用机房电脑去做其它事情的一种流氓类型软件。为何称之为牛皮糖软件?因为你的电脑都被老师控

系统 2019-09-27 17:54:31 2055

Python

Python之List的extend和append详解

在数据分析时,小白经常用到extend和append函数,但是经常两种搞不清楚,每次都需要试一下,可能大家也有类似的疑问,总结一下,加深对两个函数的理解。extend和append函数是List列表的两种对列表的扩展函数,先来看下,最基本的使用List添加List首先创建两个List:L1=['aaa','bbb','ccc']L2=['ddd','eee']看下,extend和append的区别:可以看到,在使用append时,是将L2作为一个整体,插入

系统 2019-09-27 17:54:11 2055

Python

报错:Command "python setup.py egg_info

安装pydensecrf时报错:(venv)dorothy@dorothy-MS-7A94:~/project/venv/bin$pipinstallpydensecrfCollectingpydensecrfUsingcachedhttps://files.pythonhosted.org/packages/31/5a/1c2ab48e8019d282c128bc5c621332267bb954d32eecdda3ba57306b1551/pydense

系统 2019-09-27 17:52:22 2055

Python

python3获取url文件大小示例代码

在python3中,urllib2被替换为urllib.requeset,因此头文件中添加importurllib.requestasurllib2defgetRemoteFileSize(url,proxy=None):"""通过content-length头获取远程文件大小url-目标文件URLproxy-代理"""opener=urllib2.build_opener()ifproxy:ifurl.lower().startswith('https:

系统 2019-09-27 17:52:05 2055

Python

python实现遍历文件夹修改文件后缀

本文实例为大家分享了python实现遍历文件夹修改文件后缀的具体代码,供大家参考,具体内容如下用法pythonModifer.py./-fpjavaxml#coding:utf-8#BuildbyLandGrey2016-05-27importosimportsys#批量修改路径与文件名defModifyprefix(Path,oldcontent,newcontent):all_file_list=os.listdir(Path)#列出指定目录下的所有文

系统 2019-09-27 17:50:50 2055

Python

Python使用itchat 功能分析微信好友性别和位置

这样就将你所有微信好友的信息都返回了,我们并不需要这么多的信息,我们选取一些信息存储到csv文件中注意:返回的信息是一个list,其中第一个是我自己的信息,所以要从第二项开始存储的文件2:女性,1:男性,0:其他接下来,我们分析csv文件中的数据首先我们看看微信好友性别的分布:我这里是用的Echarts图表,偷了一个小懒我的微信里还是男性占比多,比较正常接下来分析微信好友的位置Echarts展示这个柱状图很直观的向我们展示了微信朋友的分布。这篇文章只是用到

系统 2019-09-27 17:50:46 2055