上一小节老袁给晓白介绍了python-web开发工程师主要做什么，并从初中高级三个层次分析了这个岗位的具体需求。本节继续介绍python爬虫工程师的一些具体要求。python爬虫工程师该岗位做什么？python爬虫工程师主要是从网上爬取各种数据，然后对数据做整理和简单的存储。具体的职责如下：设计并实现公司的爬虫软件设计并实现网络数据的抓取规则，可以定期爬取指定的网站设计爬虫策略和防屏蔽规则，提高网页抓取效率和质量实现数据提取，清洗，结构化，数据库存储和统计
系统 2019-09-27 17:50:32 1687
通过纯Python完成股票回测框架的搭建。什么是回测框架?Python资源共享群：484031800无论是传统股票交易还是量化交易，无法避免的一个问题是我们需要检验自己的交易策略是否可行，而最简单的方式就是利用历史数据检验交易策略，而回测框架就是提供这样的一个平台让交易策略在历史数据中不断交易，最终生成最终结果，通过查看结果的策略收益，年化收益，最大回测等用以评估交易策略的可行性。代码地址在最后。本项目并不是一个已完善的项目,还在不断的完善。回测框架回测框
系统 2019-09-27 17:50:31 1687
bsddb模块是用来操作bdb的模块，bdb是著名的BerkeleyDB，它的性能非常好，mysql的存储后端引擎都支持bdb的方式。这里简单介绍一些关于bsddb的使用方法。bdb不同于一般的关系数据库，它存储的数据只能是以key和value组成的一对数据，使用就像python的字典一样，它不能直接表示多个字段，当要存储多个字段的数据时，只能把数据作为一个整体存放到value中。使用bsddb面临的第一问题是使用什么数据访问方法，bdb支持四种：btre
系统 2019-09-27 17:50:30 1687
这篇文章主要介绍了Python检查云备份进程是否正常运行代码实例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下场景：服务器自动备份数据库文件，每两小时生成一个新备份文件，通过云备份客户端自动上传，需要每天检查是否备份成功。实现：本脚本实现检查文件是否备份成功，进程是否正常运行，并且发送相关邮件提醒。#!/usr/bin/envpythonimportosimporttimeimportsmtplibfro
系统 2019-09-27 17:50:29 1687
目录：0引言1环境2需求分析3前置准备4逛店铺流程回顾5代码全景展示6总结0引言最近叠猫猫的活动可真是十分的火爆，每天小伙伴们为了合猫猫忙的可谓是如火如荼。为啥要叠猫猫呢？赚猫币得现金红包！！眼看为实，先来看看我朋友的购物订单。看到没，优惠力度如此之大！！！后知后觉的我，错过了第一波，可不想错过第二波啊！活动需要不断的升级自家的猫，其中一个途径是通过逛店铺来获取喵币。每天可逛40店铺，共可领到40*300喵币！！但是，你总不能一直盯着玩吧？想想都累，所以呢
系统 2019-09-27 17:50:26 1687
数据描述每条数据项储存在列表中，最后一列储存结果多条数据项形成数据集data=[[d1,d2,d3...dn,result],[d1,d2,d3...dn,result],..[d1,d2,d3...dn,result]]决策树数据结构classDecisionNode:'''决策树节点'''def__init__(self,col=-1,value=None,results=None,tb=None,fb=None):'''初始化决策树节点args：co
系统 2019-09-27 17:50:26 1687
文件的数据是存放于硬盘上的，因而只存在覆盖、不存在修改这么一说，我们平时看到的修改文件，都是模拟出来的效果，具体的说有两种实现方式。一、方式一将硬盘存放的该文件的内容全部加载到内存，在内存中是可以修改的，修改完毕后，再由内存覆盖到硬盘（word，vim，nodpad++等编辑器）。importoswithopen('37r.txt')asfr,\open('37r_swap.txt','w')asfw:data=fr.read()#全部读入内存,如果文件很
系统 2019-09-27 17:50:22 1687
Python装饰器，分两部分，一是装饰器本身的定义，一是被装饰器对象的定义。一、函数式装饰器：装饰器本身是一个函数。1.装饰函数：被装饰对象是一个函数[1]装饰器无参数：a.被装饰对象无参数：复制代码代码如下:>>>deftest(func):def_test():print'Callthefunction%s().'%func.func_namereturnfunc()return_test>>>@testdefsay():return'hellowor
系统 2019-09-27 17:50:21 1687
博主在这个问题上卡了挺久的，贴出来解决方法帮助需要的朋友，直接上代码（测试环境：win10+Python2.7）：#coding=utf-8importsqlite3withsqlite3.connect(":memory:")asconn:try:init_sql="createtabletest(idintegerprimarykey,nametext(200)notnull);"\"insertintotest(name)values('小居居');
系统 2019-09-27 17:50:19 1687
如下所示：#!/usr/bin/envpython3#-*-coding:utf-8-*-importsqlite3conn=sqlite3.connect('test.db')#创建一个Cursor:cursor=conn.cursor()#查询记录：conn=sqlite3.connect('calendar.db')cursor=conn.cursor()#执行查询语句:cursor.execute('select*fromperpetualCale
系统 2019-09-27 17:50:18 1687
