拥有Python标签的文章
Python

Python写的一个定时重跑获取数据库数据

做大数据的童鞋经常会写定时任务跑数据,由于任务之间的依赖(一般都是下游依赖上游的数据产出),所以经常会导致数据获取失败,因为很多人发现数据失败后都会去查看日志,然后手动去执行自己的任务。下面我实现了一个自动重复执行去数据库取数,如果失败后自动重新去获取,直到把数据获取到。建数据表:CREATETABLE`testtable`(2`id`int(11)unsignedNOTNULLAUTO_INCREMENT,3`name`varchar(20)NOTNUL

系统 2019-09-27 17:56:10 2191

Python

我们为什么要减少Python中循环的使用

前言Python提供给我们多种编码方式。在某种程度上,这相当具有包容性。来自于任何语言的人都可以编写Python。然而,学习写一门语言和以最优的方式写一门语言是两件不同的事情。在这一系列名为PythonShorts的文章中,我将阐述Python提供的一些简单但是非常有用的结构,一些小技巧以及一些我在数据科学工作中遇到的案例。在这篇文章中,我将讨论Python中的for循环,以及如何尽量避免使用它们。写for循环的3种方式:让我用一个简单的例子来解释下。假设

系统 2019-09-27 17:56:07 2191

Python

Python数据 列表 矩阵转换

注意:数组转列表,tolist和list,最后的矩阵和数组转换成列表形式,用list()是将矩阵和数组整体转换成列表。如果要将其转换成基本的列表形式,则需要使用.tolist()或者.tolist()来转换。数组转列表矩阵转列表

系统 2019-09-27 17:55:59 2191

Python

Python入门篇之字符串

所有标准的序列操作对字符串都适用,但字符串是不可变的字符串常量:单引号:‘spa"m'双引号:"spa'm"三引号:'''...spam...''',"""...spam..."""转义字符:"s\tp\na\om"Raw字符串:r"C:\new\test.spm"Unicode字符串:u'eggs\u0020spam单双引号是一样的单双引号可以互换,字符常量表达式可以用两个单引号或两个双引号来表示--两种形式同样有效返回相同类型的对象:复制代码代码如下:

系统 2019-09-27 17:55:14 2191

Python

Python第五次作业

习题1:读入文件pmi_days.csv,完成以下操作:1.统计质量等级对应的天数,例如:优:5天良:3天中度污染:2天2.找出PMI2.5的最大值和最小值,分别指出是哪一天。1importpandasaspd2importnumpyasnp34days_path=open(r"C:\Users\Shinelon\Desktop\pmi_days.csv")5days_df=pd.read_csv(days_path)67#统计质量等级对应的天数8data

系统 2019-09-27 17:53:47 2191

Python

Python自动化整理Excel 表格

相信有不少朋友日常工作会用到Excel处理各式表格文件,更有甚者可能要花大把时间来做繁琐耗时的表格整理工作。最近有朋友问可否编程来减轻表格整理工作量,今儿我们就通过实例来实现Python对表格的自动化整理。首先我们有这么一份数据表source.csv:我们要做的是从上表中提取数据,来生成一份符合以下要求的表格:按照以下分组名单group.xls来整理数据表中的数据:最终要展现的数据项:其中“K数据/60”为数据表中的“数据K”/60后保留的2位小数我们先看

系统 2019-09-27 17:53:39 2191

Python

Python 两数相加 Add Two Numbers Leetcode

Python两数相加LeetcodeNo.2思路很简单,模拟小学加法运算就好了,因为是逆序的,头指针指向的那个其实就是个位,往后加就完事,但是唯一需要注意的是,最高位可能有进位。(属于代码练习题)ps:还有人说先把数全部取出来,用计算机加法算完,再建立链表连接起来,乍一看有点投机取巧好像可行的样子,但是我们要考虑计算和的时候会溢出。还有人考虑直接在原来的链表上改数字,多一位的话,就再加一个链表,首先不知道leetcode允不允许改数字,毕竟这种题目也是考察

系统 2019-09-27 17:53:35 2191

Python

python2.7.5升级到pyhon3.6.9

一.安装所需包yum-yinstallsqlite-develxzgccautomakezlib-developenssl-develepel-release二.下载python3.6.9https://www.python.org/ftp/python/3.6.9/wgethttps://www.python.org/ftp/python/3.6.9/Python-3.6.9.tgztarzxvfPython-3.6.9.tgzcdPython-3.6.

系统 2019-09-27 17:52:16 2191

Python

python时间日期函数与利用pandas进行时间序列处理详解

python标准库包含于日期(date)和时间(time)数据的数据类型,datetime、time以及calendar模块会被经常用到。datetime以毫秒形式存储日期和时间,datetime.timedelta表示两个datetime对象之间的时间差。下面我们先简单的了解下python日期和时间数据类型及工具给datetime对象加上或减去一个或多个timedelta,会产生一个新的对象fromdatetimeimportdatetimefromda

系统 2019-09-27 17:51:56 2191

Python

解决python3 requests headers参数不能有中文的问题

1需求,heeaders参数需要拼接中文参数param解决如下url='https://....search?keyword='+param+'&templateId=&page=1&pageSize=10'headers={"Accept":"application/json,text/javascript,*/*;q=0.01","Accept-Encoding":"gzip,deflate,br","Accept-Language":"zh-CN,z

系统 2019-09-27 17:51:00 2191

Python

解决python多行注释引发缩进错误的问题

如下所示:m_start=date+'09:00'm_end=date+'13:00'rsv_1={'act':'set_resv','dev_id':dev_id,'start':m_start,'end':m_end,}'''rsv_2={'_':'','act':'set_resv','dev_id':dev_id,'start':'2018-05-2113:00','end_time':'','kind_id':'','lab_id':'','me

系统 2019-09-27 17:49:35 2191

Python

Python工程师面试汇总:25条Python知识点,命中高达95%

1.到底什么是Python?你可以在回答中与其他技术进行对比下面是一些关键点:Python是一种解释型语言。这就是说,与C语言和C的衍生语言不同,Python代码在运行之前不需要编译。其他解释型语言还包括PHP和Ruby。Python是动态类型语言,指的是你在声明变量时,不需要说明变量的类型。你可以直接编写类似x=111和x="I’mastring"这样的代码,程序不会报错。Python非常适合面向对象的编程(OOP),因为它支持通过组合(composit

系统 2019-09-27 17:48:53 2191

Python

成功解决Python中出现的TypeError: object of type

原文链接:https://blog.csdn.net/qq_41185868/article/details/79039704本文链接:https://blog.csdn.net/qq_41185868/article/details/79039704成功解决Python中出现的TypeError:objectoftype‘zip’hasnolen()不罗嗦,直接解决问题!目录解决问题解决思路解决方法解决问题TypeError:objectoftype‘z

系统 2019-09-27 17:47:50 2191

Python

python设计tcp数据包协议类的例子

一.问题描述在tcp编程中,最需要解决的就是粘包分包问题。所以,我们需要在每个数据包前面加上数据包的长度用以分割粘连的包。二.包结构的设计包的组成:包长度+数据域包长度:用4个字节存储数据域长度,数据域长度即为其所占字节数数据域:由若干个变量组成,如果是定长变量则不用加变量长度定长变量:我们人为规定,传输中的int为4字节定长变量变长变量:那就是字符串啦文字难理解,那我就画个图吧:上图的第一行是数据包的一个总体结构第二行是数据域内部的一个结构(数据域的变量

系统 2019-09-27 17:46:34 2191

Python

python中的五种异常处理机制介绍

从几年前开始学习编程直到现在,一直对程序中的异常处理怀有恐惧和排斥心理。之所以这样,是因为不了解。这次攻python,首先把自己最畏惧和最不熟悉的几块内容列出来,里面就有「异常处理」这一项。《DiveintoPython》并没有专门介绍异常处理,只是例子中用到的时候略微说明了一下。今天下载《LearnPython》,直接进异常处理这块。这一部分有四章,第一章讲解异常处理的一般使用方法,后面的章节深入地讨论其机制。我目前只看了第一章,先学会用,以后有必要的时

系统 2019-09-27 17:45:37 2191