搜索到与相关的文章
Python

在Python中利用Pandas库处理大数据的简单介绍

在数据分析领域,最热门的莫过于Python和R语言,此前有一篇文章《别老扯什么Hadoop了,你的数据根本不够大》指出:只有在超过5TB数据量的规模下,Hadoop才是一个合理的技术选择。这次拿到近亿条日志数据,千万级数据已经是关系型数据库的查询分析瓶颈,之前使用过Hadoop对大量文本进行分类,这次决定采用Python来处理数据:硬件环境CPU:3.5GHzIntelCorei7内存:32GBHDDR31600MHz硬盘:3TBFusionDrive数据

系统 2019-09-27 17:50:47 2183

Python

Python实现的简单文件传输服务器和客户端

还是那个题目(题目和流程见java版本),感觉光用java写一点新意也没有,恰巧刚学习了python,何不拿来一用,呵呵:服务器端:importSocketServer,timeclassMyServer(SocketServer.BaseRequestHandler):userInfo={'yangsq':'yangsq','hudeyong':'hudeyong','mudan':'mudan'}defhandle(self):print'Connec

系统 2019-09-27 17:50:40 2183

Python

python发送告警邮件脚本

python脚本为敏捷开发脚本,在zabbix监控也起到重要作用,以下是使用python脚本发送告警邮件配置方法。脚本如下:#!/usr/bin/python#coding:utf-8importsmtplibfromemail.mime.textimportMIMETextimportsysmail_host='smtp.126.com'mail_user='username'mail_pass='passwd'mail_postfix='126.com

系统 2019-09-27 17:50:36 2183

Python

Apache Flink 1.9.0 为什么将支持 Python API ?

作者:孙金城(金竹)本文目录:1.最流行的编程语言2.互联网最火热的领域2.1大数据时代,数据量与日俱增2.2数据的价值来源于数据分析2.3数据价值最大化,时效性3.阿尔法与人工智能4.总结众所周知,ApacheFlink(以下简称Flink)的Runtime是用Java编写的,而即将发布的ApacheFlink1.9.0版本则会开启新的ML接口和新的flink-python模块,Flink为什么要增加对Python的支持,想必大家一定好奇。也许大家都很清

系统 2019-09-27 17:50:32 2183

Python

python装逼大法--人脸识别

使用python3可以很轻松的实现人脸识别,在公司装逼利器,还可以默默存下美腻女同事的照片。实现方法如下:一、思路调取摄像头—拍摄照片—调用百度云计算—显示结果。难道你以为是自己写算法么?当时是调用接口了,百度开放了这么好的装逼神器,此时不用更待何时?思路整理好之后就是分析使用工具,通过查询得知,调用摄像头/拍摄照片可以使用opencv模块,调用百度云计算更简单,直接上百度云注册一下,按照他的文档操作就行了。显示结果如果low一点,就用print就行,如果

系统 2019-09-27 17:48:31 2183

Python

pycharm使用正则表达式批量添加print括号完美从python2迁移...到python3

网络下载的python代码,版本参差,从python2.x迁移python3.x的过程中,存在print语法问题,即python2.x中print无括号,python3.x中print有括号。逐行添加括号未免效率过低,因此,可使用正则表达式的方法,提供解决方法。1、在pycharm编译器中,Ctrl+R调出替换功能框,勾选“Regex”,选择正则表达式替换方法2、从上到下,第一个搜索框输入print(.*?);?$正则表达式含义.匹配任意字符,除了换行符,

系统 2019-09-27 17:47:46 2183

Python

Python入门篇之条件、循环

1.if语句Python中的if子句看起来十分熟悉.它由三部分组成:关键字本身,用于判断结果真假的条件表达式,以及当表达式为真或者非零时执行的代码块.if语句的语法如下:ifexpression:expr_true_suiteif语句的expr_true_suite代码块只有在条件表达式的结果的布尔值为真时才执行,否则将继续执行紧跟在该代码块后面的语句.(1)多重条件表达式单个if语句可以通过使用布尔操作符and,or和not实现多重判断条件或是否定判断条

系统 2019-09-27 17:47:35 2183

Python

python selenium爬取斗鱼所有直播房间信息过程详解

还是分析一下大体的流程:首先还是Chrome浏览器抓包分析元素,这是网址:https://www.douyu.com/directory/all发现所有房间的信息都是保存在一个无序列表中的li中,所以我们可以先获取一个装有li的element对象的列表,然后在对每个element逐一操作分析斗鱼的翻页,有一个下一页按钮,是个li,class="dy-Pagination-item-custom",但是当烦到最后一页的时候,class="dy-Paginat

系统 2019-09-27 17:47:21 2183

Python

Python 编码处理-str与Unicode的区别

一篇关于STR和UNICODE的好文章整理下python编码相关的内容注意:以下讨论为Python2.x版本,Py3k的待尝试开始用python处理中文时,读取文件或消息,http参数等等一运行,发现乱码(字符串处理,读写文件,print)然后,大多数人的做法是,调用encode/decode进行调试,并没有明确思考为何出现乱码所以调试时最常出现的错误错误1Traceback(mostrecentcalllast):File"",line1,inUnico

系统 2019-09-27 17:46:15 2183

Python

python爬虫入门教程之糗百图片爬虫代码分享

学习python少不了写爬虫,不仅能以点带面地学习、练习使用python,爬虫本身也是有用且有趣的,大量重复性的下载、统计工作完全可以写一个爬虫程序完成。用python写爬虫需要python的基础知识、涉及网络的几个模块、正则表达式、文件操作等知识。昨天在网上学习了一下,写了一个爬虫自动下载「糗事百科」里面的图片。源代码如下:复制代码代码如下:#-*-coding:utf-8-*-#上面那句让代码里支持中文#------------------------

系统 2019-09-27 17:45:42 2183