搜索到与相关的文章
Python

python 操作CDH的HDFS

环境:安装了pyenv,pippyenvglobal3.6.8pipinstallhdfspipinstallipython(个人喜欢使用pyenv的自动补全功能)安装完hdfs后建议重启,测试过程出现了hdfs模块找不到的情况注意:客户端分为Client和InsecureClient,Client需要验证权限In[1]:fromhdfsimportInsecureClientIn[2]:client_hdfs=InsecureClient('http:/

系统 2019-09-27 17:55:35 2424

Python

python爬虫案例

今天为大家整理了32个Python爬虫项目。整理的原因是,爬虫入门简单快速,也非常适合新入门的小伙伴培养信心。所有链接指向GitHub,祝大家玩的愉快~O(∩_∩)OWechatSogou[1]-微信公众号爬虫。基于搜狗微信搜索的微信公众号爬虫接口,可以扩展成基于搜狗搜索的爬虫,返回结果是列表,每一项均是公众号具体信息字典。DouBanSpider[2]-豆瓣读书爬虫。可以爬下豆瓣读书标签下的所有图书,按评分排名依次存储,存储到Excel中,可方便大家筛选

系统 2019-09-27 17:52:24 2424

Python

Python篇:函数

函数概念函数创建和调用空函数函数的定义与调用查看函数文档函数返回值函数的优势变量作用域局部变量全局变量global函数参数传递形参与实参参数检查默认参数可变参数拆包关键字参数参数组合匿名函数应用递归函数概念求阶乘汉诺塔概念如果在开发程序时,需要某块代码多次,但是为了提高编写的效率以及代码的重用,所以把具有独立功能的代码块组织为一个小模块,这就是函数.函数创建和调用空函数定义一个什么事也不做的空函数,可以用pass语句;pass可以用来作为占位符,还没想好怎

系统 2019-09-27 17:51:46 2424

Python

pycharm新建一个python工程步骤

小编最近由于工作原因要用到python,一门新的知识需要接触,对于我来说难度还是很大的。python工程目录结构每次创建一个python工程PyCharm会创建如下目录创建时会把python运行环境以及相应配置创建好其中./lib/site-packages这个目录是你当前工程依赖的各种包的信息,easy_install.pypip等都在里面./Scripts这个目录是从你当前环境变量里获取到对应的python程序的拷贝,并会把当前工程的执行切换到这个py

系统 2019-09-27 17:51:19 2424

Python

Python与Redis的连接教程

今天在写zabbixstormjob监控脚本的时候用到了python的redis模块,之前也有用过,但是没有过多的了解,今天看了下相关的api和源码,看到有ConnectionPool的实现,这里简单说下。在ConnectionPool之前,如果需要连接redis,我都是用StrictRedis这个类,在源码中可以看到这个类的具体解释:redis.StrictRedisImplementationoftheRedisprotocol.Thisabstrac

系统 2019-09-27 17:48:51 2424

Python

【Python】matplotlib基本绘图总结

importmatplotlib.pyplotasplt1.plt.plot()#绘图函数参数:color:线条颜色(例如color='b'设置为蓝色,‘g'、'r'、‘y'、'b'、'w'分别为绿红黄黑白)label:线条标签,若要显示需要加plt.legend()linestyle:线条风格(’-‘、’--‘、’:‘、'-.'分别为实线、破折线、虚线、点划线)linewidth:线条宽度marker:标记字符样式(可设置为'.'、'o'等)makers

系统 2019-09-27 17:48:41 2424

Java

重磅!Python再次第一,Java和C下降,凭什么?

微软Office提供基于COM接口的编程。Python通过pywin32可以方便地调用各组件。如果下载和安装pywin32有困难,可以到Sourceforge的镜像网摘查找合适的版本。单一账号importwin32com.clientaswin32defsend_mail():outlook=win32.Dispatch('Outlook.Application')mail_item=outlook.CreateItem(0)#0:olMailItemma

系统 2019-09-27 17:48:33 2424

Python

python 抓包保存为pcap文件并解析的实例

首先是抓包,使用scapy模块,sniff()函数在其中参数为本地文件路径时,操作为打开本地文件若参数为BPF过滤规则和回调函数,则进行Sniff,回调函数用于对Sniff到的数据包进行处理importosfromscapy.allimport*pkts=[]count=0pcapnum=0filename=''deftest_dump_file(dump_file):print"Testingthedumpfile..."ifos.path.exists

系统 2019-09-27 17:46:15 2424

Python

python聚类算法解决方案(rest接口/mpp数据库/json数据/下载

1.场景描述一直做java,因项目原因,需要封装一些经典的算法到平台上去,就一边学习python,一边网上寻找经典算法代码,今天介绍下经典的K-means聚类算法,算法原理就不介绍了,只从代码层面进行介绍,包含:rest接口、连接mpp数据库、回传json数据、下载图片及数据。2.解决方案2.1项目套路(1)python经典算法是单独的服务器部署,提供rest接口出来,供java平台调用,交互的方式是http+json;(2)数据从mpp数据库-Green

系统 2019-09-27 17:46:08 2424

Python

简单谈谈Python流程控制语句

人们常说人生就是一个不断做选择题的过程:有的人没得选,只有一条路能走;有的人好一点,可以二选一;有些能力好或者家境好的人,可以有更多的选择;还有一些人在人生的迷茫期会在原地打转,找不到方向。对于相信有上帝的人来讲,这就好像是上帝事先为我们制定好了人生路线,也好像是那些神仙为唐曾师徒的取经之路提前设置的重重磨难,上帝和神仙掌控了一切。编程语言可以模拟人类生活的方方面面,程序员就像上帝和神仙一样可以通过编程语言中特殊的关键字控制程序的执行过程,这些关键字组成的

系统 2019-09-27 17:38:46 2424