搜索到与相关的文章
各行各业

分布式实时统计系统--RAINBIRD

最近Twitter开发了一款分布式实时统计系统Rainbird。用处Rainbird可以用于实时数据的统计:1统计网站中每一个页面,域名的点击次数2内部系统的运行监控(统计被监控服务器的运行状态)3记录最大值和最小值性能要求作为大型网站的分布式应用,需要具备以下性能:1极高的写入性能,可以达到100,000的WPS2非常高的读取性能,可以达到10,000s的RPS3高度的可扩展性,包括读取和存储等等,能够扩展到100+TB的量级4读取速度响应间隔短,绝大多

系统 2019-08-12 01:32:14 2488

Python

python Selenium库的使用

一、什么是SeleniumSelenium是一个自动化测试工具,对各种浏览器都能很好地支持,包括Chrome、Firefox这些主流浏览器。使用它就可以模拟浏览器进行各种各样的操作,包括爬取一些网页内容。当你看到浏览器自己运行并且在网页上翻页或者跳转的时候,应该会觉得很有趣的。安装selenium先安装好Selenium库和对应浏览器的WebDriver驱动,比如我用的是Chrome,则相对应安装的是ChromeDriver。1.安装selenium#打开

系统 2019-09-27 17:56:45 2487

Python

浅谈MySQL在cmd和python下的常用操作

环境配置1:安装mysql,环境变量添加mysql的bin目录环境配置2:python安装MySQL-Python请根据自身操作系统下载安装,否则会报c++compile9.0,import_mysql等错误windows1064位操作系统可到http://www.lfd.uci.edu/~gohlke/pythonlibs/下载安装MySQL-Python包,至于whl和tar.gz在windows和Linux下的安装方法可查看我的上一篇文章一、cmd命

系统 2019-09-27 17:55:17 2487

Python

python使用minimax算法实现五子棋

这是一个命令行环境的五子棋程序。使用了minimax算法。除了百度各个棋型的打分方式,所有代码皆为本人所撸。本程序结构与之前的井字棋、黑白棋一模一样。有一点小问题,没时间弄了,就这样吧。一、效果图(略)二、完整代码fromfunctoolsimportwrapsimporttimeimportcsv'''五子棋Gobang作者:hhh5460时间:20181213'''#1.初始化棋盘#------------definit_board():'''初始化棋

系统 2019-09-27 17:54:48 2487

Python

python3获取url文件大小示例代码

在python3中,urllib2被替换为urllib.requeset,因此头文件中添加importurllib.requestasurllib2defgetRemoteFileSize(url,proxy=None):"""通过content-length头获取远程文件大小url-目标文件URLproxy-代理"""opener=urllib2.build_opener()ifproxy:ifurl.lower().startswith('https:

系统 2019-09-27 17:52:05 2487

Python

python中使用while循环的实例

python中for循环用于针对集合中的每个元素的一个代码块,而while循环能实现满足条件下的不断运行。使用while循环时,由于while只要满足条件就会执行代码,故必须指定结束条件,否则会形成死循环。如图,i的初始值为1,由于没有给i再进行赋值,导致i一直都满足条件,进入死循环。代码示例如下:i=1whilei<=5:print(i)上述问题的解决方案就是在循环中,给i赋值。这样当i不再满足条件时,程序将终止。代码示例如下:i=1whilei<=5:

系统 2019-09-27 17:50:32 2487

Python

基于python的scrapy环境搭建

0.1安装python软件32位机的电脑安装python-3.6.3.exe64位机的电脑安装python-3.6.3-amd64.exe0.1.1python环境搭建执行安装程序选择AddPython3.6toPATH,然后点击Customizeinstallation确保所有的选项都被选中,然后点击Next选择Installforallusers,然后定制自己的安装路径。点击Install按钮安装完成后,启动cmd命令行(需要在管理员界面进入)。输入p

系统 2019-09-27 17:50:00 2487

Python

python替换字符串中的子串图文步骤

修改字符串本身是不可能的,因为字符串是不可变类型,只能是通过某些方法来产生它的副本。再把副本赋值给原字符串,达到类似替换的作用。这里介绍几种方法。旧串换新串:使用str.replace(old,new,max)1)字符串调用此函数时,将生成一个字符串的副本。副本中new将替代old。2)old-原来的子串。3)new-新子串,用于替换old。4)max-最大替换个数,(可以不指定,为全部替换)在指定max时,如果超出了old子串的个数,也是全部替换。1、分

系统 2019-09-27 17:49:06 2487

Python

使用python保留两位小数

首先定义三个变量x=3.142222y=3.147777z=3.21.使用字符串格式化并且四舍五入print("%.2f"%x)print("%.2f"%y)print("%.2f"%z)结果如下:3.143.153.20不足两位小数的补齐啦2.使用内置round()函数并且四舍五入round(x,2)3.14round(y,2)3.15round(z,2)3.2不足两位小数的不补齐3.使用内置decimal模块并且四舍五入fromdecimalimpor

系统 2019-09-27 17:46:33 2487

Python

使用Python爬取前程无忧上南京地区Python职位以及对应工资

获取原始数据最近在学习Python,做了一个爬虫程序练练手,前程无忧这个网站页面布局还是挺简单的,适合我这种新手。使用requests+bs4爬取不多说了,先来看看页面布局吧。这是前程无忧上的职位列表,看上去还是很清楚的然后再来看看页面布局,使用Google浏览器打开前程无忧网页,然后按下F12每一个class为el的div就代表一个招聘信息然后再来看看div里面是怎么布局的,我们需要获取第二列公司名称以及第四列的薪资,其他的暂时不管。公司名称在el这个d

系统 2019-09-27 17:45:58 2487