»用HSCALE实现MySQL的数据分布式存储江边潮未尽，枫红一季秋--NinGoo'sblog针对单个表过大造成的性能问题，MySQL在5.1开始引入了分区表(partition)，可以将数据在内部拆分存储，对应用透明，但是分区表只能将表在同一个数据库内部分解，而且对于表的维护(比如执行altertable)还是比较麻烦。手工分表也是一个解决方法，手工分表还有一个好处是可以将表分布到不同的服务器中，实现分布式存储。但是手工分表要求应用程序做相应的改写，以
系统 2019-08-12 01:33:23 2579
原文:《BI那点儿事》数据流转换——条件性拆分根据条件分割数据是一个在数据流中添加复杂逻辑的方法，它允许根据条件将数据输出到其他不同的路径中。例如，可以将TotalSugar<27.4406的输出到一个路径，TotalSugar>=27.4406的输出到另一个路径。如图。可以从上面的属性结构中拖放一个列或者代码段，然后根据逻辑重命名而不是使用默认值Case1，还可以编辑输出列的名字。《BI那点儿事》数据流转换——条件性拆分
系统 2019-08-12 01:32:16 2579
原文:mysql支持的数据类型及其测试1.基础知识1.1如何来查看mysql的帮助手册？intHelpfloat;1.2创建表的规则CREATETABLE[IFNOTEXISTS]tbl_name(字段名字段类型[完整性的约束条件]);1.3如何向表中插入数据INSERT[INTO]tab_name[(字段名称……)]VALUES(值……)1.4Mysql数据类型1.数值型整数类型TINYINT:范围0~255;-128~127占用1字节SMALLINT；
系统 2019-08-12 01:32:09 2579
之前在公司做一个项目，项目需求是按照标签分类，去不同网站上爬取文章的内容，标题等。然后我就一个网站一个网站的去配xpath，可是网站特别多的时候，领导就会对我提出一个需求能不能，写一种程序然后用来解析所有的网站，也就是智能化解析。这对我一个刚刚做爬虫不久的新手就是很头疼了。于是各种网上找资料，于是发现了DIFFBOT这个东西。官网https://www.diffbot.com，注册后会有15天的免费使用的时间。注册后会发邮件给你一个token,通过toke
系统 2019-09-27 17:57:24 2578
下面就是今天下午的研究成果。发布系统需要响应用户的中断请求，需要在GET方法中杀掉由subprocess派生的子进程，刚开始直接用os.kill发现子进程的子进程无法kill，谷歌了一些，发现kill可以干掉进程组，于是测试，但是默认情况下，subprocess派生的进程组和主程序，也就是我的web.py进程是在一个进程组里的，这要是kill了，那就调的了。继续翻google，看subprocess的document时发现这个变量：subprocess.C
系统 2019-09-27 17:56:58 2578
#-*-coding:utf-8-*-importsysreload(sys)sys.setdefaultencoding('utf-8')importosfromseleniumimportwebdriverfromselenium.webdriver.common.keysimportKeysfromselenium.webdriver.chrome.optionsimportOptionsimporttimechrome_options=Option
系统 2019-09-27 17:54:58 2578
我们都知道，爬虫获取页面的响应之后，最关键的就是如何从繁杂的网页中把我们需要的数据提取出来，python从网页中提取数据的包很多，常用的解析模块有下面的几个：BeautifulSoupAPI简单但解析速度慢，不推荐使用lxml由C语言编写的xml解析库(libxm2),解析速度快但是API复杂Scrapy综合以上两者优势实现了自己的数据提取机制，被称为Selector选择器。它是由lxml库构建的，并简化了API，先通过XPath或者CSS选择器选中要提取
系统 2019-09-27 17:54:28 2578
CentOS7.2默认安装了python2.7.5因为一些命令要用它比如yum它使用的是python2.7.5。使用python-V命令查看一下是否安装Python然后使用命令whichpython查看一下Python可执行文件的位置python指向的是python2.7安装1.因为我们要安装python3版本，所以python要指向python3才行，目前还没有安装python3，先备份,备份之前先安装相关包，用于下载编译python3yuminstal
系统 2019-09-27 17:54:10 2578
以下代码对于元组，字典和列表都是可以用的A=[1,2,3]print(A)#输出整个列表，包括逗号和括号等A=[1,2,3]forainA:print(a)#输出所有元素A=[1,2,3]N=0whileN列表的排序https://blog.csdn.net/GrofChen/article/details/91466264列表的所有内置函数https://blog.csdn.net/GrofChen/article/details/91371937
系统 2019-09-27 17:53:29 2578
作者：chen_h微信号&QQ：862251340微信公众号：coderpai（一）机器学习中的集成学习入门（二）bagging方法（三）使用Python进行交易的随机森林算法（四）Python中随机森林的实现与解释通过从单个决策树构建来使用和理解随机森林幸运的是，对于像Scikit-Learn这样的库，现在很容易在Python中实现数百种机器学习算法。这很容易，我们通常不需要任何关于模型是如何工作的知识来使用它。虽然不需要知道所有细节，但了解机器学习模型
系统 2019-09-27 17:50:48 2578
