搜索到与相关的文章
Python

, C++, Python, Scala 和 OCaml 实现同一个工程的比较

tx-rs-一个提供wrtieahead的原子交易库刚出来,仅供了解,这里的“交易”是指业务的原子性,常见于数据库中。与区块链或密码学中的交易,是不同的概念。类似于STM。Repoduang-使用宏来提供默认参数和命名参数一看就是国人的项目。命名有点玩耍的味道,但是思路和设计可以借鉴。useduang::duang;duang!(pubfnfoo(a:T,b:f64=13.0,c:T=a*a)->(T,f64,T)whereT:std::ops::Mul,

系统 2019-09-27 17:50:12 2375

Python

Python多进程并发操作中进程池Pool的应用

在利用Python进行系统管理的时候,特别是同时操作多个文件目录,或者远程控制多台主机,并行操作可以节约大量的时间。当被操作对象数目不大时,可以直接利用multiprocessing中的Process动态成生多个进程,10几个还好,但如果是上百个,上千个目标,手动的去限制进程数量却又太过繁琐,这时候进程池Pool发挥作用的时候就到了。Pool可以提供指定数量的进程,供用户调用,当有新的请求提交到pool中时,如果池还没有满,那么就会创建一个新的进程用来执行

系统 2019-09-27 17:48:11 2375

Python

python aiohttp 客户端使用方法 加快爬虫速度

介绍aiohttp是python的一个异步网络模块,包含客户端和服务端模块。相比requests模块,除了是异步写法外,大同小异,其速度比requests模块快。python的多线程有全局解释器锁(GIL),使用多线程实际上同一时刻仅有一个线程在执行,使用协程的相对比较快,可以再配合多进程使用。基本用法安装使用pip命令安装即可。pipinstallaiohttp发起请求aiohttp模块需要配合python自带的asyncio模块使用,以下代码为发起客户

系统 2019-09-27 17:47:13 2375

Python

Python 微信爬虫完整实例【单线程与多线程】

本文实例讲述了Python实现的微信爬虫。分享给大家供大家参考,具体如下:单线程版:importurllib.requestimporturllib.parseimporturllib.errorimportre,timeheaders=("User-Agent","Mozilla/5.0(WindowsNT6.1;WOW64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/60.0.3107.4Safari/537.3

系统 2019-09-27 17:47:09 2375

Python

零基础写python爬虫之使用urllib2组件抓取网页内容

版本号:Python2.7.5,Python3改动较大,各位另寻教程。所谓网页抓取,就是把URL地址中指定的网络资源从网络流中读取出来,保存到本地。类似于使用程序模拟IE浏览器的功能,把URL作为HTTP请求的内容发送到服务器端,然后读取服务器端的响应资源。在Python中,我们使用urllib2这个组件来抓取网页。urllib2是Python的一个获取URLs(UniformResourceLocators)的组件。它以urlopen函数的形式提供了一个

系统 2019-09-27 17:46:01 2375

Python

Python中Random和Math模块学习笔记

由于最近经常使用到Python中random,math和time``datetime模块,所以决定花时间系统的学习一下1.math模块math中的函数不可以用于太过复杂的数的运算,如果需要复杂数的运行最好使用cmath模块中同名函数,如果想要更加高级的数学功能,可以考虑选择标准库之外的numpy和scipy模块,它们不但支持数组和矩阵运算,还有丰富的数学和物理方程可供使用1.1.数学常量math.pi这个数学常量等于3.141592...math.e这个数

系统 2019-09-27 17:38:08 2375

编程技术

围绕Ext JS 2.0的IDE、插件和工具

Ext2.0的API包含许多的方法(函数)、属性和配置项,涵盖的面非常大,要全部列出几乎是不可能的。虽然API文档是童叟无欺精心打造的,但实际开发中,若果能够像其它语言Java和C#那样地支持JavaScript代码提示,那就更好啦。可喜的是,有若干的开发环境(IDE)和插件能够支持--并且是直接支持Ext2.0。AptanaStudio一谈到JavaScript的开发工具,就不得不提Aptana了。就我实际工作来说,每天都用它来完成AdobeAIR的工作

系统 2019-08-29 23:46:53 2375

编程技术

jFreeChart实例

jFreeChart是Java开发中常用的统计类组件,主要包括柱状图,饼状图等。下面我们介绍一下jFreeChart最简单的用法。首先需要导入jFreeChart的jar包,放在项目web\WEB-INF\lib文件夹下。然后我们以最简洁的代码实现一个统计功能。1.柱状图importjava.awt.Color;importjava.awt.Font;importjava.io.FileNotFoundException;importjava.io.Fil

系统 2019-08-29 23:37:49 2375

编程技术

【JXls推荐学习】jXLS - 用模板产生Excel报表

这将会是一个系列文章,介绍我们在开发过程中用到的一些opensourcelibrary,覆盖到的范围有Excel,Email,FTP,XML,Monitor等等=================主要内容分割线=================jXLS(http://jxls.sourceforge.net/)是一个用来产生Excel文件的library,它非常小巧而且易用,能够用一个Excel模板加上数据来渲染产生最终的Excel文件,比直接用POI这种底

系统 2019-08-29 23:37:31 2375

编程技术

实时机票/火车票抓取系统整体架构

实时机票/火车票抓取系统是一个带有业余性质的系统,主要是作为技术的训练场。比如说ActiveMq,RMI,WebService,即使最原始的Socket也在这里一展拳脚。大概可以分为几个模块:对外服务模块:WebService(Axis2),RMI的方式,原始Socket流方式(主要学习用),HTTPJSON方式。日志监控:提供对抓取的监控,监控抓取网站的规则变化,如果出现抓取错误等提供Email报警。流量/性能监控:经过改造后的系统粒度非常细,运用了责任

系统 2019-08-29 23:29:48 2375