Python

python爬虫入门(一)

1.Request库Request库有七个基本方法:首先以requests库的request方法进行讲解:其次,以其中典型的get方法进行说明:1.r=requests.get(url)首先get构造一个向服务器请求资源的Request对象,r是一个返回的一个包括服务器资的Response对象。2.r=requests.get(url,params=None,**kwargs)params:url中的额外参数,字典或者字节流格式...可以修改url内容**

系统 2019-09-27 17:46:57 2122

Python

python 的 scapy库,实现网卡收发包的例子

问题:测试时收发流采用TestCenter、SmartBit等仪表来进行。如果仍采用其进行自动化冒烟,则会带来效率低、成本高的问题。解决方案:采用网卡来收发流,虽然有性能统计上的缺陷,但可以验证一些基本功能,且经济。采用scapy模块,1-获取计算机网卡的iface,并预先设计好用哪些iface进行收发流;2-conf.L2listen对各个iface进行监听3-subprocess.Popen来调用tShark.exe启动抓包,也可以调用ping.exe

系统 2019-09-27 17:46:36 2122

Python

Python中多线程thread与threading的实现方法

学过Python的人应该都知道,Python是支持多线程的,并且是native的线程。本文主要是通过thread和threading这两个模块来实现多线程的。python的thread模块是比较底层的模块,python的threading模块是对thread做了一些包装的,可以更加方便的被使用。这里需要提一下的是python对线程的支持还不够完善,不能利用多CPU,但是下个版本的python中已经考虑改进这点,让我们拭目以待吧。threading模块里面主

系统 2019-09-27 17:46:35 2122

Python

MacOS升级python版本

最近学习python的时候发现python2的版本和python3的版本不兼容,python2使用的版本只是开发者还在维护,python3的版本性能会更好,使用的人也更多,所以还是选择将python升级到3.x版本。本人使用的是macos的系统,系统版本是10.13.6,首先查看一下系统自带的python版本。~python-V显示python的版本是Python2.7.10下面使用升级操作~brewupdatepython...最近学习python的时候

系统 2019-09-27 17:46:10 2122

Python

python elasticseach6.2.1. 和

问题背景:同一个python脚本项目同时处理elasticseach6.2.1.和elasticseach5.1.1中存储的数据解决因为包冲突带来的问题解决思路:开一个python虚拟环境python安装虚拟环境:https://www.jianshu.com/p/4c898236cf35.3、创建虚拟环境mkvirtualenves5附:切换虚拟环境:workones5退出虚拟环境:deactivate4、查看当前虚拟环境安装的插件piplist5、py

系统 2019-09-27 17:45:40 2122

Python

Python 命令行之旅 —— 初探 argparse

作者:HelloGitHub-ProdesireHelloGitHub的《讲解开源项目》系列,项目地址:https://github.com/HelloGitHub-Team/Article『讲解开源项目系列』启动——让对开源项目感兴趣的人不再畏惧、让开源项目的发起者不再孤单。跟着我们的文章,你会发现编程的乐趣、使用和发现参与开源项目如此简单。欢迎联系我们给我们投稿,让更多人爱上开源、贡献开源~前言你是否好奇过在命令行中敲入一段命令后,它是如何被解析执行的

系统 2019-09-27 17:45:24 2122

Python

使用Python中的线程进行网络编程的入门教程

引言对于Python来说,并不缺少并发选项,其标准库中包括了对线程、进程和异步I/O的支持。在许多情况下,通过创建诸如异步、线程和子进程之类的高层模块,Python简化了各种并发方法的使用。除了标准库之外,还有一些第三方的解决方案,例如Twisted、Stackless和进程模块。本文重点关注于使用Python的线程,并使用了一些实际的示例进行说明。虽然有许多很好的联机资源详细说明了线程API,但本文尝试提供一些实际的示例,以说明一些常见的线程使用模式。全

系统 2019-09-27 17:38:28 2122

Python

在Python的Django框架中包装视图函数

我们最终的视图技巧利用了一个高级python技术。假设你发现自己在各个不同视图里重复了大量代码,就像这个例子:defmy_view1(request):ifnotrequest.user.is_authenticated():returnHttpResponseRedirect('/accounts/login/')#...returnrender_to_response('template1.html')defmy_view2(request):ifno

系统 2019-09-27 17:37:44 2122

编程技术

下载天量的“泡沫”

最近,一些著名的软件推出后,老喜欢拿下载量来说事儿,比如之前的IE7,最近的Firefox3.0等。其实下载量,大家真的不用太当回事,也并不能说明市场占有率或者受欢迎程度。传统的抽样调查方式,可能才是搞清楚真正市场状态的最有效手段。自从有了计算机和网络以来,就多了一群喜欢尝鲜和折腾软件的人,笔者因所学影响到性格,也对软件试用趋之若鹜。但往往也是新鲜一阵子,用过后就删除,安装后就很少运行过。真正工作、生活中用的上的实用软件,其实就那几种。前段时间升级了Fir

系统 2019-08-29 23:00:39 2122

编程技术

自定义日期挑选控件

cocoa提供了UIDatePicker控件,但是对于程序员而言并不友好。其糟糕之处,莫过于无法指定其frame,它的大小固定为320*216(占据了近整个iphone屏幕的一半),导致在UI设计时很难安排下这个“巨大”的东西。我们自定义的日期挑选控件是这样的。它默认情况下显示为一个textfield,以文本的方式显示日期,当你试图编辑它时,会弹出一个足够巨大的UIDatePicker控件:

编程技术

用log4j将日志写入数据库以及应用

以下为log4j中的配置参数:%m输出代码中指定的消息%p输出优先级,即DEBUG,INFO,WARN,ERROR,FATAL%r输出自应用启动到输出该log信息耗费的毫秒数%t输出产生该日志事件的线程名;%n输出一个回车换行符,Windows平台为"\r\n",Unix平台为"\n"%d输出日志时间的日期或时间,默认格式为ISO8601,也可以在其后指定格式,比如:%d{yyyMMMddHH:mm:ss,SSS},输出类似:2008年10月18日22:1

系统 2019-08-29 22:51:08 2122

编程技术

ls colours

bash:LS_COLORS='di=1:fi=0:ln=31:pi=5:so=5:bd=5:cd=5:or=31:mi=0:ex=35:*.rpm=90'exportLS_COLORShttp://linux-sxs.org/housekeeping/lscolors.html引用Hereisaneasywaytosetdifferentcoloursfordifferentkindsoffileswhenusingthelscommand.Addthe

系统 2019-08-29 22:47:56 2122

编程技术

树节点移动操作----使用微软treeview控件

树节点移动操作----使用微软treeview控件作者:pfengkMSN:pfengk@hotmail.com更多文章请访问:http://www.cnblogs.com/pfengk/目录概述.................................................................................................................................1操作

系统 2019-08-29 22:44:50 2122

编程技术

String Integer int互转及日期与String的互转,

(1)将数字转换成字符串inti=7;doubled=13.56;Stringstr1,str2;str1=Integer.toString(i);str2=Double.toString(d);执行以后,str1存的字符串是"7",str2存的字符串是"13.56".(2)将字符串转换成数值Stringstr1="3532";Stringstr2="187.863";Integerm;Doublen;m=Integer.valueOf(str1);//将

系统 2019-08-29 22:41:02 2122

编程技术

程序员业余项目死亡的原因

我们都有这样的业余项目:项目创建一半就弃之于坟墓,未完成的梦想遗体就这样扔之于文件夹中。游戏、应用程序、可视化数据等等。现在所谓伟大的点子最后只能沦落为空气中卑贱的尘埃。这是一个可悲的事实,因为业余项目原本应该成为一个传奇。在它们最辉煌的时刻,能够让你朝思暮想,夜不成寐,眼中只有一个它。很少很少的一部分人会够保持下去,沉溺于此。它们让你觉得自己还活着,它们比sex更好。但大多数的业余项目往往没有那么幸运。被抛弃,然后静静地,死去。我们会说自己没有时间。生活

系统 2019-08-29 22:41:01 2122