搜索到与相关的文章
Python

python使用writerows写csv文件产生多余空行的处理方法

初次接触python,学艺不精,第一次实战写一个文本处理的小程序时便遇到了头疼的问题。先看代码:生成的.CSV文件每两行之间都会多出一行空格(如下图),具体原因可参看点击打开链接withopen('E:\\test.csv','wt')asfout:cout=csv.DictWriter(fout,list_attrs_head)#list_attrs_head头属性列表cout.writeheader()cout.writerows(list_words

系统 2019-09-27 17:52:34 2343

Python

python3 selenium + fiddler 爬取动态js页面数据

一、分析:抓取动态页面js加载的人民日报里面的新闻详情https://wap.peopleapp.com/news/1先打开,然后查看网页源码,发现是一堆js,并没有具体的每个新闻的url详情,于是第一反应,肯定是js动态加载拼接的url。然后接着按f12查看,就看url,发现出来了好多url。然后点击具体的某一个新闻详情页面,查看url,把这个url的后面两个数字其中一个拿到访问主页的时候,f12抓包结果里面去查找,发现一个url,点击这个url,发现p

系统 2019-09-27 17:52:31 2343

Python

python函数的高级用法

一、引用传递引用传递,实质是在传递内存地址二、函数默认值1、默认值参数在python中可以为函数的参数给予默认值,一旦某个存在默认值,那么如果在调用的时候,不传递这个参数,则按照默认值注意:在定义函数时,如果存在有默认值的参数,一定要写在没有默认值的参数后面,否则在调用时,无法确定参数到底传给哪个参数,程序就会报错。三、全局变量和局部变量1、全局变量就是定义在py文件中,能被任何函数、类能够正常访问的变量。2、局部变量定义在函数内部的变量,叫做局部变量注意

系统 2019-09-27 17:50:00 2343

Python

用Python的SimPy库简化复杂的编程模型的介绍

在我遇到SimPy包的其中一位创始人KlausMiller时,从他那里知道了这个包。Miller博士阅读过几篇提出使用Python2.2+生成器实现半协同例程和“轻便”线程的技术的可爱的Python专栏文章。特别是(使我很高兴的是),他发现在用Python实现Simula-67样式模拟时,这些技术很有用。结果表明TonyVignaux和ChangChui以前曾创建了另一个Python库,它在概念上更接近于Simscript,而且该库使用了标准线程技术,而不

系统 2019-09-27 17:49:52 2343

Python

python 应用之Pycharm 新建模板默认添加编码格式-作者-时间等信息

在pycharm使用过程中,对于每次新建文件的编码格式和关于代码编写者的一些个人信息快捷填写,方法如下:1.打开pycharm,选择File-Settings(Ctrl+Alt+S),再选择Editor--Color&Style--FileandTemplates--Python-Script可以使用搜索快速找到"FileandCodeTemplates",右侧菜单选择"PythonScript",对模板进行编辑2.编辑内容预定义的变量要扩展为格式为${}

系统 2019-09-27 17:49:42 2343

Python

【Python3爬虫】快就完事了--使用Celery加速你的爬虫

一、写在前面在上一篇博客中提到过对于网络爬虫这种包含大量网络请求的任务,是可以用Celery来做到加速爬取的,那么,这一篇博客就要具体说一下怎么用Celery来对我们的爬虫进行一个加速!二、知识补充1.classcelery.groupgroup这个类表示创建一组要并行执行的任务,不过一组任务是懒惰的,所以你需要运行并对其进行评估。要了解这个类,可以查看文档,或者在Pycharm中直接Ctrl+左键就能直接查看源码了,如下图:当然了,直接看源码还不够,最好

系统 2019-09-27 17:48:01 2343

Python

python selenium 采坑

pythonselenium采坑系统环境:python2macos10.14.5正文:之前装了一个firefox就可以完美使用selenium了,但是在firefox上进行网页检查时不是很习惯。所以还是想使用chrome,但是由于selenium原生不支chrome,所以需要下载chromedriver并在生成selenium对象前把chromedriver和chrome放到应用程序路径下,或者再初始化webdriver.Chrome对象时设置chrome

系统 2019-09-27 17:46:26 2343

Python

python 字符串常用函数有哪些?

声明变量str="HelloWorld"find()检测字符串是否包含,返回该字符串位置,如果不包含返回-1str.find("Hello")#返回值:0str.find("W")#返回值:6,这里需要注意下:空格也是一个字符。W前面有个空格,所以W位置是6str.find("R")#返回值:-1,并不包含在HelloWorld中,如果不包含返回-1index()检测字符串是否包含指定的字符,并返回开始的索引值,如果不包含会报错str.index("Hel

系统 2019-09-27 17:45:27 2343

Python

python3常见操作

阅读更多布尔操作,是或者否:OperationResultNotesxoryifxisfalse,theny,elsex(1)xandyifxisfalse,thenx,elsey(2)notxifxisfalse,thenTrue,elseFalse(3)比较操作,大还是小,是否相同对象,是否相同值:OperationMeaningstrictlygreaterthan>=greate

系统 2019-09-27 17:45:26 2343

编程技术

再谈百度

一年前,写了一篇博客”中国IT如何相信自己——从“百度”说起“,今天得到了进一步的证实,说明自己没有看错。一年来,百度在业绩、产品创新、资本市场、对世界的影响等

系统 2019-08-29 23:51:48 2343