搜索到与相关的文章
Python

python3 selenium + fiddler 爬取动态js页面数据

一、分析:抓取动态页面js加载的人民日报里面的新闻详情https://wap.peopleapp.com/news/1先打开,然后查看网页源码,发现是一堆js,并没有具体的每个新闻的url详情,于是第一反应,肯定是js动态加载拼接的url。然后接着按f12查看,就看url,发现出来了好多url。然后点击具体的某一个新闻详情页面,查看url,把这个url的后面两个数字其中一个拿到访问主页的时候,f12抓包结果里面去查找,发现一个url,点击这个url,发现p

系统 2019-09-27 17:52:31 2292

Python

Python3.6内置函数(10)——chr()

英文文档chr(i)ReturnthestringrepresentingacharacterwhoseUnicodecodepointistheintegeri.Forexample,chr(97)returnsthestring‘a’,whilechr(8364)returnsthestring‘€’.Thisistheinverseoford().Thevalidrangefortheargumentisfrom0through1,114,111(0

系统 2019-09-27 17:52:30 2292

Python

python写日志文件操作类与应用示例

本文实例讲述了python写日志文件操作类与应用。分享给大家供大家参考,具体如下:项目的开发过程中,日志文件是少不了的,通过写日志文件,可以知道程序运行的情况。特别当部署在生产环境中的时候,这个时候一般不能debug,当然在有些情况时可以remotedebug(远程debug)。那种情况另当别论。还是用通常的写日志的方法,比如在java中,经常可以看到log4j,sf4j,logback等三方组件来写日志。在python中如何实现呢,其实python本身也

系统 2019-09-27 17:52:05 2292

Python

python编码问题

1、SyntaxError:Non-UTF-8codestartingwith'\xc7'infiletest_GRU.pyonline解决办法:#在文件前面加#coding=gbk2、如果包ascii报错(1)设置环境变量LANG在linux或Mac上设置环境变量的方式一样,编辑~/.bash_profile文件(’~’指的是用户登录后的默认目录),添加一行:exportLANG="en_US.UTF-8"添加完记得source.bash_profile

系统 2019-09-27 17:51:13 2292

Python

用Python的SimPy库简化复杂的编程模型的介绍

在我遇到SimPy包的其中一位创始人KlausMiller时,从他那里知道了这个包。Miller博士阅读过几篇提出使用Python2.2+生成器实现半协同例程和“轻便”线程的技术的可爱的Python专栏文章。特别是(使我很高兴的是),他发现在用Python实现Simula-67样式模拟时,这些技术很有用。结果表明TonyVignaux和ChangChui以前曾创建了另一个Python库,它在概念上更接近于Simscript,而且该库使用了标准线程技术,而不

系统 2019-09-27 17:49:52 2292

Python

【Linux】Ubuntu18.04配置python3.6开发环境

1切换Ubuntu默认python版本Ubuntu18.04默认python为2.7版本,命令行输入python显示的即为默认。内置的python3.6版本需要输入python3进行调用。亲测可行1.1方法一:修改优先级sudoupdate-alternatives:--install<需要链接地址><链接名称><路径><优先级>需要链接地址:/usr/bin/python链接名称:python路径:/usr/bin/python2.7或/usr/bin/

系统 2019-09-27 17:45:55 2292

Python

python 字符串常用函数有哪些?

声明变量str="HelloWorld"find()检测字符串是否包含,返回该字符串位置,如果不包含返回-1str.find("Hello")#返回值:0str.find("W")#返回值:6,这里需要注意下:空格也是一个字符。W前面有个空格,所以W位置是6str.find("R")#返回值:-1,并不包含在HelloWorld中,如果不包含返回-1index()检测字符串是否包含指定的字符,并返回开始的索引值,如果不包含会报错str.index("Hel

系统 2019-09-27 17:45:27 2292

Python

python读写csv文件的方法

1.爬取豆瓣top250书籍importrequestsimportjsonimportcsvfrombs4importBeautifulSoupbooks=[]defbook_name(url):res=requests.get(url)html=res.textsoup=BeautifulSoup(html,'html.parser')items=soup.find(class_="grid-16-8clearfix").find(class_="in

系统 2019-09-27 17:45:26 2292

Python

Python在Console下显示文本进度条的方法

进度条实现原理进度条和一般的print区别在哪里呢?答案就是print会输出一个\n,也就是换行符,这样光标移动到了下一行行首,接着输出,之前已经通过stdout输出的东西依旧保留,而且保证我们在下面看到最新的输出结果。进度条不然,我们必须再原地输出才能保证他是一个进度条,否则换行了怎么还叫进度条?实现进度条最简单的办法就是,在输出完毕后,把光标移动到行首,继续在那里输出更长的进度条即可实现,新的更长的进度条把旧的短覆盖,就形成了动画效果。在用Python

系统 2019-09-27 17:38:31 2292

编程技术

再谈百度

一年前,写了一篇博客”中国IT如何相信自己——从“百度”说起“,今天得到了进一步的证实,说明自己没有看错。一年来,百度在业绩、产品创新、资本市场、对世界的影响等

系统 2019-08-29 23:51:48 2292