课程作业要求，遂学习了python的自动化selenium工具，并爬取京东商品评论数据练练手。目录：一、环境二、第三方库三、分析1.1chrome驱动1.2定位评论元素1.3循环爬取评论数据并保存为CVS文件导出其中xpath对应网页元素评论：用户名：四、代码五、结果一、环境我使用的是windows+python3.6+pycharm，大家自己去下载对应的环境。二、第三方库fromseleniumimportwebdriverfromtimeimports
系统 2019-09-27 17:55:01 2348
Python的特性允许你使用广播（broadcasting）功能，这是Python的numpy程序语言库中最灵活的地方。而我认为这是程序语言的优点，也是缺点。优点的原因在于它们创造出语言的表达性，Python语言巨大的灵活性使得你仅仅通过一行代码就能做很多事情。但是这也是缺点，由于广播巨大的灵活性，有时候你对于广播的特点以及广播的工作原理这些细节不熟悉的话，你可能会产生很细微或者看起来很奇怪的bug。例如，如果你将一个列向量添加到一个行向量中，你会以为它报
系统 2019-09-27 17:53:44 2348
目录命名规范Google开发规范函数类包PEP8类函数块命名规范Google开发规范函数Args:列出每个参数的名字,并在名字后使用一个冒号和一个空格,分隔对该参数的描述.如果描述太长超过了单行80字符,使用2或者4个空格的悬挂缩进(与文件其他部分保持一致).描述应该包括所需的类型和含义.如果一个函数接受*foo(可变长度参数列表)或者**bar(任意关键字参数),应该详细列出*foo和**bar.Returns:(或者Yields:用于生成器)描述返回值
系统 2019-09-27 17:53:18 2348
之前用bash实现过（//www.jb51.net/article/61943.htm），不过那个不能在windows下使用，所以就写了个python版，也方便我以后使用……这里就不多介绍了，不懂的google下。实现代码复制代码代码如下:#!/usr/bin/python'''File:count.pyAuthor:MikeE-Mail:Mike_Zhang@live.com'''importsys,osextens=[".c",".cpp",".hpp
系统 2019-09-27 17:51:47 2348
Python3将数据保存为txt文件的方法，具体内容如下所示：f=open("data/model_Weight.txt",'a')#若文件不存在，系统自动创建。'a'表示可连续写入到文件，保留原内容，在原#内容之后写入。可修改该模式（'w+','w','wb'等）f.write("hello,sha")#将字符串写入文件中f.write("\n")#换行if__name__=='__main__':fw=open("/exercise1/data/que
系统 2019-09-27 17:45:43 2348
本人初学python是菜鸟级，写的不好勿喷。python爬虫用了比较简单的urllib.parse和requests，把爬来的数据显示在地图上。接下里我们话不多说直接上代码:1.安装python环境和编辑器（自行度娘）2.本人以58品牌公寓为例，爬取在杭州地区价格在2000-4000的公寓。#-*-coding:utf-8-*-frombs4importBeautifulSoupfromurllib.parseimporturljoinimportrequ
系统 2019-09-27 17:56:42 2347
Python中查看变量的类型，内存地址，所占字节的大小查看变量的类型#利用内置type()函数>>>nfc=["Packers","49"]>>>afc=["Ravens","48"]>>>combine=zip(nfc,afc)>>>type(combine)查看变量的内存地址#利用内置函数id(),是以十进制显示>>>id(nfc)2646554913160>>>id(afc)2646554913544查看变量所占字节的大小>>>importsys>>
系统 2019-09-27 17:55:23 2347
全文共1521字，预计学习时长3分钟图片来源：https://unsplash.com/@yancymin很多数据分析爱好者都会使用PowerBI构建Dashboard、可视化数据。然而，在对复杂的Dashboard进行建立和改进时，总会通过不同的字段和相应表格，不断添加或删除Widget。经过多次更改后，数据结构会看起来很杂乱——原先帮助构建Dashboard的那些表格和列表变得混乱不堪。一番数据处理后，最终的Dashboard可以包含所有当前使用字段。
系统 2019-09-27 17:48:30 2347
Python括号字符串匹配LeetCodeNo.20思路：主要思路也很简单，这属于栈这种数据结构的简单题。首先我们应该把括号的左半边压入栈中，当遇到右括号的时候，通过栈的pop操作，推出栈顶元素，与之配对，匹配了，就代表当前的操作是没有问题的，不匹配那就错了呗。当然还有一种情况，当所有右括号都被匹配的时候，栈里面还有元素，那就代表，错了呗，如果完全匹配，stack中的元素应该是空的。classSolution(object):defisValid(self
系统 2019-09-27 17:47:06 2347
1.计算给出两个时间之间的时间差importdatetimeasdt#currenttimecur_time=dt.datetime.today()#onedaypre_time=dt.date(2016,5,20)#eg:2016.5.20delta=cur_time-pre_time#ifyouwanttogetdiscrepancyindaysprintdelta.days#ifyouwanttogetdiscrepancyinhoursprintd
系统 2019-09-27 17:38:14 2347
简介提到爬虫，大部分人都会想到使用Scrapy工具，但是仅仅停留在会使用的阶段。为了增加对爬虫机制的理解，我们可以手动实现多线程的爬虫过程，同时，引入IP代理池进行基本的反爬操作。本次使用天天基金网进行爬虫，该网站具有反爬机制，同时数量足够大，多线程效果较为明显。技术路线IP代理池多线程爬虫与反爬编写思路首先，开始分析天天基金网的一些数据。经过抓包分析，可知：./fundcode_search.js包含所有基金的数据，同时，该地址具有反爬机制，多次访问将会
系统 2019-09-27 17:57:51 2346
文章目录前言Graphviz库开始Digraph（一）Dot代码Digraph（二）Dot代码Digraph（三）Dot代码SourceDot代码结语前言之前我的博客介绍了Graphviz画图教程，虽然dot语法类似C语言容易编写和理解，但是这仅限于小图，当你想要画一个大图的时候，每一个结点都得一个个去定义名字、属性、连接线，这无疑是十分麻烦的，这种时候就想到了Python，能否利用Python语言编写一个画图脚本呢？Graphviz库幸运的是，Pytho
系统 2019-09-27 17:56:02 2346
参考：https://blog.csdn.net/jasonliujintao/article/details/77531519#coding:utf-8fromtimeimportsleepfromthreadingimportThreaddefasync(f):defwrapper(*args,**kwargs):thr=Thread(target=f,args=args,kwargs=kwargs)thr.start()returnwrappercl
系统 2019-09-27 17:55:56 2346
0X00前言快开学了，看到空间里面各种求填写调查问卷的，我才想起来貌似我也还没做。对于这种无意义的问卷，我是不怎么感冒的，所以我打算使用”特技”来完成，也就是python，顺便重新复习一下python，真的好久没用了。下面，表演开始……0X01代码编写思路首先先创建一份问卷我们随便填写一个问卷并提交，在提交之前开启Burpsuite截获数据包对于截获的数据包进行分析，有的被url编码了不利于分析，可以使用Burpsuite编码模块解码替换，这样就好分析了通
系统 2019-09-27 17:53:47 2346
1.简介在编写代码时，往往涉及时间、日期、时间戳的相互转换。2.引入模块#引入模块importtime,datetime2.1str类型的日期转换为时间戳利用strptime()函数将时间转换成时间数组利用mktime()函数将时间数组转换成时间戳#字符类型的时间tss1='2013-10-1023:40:00'#转为时间数组timeArray=time.strptime(tss1,"%Y-%m-%d%H:%M:%S")printtimeArray#tim
系统 2019-09-27 17:50:41 2346
