目录一，什么是爬虫二，初识爬虫-采集汽车资讯信息三，requests和BeautifulSoup模块基本使用requests:importrequestsBeautifulSoup：frombs4importBeautifulSoup四，初识爬虫-自动登录购酒网http://order.gjw.com/login/login五，requests模块详细介绍六，一大波"自动登陆"示例一，什么是爬虫很久很久以前，还没有"百度"，"谷歌"，有的还是传说中的"大黄
系统 2019-09-27 17:56:42 2135
Python超基础操作组的表示方式：列表定义一个列表的基本方式type([1,2,3,4,5,6])可以是字符串、布尔类型、数字都是可以在列表中出现的列表中也可以嵌套列表[[1,2],[3,4],[True,False]]（二维数组）嵌套列表列表的函数和方法：函数意义len（）列表元素的个数len（）列表元素的个数cmp（）比较两个列表的元素max（）列表元素的最大值min（）列表元素中的最小值list（）将元组转化为列表append（）在列表末尾添加新的
系统 2019-09-27 17:56:21 2135
os模块中关于文件/目录常用的函数使用方法函数名使用方法getcwd()返回当前工作目录chdir(path)改变工作目录listdir(path=’.’)列举指定目录中的文件名（’.‘表示当前目录，’…'表示上一级目录）mkdir(path)创建单层目录，如该目录已存在抛出异常makedirs(path)递归创建多层目录，如该目录已存在抛出异常，注意：'E:\a\b’和’E:\a\c’并不会冲突remove(path)删除文件rmdir(path)删除单
系统 2019-09-27 17:56:19 2135
fromutils.httputilimportHttpfromutils.dbQryimportMyDbUtilhttp=Http()mydb=MyDbUtil()defquery_interface():list=mydb.select_some("systems","switch",1)nodes=mydb.select_some("node","switch",1)tasks=mydb.select_some("task","switch",1)a
系统 2019-09-27 17:54:44 2135
从最简单的Web浏览器的登录界面开始，登录界面如下：进行Web页面自动化测试，对页面上的元素进行定位和操作是核心。而操作又是以定位为前提的，因此，对页面元素的定位是进行自动化测试的基础。页面上的元素就像人一样，有各种属性，比如元素名字，元素id，元素属性（class属性，name属性）等等。webdriver就是利用元素的这些属性来进行定位的。可以用于定位的常用的元素属性：idnameclassnametagnamelinktextpartiallinkt
系统 2019-09-27 17:54:16 2135
项目上线部署的时候需要服务端的同学帮忙打Docker，但是自己也需要提前写好requirements.txt。这里记录一下两种生成requirements.txt的方法。方法一：在项目根目录下，在命令行中输入：pipfreeze>requirements.txt这种方法会将当前环境下的所有的信息都存入requirements.txt中。方法二：首先安装pipreqs库。进入需要生成文件的目录执行：pipreqs./如果出现报错：UnicodeDecodeE
系统 2019-09-27 17:54:12 2135
这是书籍《PandasCookbook》书籍第04章的代码复现，所有代码运行在JupyterNotebook上，原讲解地址是：https://www.jianshu.com/p/bd0bc1b5b4b6我上传代码的github地址是：https://github.com/Asunqingwen/PandasCookbook.gitgithub上有该书中用到的data，里面代码会不定期更新（因为工作原因，时间不定），直到本书学习完成！相比原讲解，会穿插一些自
系统 2019-09-27 17:52:46 2135
最近编写的自动化脚本，数据部分使用到了从配置文件中取，即自定义config.ini，但是在读取配置文件的时候却报错了'gbk'codeccan'tdecodebyte0xb0inposition30。错误信息的意思是gbk'编解码无法解码字节0xb0。开始我以为是配置文件中出现了中文字符，可检查后发现并没有。在网上查了相关资料后，无果。于是请教了其他同事，经过十几分钟的检查和验证，原来我在创建congfi.ini文件时，默认保存的编码类型是UTF-8。于是
系统 2019-09-27 17:52:28 2135
来源|Medium作者|arjunaskykok整理/Aholiab出品|区块链大本营（blockchain_camp）根据IEEE此前的一项调查，Python已成为最受开发者欢迎的语言之一。由于其对于技术小白天然友好的特性，以及不断更新的新功能。Python越来越受到国内外开发者的喜爱。越来越多被用于独立、大型项目的开发开始使用Python。20世纪90年代初荷兰人GuidovanRossum为了打发圣诞节的无趣，决心开发一个新的脚本解释程序，作为ABC
系统 2019-09-27 17:51:48 2135
有时候，预先不知道函数需要接受多少个实参，好在Python允许函数从调用语句中调用语句中收集任意数量的实参。在参数前加上*号。来看一个制作披萨的函数，它需要接受很多配料，但你无法预先确定顾客要多少种配料。下面的函数只有一个形参*toppings，但不管调用语句提供了多少实参，这个形参都将他们统统收入囊中：defmake_pizza(*toppings):"""打印顾客点的所有配料"""print(toppings)make_pizza('pepperoni
系统 2019-09-27 17:51:16 2135
