首先这次学习的是利用写Python脚本对网页信息的获取，并且把他保存到我们的数据库里最后形成一个Excel表格下载第三方模块和源码安装MongoDB刚开始我们需要做一些准备：先安装第三方模块https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-3.2.5.tgz思路如下：1.访问网站，拿到html网页headers获取：脚本1：运行前打开mongod:./mongod&2.提取html里面
系统 2019-09-27 17:50:43 2231
添加键值对首先定义一个空字典>>>dic={}直接对字典中不存在的key进行赋值来添加>>>dic['name']='zhangsan'>>>dic{'name':'zhangsan'}如果key或value都是变量也可以用这种方法>>>key='age'>>>value=30>>>dic[key]=value>>>dic{'age':30,'name':'zhangsan'}这里可以看到字典中的数据并不是按先后顺序排列的，如果有兴趣，可以搜一搜数据结构中
系统 2019-09-27 17:38:13 2231
前言前面的文章提到过，python使用多线程，会因为GIL的原因导致多线程的使用效率低下，甚至比单个线程的处理速度还慢。然而在python编程中，为了解决多线程之间上下文切换的开销，以及增加线程控制的灵活性，python引入了协程。本文我们就来说一说python协程的特点和使用方法。一、协程定义定义：协程(Coroutine)，又称微线程。协程的作用，是在执行函数A时，可以随时中断，去执行函数B，然后中断继续执行函数A（可以自由切换）。但这一过程并不是函数
系统 2019-09-27 17:56:05 2230
转载请注明作者（独孤尚良dugushangliang）出处：https://blog.csdn.net/dugushangliang/article/details/83055390提前声明：安装有两种方式，一种是独立于python环境的安装，一种是依附于python环境的安装。请各位需要参考的，先浏览下再决定使用哪种安装。ogr附带在gdal，所以我们只要安装了gdal就可以用ogr了。资料找了好久。https://blog.csdn.net/u0141
系统 2019-09-27 17:52:59 2230
参考链接：Bilibili相簿下载(BilibiliAlbumDownload)下载Bilibili相簿目录1.接口展示2.代码转载3.代码详细注释4.总结一、接口展示↶api1:https://api.vc.bilibili.com/link_draw/v1/doc/upload_count?uid=+uid号api2:https://api.vc.bilibili.com/link_draw/v1/doc/doc_list?page_size=30&b
系统 2019-09-27 17:48:12 2230
小编想把用python将列表[1,1,1,1,1,1,1,1,1,1]和列表[2,2,2,2,2,2,2,2,2,2]对应相加成[3,3,3,3,3,3,3,3,3,3]。代码如下：importnumpya=numpy.array([1,1,1,1,1,1,1,1,1,1])b=numpy.array([2,2,2,2,2,2,2,2,2,2])c=a+bprint(type(c))print(list(c))输出结果为：[3,3,3,3,3,3,3,3,
系统 2019-09-27 17:47:35 2230
Image模块Image模块是在PythonPIL图像处理中常见的模块，对图像进行基础操作的功能基本都包含于此模块内。如open、save、conver、show…等功能。open类Image.open(file)⇒imageImage.open(file,mode)⇒image要从文件加载图像，使用open()函数，在Image模块：fromPILimportImage#调用库im=Image.open("a.jpg")#文件存在的路径im.show()
系统 2019-09-27 17:45:31 2230
导言篇我的python环境是：python3.6.5这里我选择的GUI编程包是：tkintertkinker在python2.5以后就是自带包了，所以我们不需要另外安装tkinker相对与其他pythonGUI编程的包而已，是相对容易入手的代码篇这是系统的登录界面importtkinterfromtkinterimportmessageboxclassLogin(object):def__init__(self):#创建主窗口,用于容纳其它组件self.r
系统 2019-09-27 17:56:29 2229
当我们试图从新浪微博抓取数据时，我们会发现网页上提示未登录，无法查看其他用户的信息。模拟登录是定向爬虫制作中一个必须克服的问题，只有这样才能爬取到更多的内容。实现微博登录的方法有很多，一般我们在模拟登录时首选WAP版。因为PC版网页源码中包括很多的js代码，提交的内容也更多，不适合机器模拟登录。我们实现微博登录的大体思路是这样的：用抓包工具把正常登录时要提交的字段都记录下来;模拟提交这些字段;判断是否登录成功;原理很简单，让我们一步一步来实现吧。一.抓包利
系统 2019-09-27 17:53:11 2229
本文所述为Python3的基本运算符，是学习Python必须掌握的，共享给大家参考一下。具体如下：首先Python中的运算符大部分与C语言的类似，但也有很多不同的地方。这里就大概地罗列一下Python3中的运算符。一、算术运算符注意：双斜杠//除法总是向下取整。从符点数到整数的转换可能会舍入也可能截断，建议使用math.floor()和math.ceil()明确定义的转换。Python定义pow(0,0)和0**0等于1。二、比较运算符运算符描述<小于<=
系统 2019-09-27 17:46:50 2229
Python学习教程：手把手教你搭建自己的量化分析数据库引言：数据是金融量化分析的重要基础，包括股票历史交易数据、上市公司基本面数据、宏观和行业数据等。随着信息流量的日益膨胀，学会获取、查询和加工数据信息变得越来越重要。对于鼓捣量化交易的人来说，怎么能说不会玩数据库呢？目前常用的开源（免费）数据库有MySQL、Postgresql、Mongodb和SQLite（Python自带），在2018-2019年DB-Engines排行榜上位居前十（见下图），可见其
系统 2019-09-27 17:57:50 2228
最近，我做毕业设计用到opencv中的Tracker，其中有些东西，写下来免得忘记。我使用的是python版的opencv，网上有些博客说opencv中的一些跟踪器和python兼容的不是很好，这一点确实很有道理。先从头开始说吧。先是安装opencv，就两条指令pipinstallopencv-python,pipinstallopencv-contrib-python。如果你觉得下载速度太慢，可以到网上搜索清华镜像，这样可以加快下载速度。这里提供几个镜像
系统 2019-09-27 17:54:48 2228
在Python中字符串连接有多种方式，这里简单做个总结，应该是比较全面的了，方便以后查阅。加号连接第一种，通过+号的形式：>>>a,b='hello','world'>>>a+b'helloworld'逗号连接第二种，通过,逗号的形式：>>>a,b='hello','world'>>>print(a,b)helloworld但是，使用,逗号形式要注意一点，就是只能用于print打印，赋值操作会生成元组:>>>a,b('hello','world')直接连接
系统 2019-09-27 17:50:55 2228
代码示例支持平台:Centos6.3Python:2.7.14代码示例:菜单-Python踩坑指南代码示例1.1踩坑案例长期运行的daemon进程或者socket测试类进程,经常遇到的坑是:IOError:[Errno24]Toomanyopenfiles即进程遇到IO错误,无法打开更多的文件.1.2填坑和分析一般从两个方面入手:1.2.1从程序优化入手检查文件打开是否遵循了"谁打开谁关闭"原则文件是否存在关闭泄露a.谁打开谁关闭是个普适的原则:只有逻辑设
系统 2019-09-27 17:49:40 2228
0X00前言快开学了，看到空间里面各种求填写调查问卷的，我才想起来貌似我也还没做。对于这种无意义的问卷，我是不怎么感冒的，所以我打算使用”特技”来完成，也就是python，顺便重新复习一下python，真的好久没用了。下面，表演开始……0X01代码编写思路首先先创建一份问卷我们随便填写一个问卷并提交，在提交之前开启Burpsuite截获数据包对于截获的数据包进行分析，有的被url编码了不利于分析，可以使用Burpsuite编码模块解码替换，这样就好分析了通
系统 2019-09-27 17:53:47 2227
