因为需要对数据处理，将excel数据导入到数据库，记录一下过程。使用到的库：xlrd和pymysql（如果需要写到excel可以使用xlwt）直接丢代码，使用python3，注释比较清楚。importxlrdimportpymysql#importimportlib#importlib.reload(sys)#出现呢reload错误使用defopen_excel():try:book=xlrd.open_workbook("XX.xlsx")#文件名，把文
系统 2019-09-27 17:47:02 1984
分析分析网站寻找需要的网址用谷歌浏览器摁F12打开开发者工具，然后打开斗鱼颜值分类的页面，如图：在里面的请求中，最后发现它是以ajax加载的数据，数据格式为json，如图：圈住的部分是我们需要的数据，然后复制它的网址为https://www.douyu.com/gapi/rknc/directory/yzRec/1，出于学习目的只爬取第一页（减少服务器压力）。然后把网址放到浏览器中测试是否可以访问。如图：结果正常。分析json数据，提取图片链接最后分析发现
系统 2019-09-27 17:46:57 1984
仔细研读后学习了三个函数：eval:计算字符串中的表达式exec:执行字符串中的语句execfile:用来执行一个文件需注意的是，exec是一个语句，而eval()和execfile()则是内建built-in函数。Python2.7.2(default,Jun122011,15:08:59)[MSCv.150032bit(Intel)]onwin32Type"help","copyright","credits"or"license"formoreinf
系统 2019-09-27 17:46:53 1984
学习Python的第一天,也是我第一次写博客的一天,不怎么会写博客,也不怎么会Python,也不怎么会写总结.在学Python的第一天发现自己脑子不是很好用,在学习过程中出现很多错误,错误锦集如下,哈哈哈哈,要加油.以后要注意不要再犯下面的错误了,不然以后在工作中很难独立完成,也容易出现很多错误,这样就不好了啊!!!下面是我的知识总结和错误总结,如果有IT大佬看见了,希望能指出我的不足之处,让我好改进改进,可以进步.======我======是======
系统 2019-09-27 17:46:07 1984
注释文本箭头结果展示：完整代码示例：importnumpyasnpimportmatplotlib.pyplotaspltfig,ax=plt.subplots(figsize=(5,5))ax.set_aspect(1)x1=-1+np.random.randn(100)y1=-1+np.random.randn(100)x2=1.+np.random.randn(100)y2=1.+np.random.randn(100)ax.scatter(x1,y
系统 2019-09-27 17:38:44 1984
在日前召开的光大金融论坛上，光大证券向与会的数百名机构投资者阐述了如下观点：中国制造业利润的持续增长和新盈利模式的出现将为我国股市长期走牛奠定基础。投资操作上，行业方面，光大建议关注钢铁、化工、建材、机械制造、金融、地产等几大重点行业；个股方面，将工商银行、万科A、金地集团、黄山旅游、南方航空、三一重工、东方电机、中国铝业、宜科科技、双汇发展等列为下半年值得重点关注的"十大金股"。关于2007年下半年的投资策略，光大证券提出了"中国制造"演绎长期牛市的投资
系统 2019-08-29 23:45:12 1984
有幸接确到了架构这个词的玩意，这几天有时间就网上游离一下相关资料，看到不错就收藏一下，作为以后学习的方向：之前我简单向大家介绍了各个知名大型网站的架构，MySpace的五个里程碑、Flickr的架构、YouTube的架构、PlentyOfFish的架构、WikiPedia的架构。这几个都很典型，我们可以从中获取很多有关网站架构方面的知识，看了之后你会发现你原来的想法很可能是狭隘的。今天我们来谈谈一个网站一般是如何一步步来构建起系统架构的，虽然我们希望网站一
系统 2019-08-29 23:22:28 1984
今天是第一次来JavaEye，浏览了一下网站感觉不错，就注册了帐号建个新家。因为是第一次在这写blog，所以先整一些废话填充一下门面。其实真正的原因是本人才疏学浅写不出什么有深度的文章，况且是个java初学者--半年多的学习经历。以前就听说过JavaEye，真的是很有名很出色的java交流平台。今天真是高兴能来到这个java的大家庭，看见有和自己一样的菜鸟还有大票的。感觉真是热闹啊~人是群居动物就是喜欢凑热闹，呵呵！看见这么多志同道合的兄弟姐妹真的很亲切。
系统 2019-08-29 22:42:53 1984
我心目中在Android手机上应该有这样一个应用，它的名字叫《健康饮食专家》：1、能够将饮食的专家系统集成到其中；2、能够为你安排好每天的营养搭配，并且选出该食用哪些水果、菜等；3、能够整合谷歌地图和GIS的功能，为你提供到哪些地方买这些东西比较便利、便宜；【首届Google暑期大学生博客分享大赛——2010Andriod篇】健康饮食专家
系统 2019-08-29 22:16:33 1984
首先要分析一下电影天堂网站的首页结构。在这里插入图片描述从上面的菜单栏中我们可以看到整个网站资源的总体分类情况。刚刚好我们可以利用到它的这个分类，将每一个分类地址作为爬虫的起点。①解析首页地址提取分类信息#解析首页defCrawIndexPage(starturl):print"正在爬取首页"page=__getpage(starturl)ifpage=="error":returnpage=page.decode('gbk','ignore')tree=
系统 2019-09-27 17:56:58 1983
