近几日遇到采集某网页的时候大部分网页OK,少部分网页出现乱码的问题,调试了几日,终于发现了是含有一些非法字符造成的..特此记录1.在正常情况下..可以用importchardetthischarset=chardet.detect(strs)["encoding"]来获取该文件或页面的编码方式或直接抓取页面的charset=xxxx来获取2.遇到内容中有特殊字符时指定的编码一样会造成乱码..即内容中非法字符造成的,可以采用编码忽略非法字符的方式来处理.st
系统 2019-09-27 17:38:01 2290
在网上看到一篇关于隐马尔科夫模型的介绍,觉得简直不能再神奇,又在网上找到大神的一篇关于如何用隐马尔可夫模型实现中文拼音输入的博客,无奈大神没给可以运行的代码,只能纯手动网上找到了结巴分词的词库,根据此训练得出隐马尔科夫模型,用维特比算法实现了一个简单的拼音输入法。githuh地址:https://github.com/LiuRoy/Pinyin_Demo原理简介隐马尔科夫模型抄一段网上的定义:隐马尔可夫模型(HiddenMarkovModel)是一种统计模
系统 2019-09-27 17:37:43 2290
实例如下:#!/usr/bin/python#-*-coding:utf-8-*-importosdefdel_dir_tree(path):'''递归删除目录及其子目录,子文件'''ifos.path.isfile(path):try:os.remove(path)exceptException,e:#passprinteelifos.path.isdir(path):foriteminos.listdir(path):itempath=os.path.
系统 2019-09-27 17:57:02 2289
工具:Jupyternotebook+Anaconda游戏规则:时时彩一种玩法是买尾号。2元一个数字,中奖是20元。每个数字出现的概率相等。目前想到两种买法:随机购买,人是感性动物,很容易受周围环境干扰。完全随机购买在生活中是不存在的。分析数字在前面N期出现的概率,选择概率最小的n个数字购买。导入包importnumpyasnp定义玩法一:完全随机购买defplay_lottery(my_money,play_num,money):'''随机选择数的中奖率
系统 2019-09-27 17:56:04 2289
fromutils.httputilimportHttpfromutils.dbQryimportMyDbUtilhttp=Http()mydb=MyDbUtil()defquery_interface():list=mydb.select_some("systems","switch",1)nodes=mydb.select_some("node","switch",1)tasks=mydb.select_some("task","switch",1)a
系统 2019-09-27 17:54:44 2289
元类在python中一切皆对象,类也是对象,只不过类是一个创建对象的对象,我们可以在类中动态的创建一个类,比如deffunc(name):ifname=="Plane":classPlane(object):passreturnPlaneelse:classMetrorolite(object):passreturnMrtroolite虽然根据上述代码可以动态创建一个类,但是整个类的代码仍需要我们编写的type()有两种作用:1、检查对象类型classPe
系统 2019-09-27 17:53:29 2289
最近编写的自动化脚本,数据部分使用到了从配置文件中取,即自定义config.ini,但是在读取配置文件的时候却报错了'gbk'codeccan'tdecodebyte0xb0inposition30。错误信息的意思是gbk'编解码无法解码字节0xb0。开始我以为是配置文件中出现了中文字符,可检查后发现并没有。在网上查了相关资料后,无果。于是请教了其他同事,经过十几分钟的检查和验证,原来我在创建congfi.ini文件时,默认保存的编码类型是UTF-8。于是
系统 2019-09-27 17:52:28 2289
人工智能时代的到来,很多文章说这么一句:“不会python,就不要说自己是程序员”,这说的有点夸张了,但确实觉得目前python这个语言值得学习,而且会python是高薪程序员的必备技能。很多初学Python的同学都面临着很多的疑问,Python学习步骤应该如何安排?多长时间可以达到精通呢?Python学习步骤应该怎样安排:首先,学习Python编程技术,自学或者参加培训学习都适用,每个人都有自己的学习方式和方法。一、明确自己的学习目标不管我们学习什么样的
系统 2019-09-27 17:51:57 2289
引言前段时间,微信朋友圈开始出现了一种晒照片新形式,微信好友墙,即在一张大图片中展示出自己的所有微信好友的头像。效果如下图,出于隐私考虑,这里作了模糊处理。是不是很炫,而且这还是独一无二的,毕竟每个人的微信好友是不一样的。本文就教大家用Python来实现这种效果。环境操作系统:WindowsPython版本:3.7.3代码实现我们需要首先需要获取好友的头像信息,接下来处理图像并完成图像的拼接。准备工作在这里,我们登录微信获取好友信息,使用的是wxpy模块;
系统 2019-09-27 17:50:08 2289
Python编程语言允许在一个循环内嵌套另一个循环。下面将介绍几个例子来说明这一概念。语法在Python中嵌套循环语句的语法如下:foriterating_varinsequence:foriterating_varinsequence:statements(s)statements(s)Python编程语言允许在一个循环内嵌套另一个循环。下面将介绍几个例子来说明这一概念。语法在Python中嵌套循环语句的语法如下:foriterating_varinse
系统 2019-09-27 17:47:49 2289
最近在学习机器学习的过程中,常常需要将本地写的代码传到GPU服务器中,然后在服务器上运行。之前的做法一直是先在本地写好代码,然后通过FileZilla这样的文件传输工具来将写好的文件传到服务器,再通过ssh工具远程连接到服务器,执行相应的python脚本。这样的方式十分繁琐,效率很低。今天听到朋友提到了配置远程解释器使用场景先说说自己的使用场景,我是在什么情况下,需要将IDE配置成这样的环境来方便我的工作。首先,我需要在本地机子上写python代码,但是因
系统 2019-09-27 17:46:10 2289
【import模块】和C中的#include不同,Python中的import语句并不是简单的把一个文件插入另外一个文件。导入其实是运行时的运算,程序第一次导入指定文件时,会执行以下步骤,1.找到模块文件2.编译成位码3.执行模块中的代码来创建所定义的模块并生成.pyc字节码文件,这三个步骤只在程序执行时,模块第一次导入时会进行。之后导入相同的模块时,会跳过这三个步骤,而只提取内存中已加载的模块对象,速度要快的多。NOTE:1.Python把已加载的模块放
系统 2019-09-27 17:45:52 2289
目录1.按2.核心代码3.测试结果4.完整代码1.按本文主要演示了python3tkinter.scrolledtext.ScrolledText的对象在插入数据后如何将焦点设置在末尾,当然开发者用户如有需要也可以将焦点设置在其他地方。另外演示系统还展示了如何清空该对象的所有数据。2.核心代码注意:此处的END在tkinter包中,直接使用需要先导入。3.测试结果插入数据后始终保持焦点在数据的最后一行。4.完整代码fromtkinterimportTkfr
系统 2019-09-27 17:45:38 2289
1.将类似如下程序中的切片变得更可读###位置##0123456789012345678901234567890123456789012345678901234567890'record='....................100.......513.25..........'cost=int(record[20:32])*float(record[40:48])利用slice()函数创建slice对象,该对象可用于任何切片可应用的地方如:>>>it
系统 2019-09-27 17:45:24 2289
今天遇到一个问题,在同事随意的提示下,用了itertools.groupby这个函数。不过这个东西最终还是没用上。问题就是对一个list中的新闻id进行去重,去重之后要保证顺序不变。直观方法最简单的思路就是:ids=[1,2,3,3,4,2,3,4,5,6,1]news_ids=[]foridinids:ifidnotinnews_ids:news_ids.append(id)printnews_ids这样也可行,但是看起来不够爽。用set另外一个解决方案
系统 2019-09-27 17:38:46 2289