对Python生成汉字字库文字,以及转换为文字图片的实例详解


Posted in Python onJanuary 29, 2019

笔者小白在收集印刷体汉字的深度学习训练集的时候,一开始就遇到的了一个十分棘手的问题,就是如何获取神经网络的训练集数据。通过上网搜素,笔者没有找到可用的现成的可下载的汉字的训练集,于是笔者采用了代码自建汉字的训练集数据。

这里采用的是python编写程序,需要import 的python库请提前安装。

那么,首先如何用python输出汉字字库的文字?

笔者查到在计算机中汉字编码范围是0x4E00到0x9FA5,利用unichr()可以将十六进制的编码转成人类可读的字。

这里扩展一下在python库中什么是unichr(),以及什么是chr()和ord()。

chr( )函数用一个范围在range(256)内的(就是0~255)整数作参数,返回一个对应的字符。

unichr( )跟它一样,只不过返回的是Unicode字符,这个从Python 2.0才加入的unichr( )的参数范围依赖于你的Python是如何被编译的。

如果是配置为USC2的Unicode,那么它的允许范围就是range(65536)或0x0000-0xFFFF;如果配置为UCS4,那么这个值应该是range(1114112)或0x000000-0x110000。

如果提供的参数不在允许的范围内,则会报一个ValueError的异常。

ord( )函数是chr( )函数(对于8位的ASCII字符串)或unichr( )函数(对于Unicode对象)的配对函数,它以一个字符(长度为1的字符串)作为参数,返回对应的ASCII数值,或者Unicode数值,如果所给的Unicode字符超出了你的Python定义范围,则会引发一个TypeError的异常。

接下来就是把unicode编码的字写入文件呢,如果直接用open()的话,会提示UnicodeEncodeError: ‘ascii' codec can't encode character u'\u4e00' in position 0: ordinal not in range(128)

这里就是涉及到python读写文件时候的两种方式了,一种是open(),还一种是codecs.open( )。

对于open()这个python的内置函数来说, 打开文件的方式一般为:

f=open(file_name,access_mode = 'r',buffering = -1)。

file_name就是文件的路径加文件名字,不加路径则文件会存放在python程序的路径下,

access_mode就是操作文件的模式,主要有r,w,rb,wb等,细节网上一大堆,buffering = -1是用于指示访问文件所采用的缓存方式。0表示不缓存;1表示只缓存一行,n代表缓存n行。如果不提供或为负数,则代表使用系统默认的缓存机制。

>>> fr = open('test1.txt','wb')
>>> line1 = "我是谁"
>>> fr.write(line1)

打开以后就是写和读的操作。但是用open方法打开会有一些问题。open打开文件只能写入str类型,不管字符串是什么编码方式。所以对于写入文件的数据的编码不统一的时候,需要用到codecs.open()。

这种方法可以指定一个编码打开文件,使用这个方法打开的文件读取返回的将是unicode。

写入时,如果参数 是unicode,则使用open()时指定的编码进行编码后写入;如果是str,则先根据源代码文件声明的字符编码,解码成unicode后再进行前述 操作。

相对内置的open()来说,这个方法比较不容易在编码上出现问题。

>>> import codecs
>>> line2 = u'我是谁'
>>> fw = codecs.open('test1.txt','wb','utf-8')
>>> fw.write(line2)

这里是将汉字字库的文字写出到文本文件中,代码如下:

import codecs
start,end = (0x4E00, 0x9FA5) #汉字编码的范围
with codecs.open("chinese.txt", "wb", encoding="utf-8") as f:
 for codepoint in range(int(start),int(end)):
 f.write(unichr(codepoint)) #写出汉字

在同目录文件下,生成汉字字库的chinese.txt文件:

对Python生成汉字字库文字,以及转换为文字图片的实例详解

接下来就是把汉字字库的字一个个保存成图片,这里需要pip install pygame的库。

pygame可以将文字渲染到图片上保存。

代码如下:

#encoding: utf-8
import os
import pygame

chinese_dir = 'chinese'
if not os.path.exists(chinese_dir):
 os.mkdir(chinese_dir)

pygame.init()
start,end = (0x4E00, 0x9FA5) # 汉字编码范围
for codepoint in range(int(start), int(end)):
 word = unichr(codepoint)
 font = pygame.font.Font("msyh.ttc", 64)
 # 当前目录下要有微软雅黑的字体文件msyh.ttc,或者去c:\Windows\Fonts目录下找
 # 64是生成汉字的字体大小
 rtext = font.render(word, True, (0, 0, 0), (255, 255, 255))
 pygame.image.save(rtext, os.path.join(chinese_dir, word + ".png"))

这里是在chinese文件夹里面生成的文字图片,字体是黑体,然后再在个基础上可以继续自制汉字识别的训练集了。

对Python生成汉字字库文字,以及转换为文字图片的实例详解

以上这篇对Python生成汉字字库文字,以及转换为文字图片的实例详解就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python lxml模块安装教程
Jun 02 Python
python脚本内运行linux命令的方法
Jul 02 Python
Python实现简单的四则运算计算器
Nov 02 Python
Python用 KNN 进行验证码识别的实现方法
Feb 06 Python
Django实现表单验证
Sep 08 Python
python 实现提取某个索引中某个时间段的数据方法
Feb 01 Python
解决yum对python依赖版本问题
Jul 05 Python
pytorch中的自定义数据处理详解
Jan 06 Python
在Python中通过threshold创建mask方式
Feb 19 Python
python pandas.DataFrame.loc函数使用详解
Mar 26 Python
基于python+selenium自动健康打卡的实现代码
Jan 13 Python
Python解析m3u8拼接下载mp4视频文件的示例代码
Mar 03 Python
Python实现点阵字体读取与转换的方法
Jan 29 #Python
使用python读取.text文件特定行的数据方法
Jan 28 #Python
python 实现一次性在文件中写入多行的方法
Jan 28 #Python
用Python逐行分析文件方法
Jan 28 #Python
Python使用Shelve保存对象方法总结
Jan 28 #Python
Python理解递归的方法总结
Jan 28 #Python
代码详解django中数据库设置
Jan 28 #Python
You might like
用PHP制作静态网站的模板框架
2006/10/09 PHP
详细分析PHP 命名空间(namespace)
2020/06/30 PHP
javascript之锁定表格栏位
2007/06/29 Javascript
基于JQuery实现的图片自动进行缩放和裁剪处理
2014/01/31 Javascript
jQuery学习笔记之创建DOM元素
2015/01/19 Javascript
JS实现网页滚动条感应鼠标变色的方法
2015/02/26 Javascript
js实现使用鼠标拖拽切换图片的方法
2015/05/04 Javascript
javascript判断网页是关闭还是刷新
2015/09/12 Javascript
Bootstrap每天必学之表单
2015/11/23 Javascript
js绘制购物车抛物线动画
2020/11/18 Javascript
js实现下一页页码效果
2017/03/07 Javascript
JS实现简单抖动效果
2017/06/01 Javascript
AngularJS中filter的使用实例详解
2017/08/25 Javascript
详解json串反转义(消除反斜杠)
2019/08/12 Javascript
JS实现分页导航效果
2020/02/19 Javascript
在Django框架中编写Context处理器的方法
2015/07/20 Python
对Python中Iterator和Iterable的区别详解
2018/10/18 Python
对Python使用mfcc的两种方式详解
2019/01/09 Python
django多种支付、并发订单处理实例代码
2019/12/13 Python
浅谈在JupyterNotebook下导入自己的模块的问题
2020/04/16 Python
浅谈sklearn中predict与predict_proba区别
2020/06/28 Python
python openCV自制绘画板
2020/10/27 Python
python之随机数函数的实现示例
2020/12/30 Python
html5移动端自适应布局的实现
2020/04/15 HTML / CSS
浅析数据存储的三种方式 cookie sessionstorage localstorage 的异同
2020/06/04 HTML / CSS
中国旅游网站:同程旅游
2016/09/11 全球购物
美国最大的农村生活方式零售店:Tractor Supply Company(TSC)
2017/05/15 全球购物
职称自我鉴定
2013/10/15 职场文书
环保建议书400字
2014/05/14 职场文书
跳槽求职信范文
2014/05/26 职场文书
大一新生期末自我评价
2014/09/12 职场文书
社区党的群众路线教育实践活动剖析材料
2014/10/09 职场文书
行政处罚听证告知书
2015/07/01 职场文书
《少年闰土》教学反思
2016/02/18 职场文书
教你使用pyinstaller打包Python教程
2021/05/27 Python
Python实现自动玩连连看的脚本分享
2022/04/04 Python