请问怎么解决 logging 中出现的 GBK 编码错误问题

2018-03-13 18:43:11 +08:00
 yangyaofei

打 log 的时候,因为会出现 emoji,而 gbk 是不支持 emoji 的,所以刚开始的时候在 windows 机器上(部署程序的机器)的终端打印的 log 会出现 encode error 问题🤦‍

因为没办法,我们写了个 handler,将 log 存到数据库里面,basic logger 设置成存入日志文件中,以为不在终端打印 emoji 什么的就不会出现问题,但是依然报错😂😂😂

请问,有没有遇见过这种情况的,有什么办法可以解决啊.关键是这个错误是 logging error,都捕获不到异常...

4082 次点击
所在节点    Python
9 条回复
xpresslink
2018-03-13 20:53:54 +08:00
看不懂你说什么,windows 机器上也用 utf-8 啊,直接用 byte 模式写根本不会有编码问题。
xpresslink
2018-03-13 21:03:24 +08:00
直接国标码 GB18030 也能支持 emoji
yangyaofei
2018-03-13 23:53:39 +08:00
@xpresslink 是 utf8 但是显示在终端的时候会内部转成 gbk 导致错误,并不是想用什么显示
kunluanbudang
2018-03-13 23:58:09 +08:00
你们使用的是这个 handler 吗?

```
class RotatingFileHandler(BaseRotatingHandler):
"""
Handler for logging to a set of files, which switches from one file
to the next when the current file reaches a certain size.
"""
def __init__(self, filename, mode='a', maxBytes=0, backupCount=0, encoding=None, delay=False):
```

好像有一个 encoding 的参数
yangyaofei
2018-03-14 11:11:03 +08:00
@kunluanbudang 没有,我自己写的 handler,就是很简单的获取后存数据库,另一个就是用 basicConfig 设置成文件输出
qq316107934
2018-03-14 12:18:41 +08:00
遇到了同样的问题,关注
ZoomQuiet
2018-03-15 07:34:30 +08:00
是也乎 ╮(╯▽╰)╭

最好给一下具体的报错日志现场 文本…

问题的关键在你的判定 gbk 的锅在哪个环节爆的?

目测终端~logging 问题不大…可能是业务代码本身?
yangyaofei
2018-03-16 15:48:04 +08:00
@ZoomQuiet 不是,是这样的,一个 str 在 python3 里面肯定是 unicode,在显示的时候肯定要转换成系统终端的编码方式,所以当有 emoji 的时候转换不了所以会报错。你可以写个 print("😂😂😂"),估计在 win 的中文系统里面也会报错的,这个地方的问题是我没有输出到终端,输出到文本也这样,我怀疑是输出文件的时候也会转码成 gbk
yangyaofei
2018-03-16 15:50:22 +08:00
@qq316107934 同上,我觉得这个问题可以把原始的 logger remove 出来,然后再添加一个自己用的 file 或者 stream hadler 来解决,最近在弄优先级更高的任务,所以没弄。要是能找到 basicConfig 里面怎么设置 encode 我想也可以。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/437710

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX