再次遇到golang乱码问题,用simplifiedchinese解决

时间:2020-01-22 16:11:37   收藏:0   阅读:310

上篇文章中,抓取网页时,本想匹配其中的汉字。由于出现乱码,只好匹配英文绕过了问题。

原因很简单:该网页没指定utf8,默认应该是GBK

解决办法也很简单:引入

"golang.org/x/text/encoding/simplifiedchinese"

比如原来的代码是

resp, err := this.cleint.Get(url)
body, err := ioutil.ReadAll(resp.Body)

此时body中读取到的是乱码。

只需增加一个reader

resp, err := this.cleint.Get(url)
reader := simplifiedchinese.GB18030.NewDecoder().Reader(resp.Body)
body, err := ioutil.ReadAll(reader)

此时,body中就是正确解码后的汉字。可以进行查找或正则匹配了。



原文:https://www.cnblogs.com/pu369/p/12228659.html

评论(0
© 2014 bubuko.com 版权所有 - 联系我们:wmxa8@hotmail.com
打开技术之扣,分享程序人生!