我写了一个类似爬虫的程序,要将爬取的网页内容保存到本地的文本文件。
写入之后用记事本打开为什么有的网页内容显示正常,有的网页中文出现乱码?
下载网页源码的时候用的utf-8的编码,但是保存到java中字符串应该已经变成unicode的编码了,跟一般的java字符串没区别了吧??
而且我已经试过写入txt的时候改编码了,gbk,unicode,utf-8都试过!
然后我又用了字符串常量“你好”实验,gbk的时候是正常的。可是一写网页内容就不正常了!!是不是跟不同网页采用的编码有关啊??
我看到网页一般都是utf-8的编码啊。难道不同的网页有不同的编码??