当我试图解析一个页面时,我会得到一些奇怪的字符。
这是我的代码:
var getPageContent = function getPageContent(url, callback) {
https.get(url, function (res) {
var data = "";
res.on('data', function (chunk) {
data += chunk;
});
res.on("end", function () {
callback(data));
});
}).on("error", function () {
callback(null);
});
};
getPageContent(url, function (response) {
var $ = cheerio.load(response, { decodeEntities: false });
$("div.details-info").each(function() {
console.log($(this).html());
});
});
我的结果是:
<span>Ст��атегии</span>
<span>Стратег��и</span>
<span>Стра��егии</span>
<span>Стратегии</span>
<span>Стратегии</span>
...
最奇怪的是,从同一个网址,有时我得到了这个奇怪的字符,有时我没有。而且,当我在我的电脑运行时,它的工作正常。我只在服务器上看到这个字符。
发布于 2016-03-23 12:27:55
您可能需要手动将response
的字符集转换为UTF-8。您可以使用iconv
或iconv-lite
模块来完成这一任务。cheerio
本身不会自动处理字符集转换。
https://stackoverflow.com/questions/36187893
复制