node中解决使用request爬取网页编码异常的问题
在node环境中使用request爬取网页,响应的body编码异常,导致打印的结果无法正常显示。代码如下:
const request = require('request');function getGoods() { request('https://www.58moto.com/used-car/1470264', (err, res, body) => { console.log(body) })}getGoods()
登录后复制
浏览器中的响应是正常的,而实际打印的结果却是一串乱码,这是由于响应的body编码异常造成的。
解决方法
为了解决这个问题,可以使用axios库来进行爬取,代码如下:
const axios = require('axios');async function getGoods() { const res = await axios.get('https://www.58moto.com/used-car/1470264'); const html = res.data; console.log(html);}getGoods();
登录后复制
使用axios爬取网页时,返回的body已经经过了解码处理,因此打印的结果可以正常显示。
以上就是Node.js爬取网页编码异常如何解决?的详细内容,更多请关注【创想鸟】其它相关文章!
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至253000106@qq.com举报,一经查实,本站将立刻删除。
发布者:PHP中文网,转转请注明出处:https://www.chuangxiangniao.com/p/2802337.html