Node.js 使用 request 获取网页 HTML 文本内容时,如何解决编码异常问题?

DDD
发布: 2024-11-11 09:48:20
原创
627人浏览过

Node.js 使用 request 获取网页 HTML 文本内容时,如何解决编码异常问题?

node中使用request获取html文本内容编码异常

在node环境下使用request爬取网页时,响应的body可能由于编码不正确而出现异常。

具体问题是,使用以下代码获取58moto网页的html文本内容时,打印结果与浏览器中的响应不符,且显示异常的编码内容。

const request = require('request')

function getGoods () {
    request('https://www.58moto.com/used-car/1470264', (err, res, body) => {
        console.log(body)
    })
}

getGoods()
登录后复制

由于编码不正确,実際の打印结果包含乱码,如:

�z<[��zml�1;��g���J��4�~b��J��6^M=i���F}��\�e�ž�������������e�Lc�1Ӟ��M�ή�ׅFm:�=^㱩ZkG��l/L�T⏃���ͱ&�=,0���sc��������B}do�՘�ŅFs�ze�9^i<�����涽 �/4��,�:�=�n��W�/����{���#�OG�'?�F�tn��9{��Ql�i5�481�4f�믬�hNO7
���l6'��<?�����ܹ��zQ\�x�V�ͯ�ǎ/�=���/��>X����K�,޻�}���������:_������z檤���{��6�T=Ϛs�5׼Ϲ~��[~�y�g�Z��~������#��n̾<�
登录后复制

经过分析,发现编码不正确的原因是由于request库未能正确识别响应的编码方式。为了解决这个问题,可以使用axios库代替request。

Find JSON Path Online
Find JSON Path Online

Easily find JSON paths within JSON objects using our intuitive Json Path Finder

Find JSON Path Online 193
查看详情 Find JSON Path Online

立即学习前端免费学习笔记(深入)”;

修改代码如下:

const axios = require('axios')

function getGoods () {
    axios('https://www.58moto.com/used-car/1470264')
        .then(res => {
            console.log(res.data)
        })
}

getGoods()
登录后复制

使用axios后,可以正确获取网页的html文本内容,而且编码正确,与浏览器中的响应一致。

以上就是Node.js 使用 request 获取网页 HTML 文本内容时,如何解决编码异常问题?的详细内容,更多请关注php中文网其它相关文章!

相关标签:
最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
热门推荐
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号