css - BeautifulSoup python 爬虫无法搜索目标标签-PHP中文网问答

文章专题 AI工具学习下载问答源码最近更新

PHP

会员中心讲师中心微信公众号

css - BeautifulSoup python 爬虫无法搜索目标标签

怪我咯 2017-04-17 17:48:15

[Python讨论组]

412

代码

import requests
from bs4 import BeautifulSoup

url = 'http://product.pconline.com.cn/mobile/'
response = requests.get(url)
html = response.text
print html

soup = BeautifulSoup(html, 'lxml')
site = soup.find_all('img', class_="pic")
print site

目标网站:http://product.pconline.com.cn/mobile/
打算爬取的是手机图片标签,运行上面这段代码后打印的site得到是空的。

图片部分html片段：

<img class="pic" alt="华为Mate8/3GB+32GB版" title="麒麟950处理器、6寸超大屏、超高屏占比、超窄边框，3GB+32GB全网通版本" src="http://img.pconline.com.cn/images/product/5807/580761/q_sn8.jpg" height="150" width="200">

怪我咯

走同样的路，发现不同的人生

全部回复(3)

怪我咯2017-04-17 17:50:15 3楼

我这边是可以的，不知道会不会是编码的问，或者是lxml扩展的问题

赞 +0

添加回复

伊谢尔伦2017-04-17 17:50:15 2楼

换个解析器试试
soup = BeautifulSoup(html, 'html.parser')

赞 +0

添加回复

怪我咯2017-04-17 17:50:15 1楼

pyquery，不二之选, 语法和jquery一样

import requests, pyquery
url = 'http://product.pconline.com.cn/mobile/'
r = requests.get(url)

html = r.text.replace('#src', 'jsrc')
Q = pyquery.PyQuery(html)

for _ in Q('img.pic'):
    print Q(_).attr('jsrc'), Q(_).attr('alt'), Q(_).attr('title')

赞 +0

添加回复

专题推荐

更多>

热门话题

热门教程

更多>