html - python xpath爬虫获得新浪微博博主昵称为空-PHP中文网问答

微信公众号讲师中心

首页

文章

后端开发 web前端数据库开发工具 php框架常见问题科技 Java 系统教程电脑教程硬件教程手机教程软件教程游戏教程自媒体新闻

专题

后端开发 web前端数据库开发工具 php框架科技 Java 系统教程电脑教程硬件教程手机教程软件教程游戏教程新闻

AI工具

AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令

学习

大前端后端开发数据库移动端运维开发计算机基础

编程手册

大前端后端开发数据库移动端运维开发计算机基础

下载

js特效网站源码工具下载类库下载网站素材学习资源插件扩展手机/移动开发手机游戏

搜索

后端开发 web前端数据库开发工具 php框架常见问题科技 Java 系统教程电脑教程硬件教程手机教程软件教程游戏教程

html - python xpath爬虫获得新浪微博博主昵称为空

PHPz 2017-04-18 09:56:51

[Python讨论组]

786

第一次用xpath写的爬虫，想获取某人关注列表的每位博主的昵称，但是用下面的代码得到的li永远是空的，为什么捏？

    for i in range(1, pagenum + 1):
        urli = "http://weibo.cn/%d/follow?page=%d"%(uid,i)
        html_sample = requests.get(urli, cookies=cookie).content
        # 使用xpath获取所有昵称
        selector = etree.HTML(html_sample)
        list = selector.xpath('//table/tbody/tr/td[2]/a[1]/text()')
        for li in list:
            print nums,li
            nums += 1

PHPz

学习是最好的投资！

全部回复(1)

怪我咯2017-04-18 09:58:51 1楼

你打开页面源码看看就知道结构和你截图的有点区别，

    for name in selector.xpath('//table/tr/td/a[1]/text()'):
        print(name)

用BeautifulSoup也很方便

    for name in soup.find_all('table'):
        print(name.find_all('a')[1].get_text())

赞 +0

添加回复

专题推荐

更多>

热门话题

热门教程

更多>