python抓取知乎热榜

知乎热榜讨论话题，https://www.zhihu.com/hot，本文用python抓取下来分析

#!/usr/bin/python
# -*- coding: UTF-8 -*-

from urlparse import urljoin

import re
import requests

def main():
    headers = {'user-agent':'Baiduspider',
               'cookie':'*****'
    }
    proxies = {
        'http':'http://122.114.31.177:808'
    }
    base_url = 'https://www.zhihu.com/'
    seed_url = urljoin(base_url, 'hot')
    resp = requests.get(seed_url,
                        headers=headers,
                        proxies=proxies)
    html = resp.text
    match_obj = re.compile(r'<h2 class="HotItem-title">.*?</h2>', re.S)
    results = re.findall(match_obj, html)
    for item in results:
        match_title = r'<h2 class="HotItem-title">(.*?)</h2>'
        title = re.findall(match_title, item)[0]
        print title

if __name__ == '__main__':
    main()

最后抓取到的话题如下所示（2019年05月28日16:19分的知乎热榜）：

如何看待南昌红谷滩女孩子大街上被陌生人杀害事件?
安卓一旦「抛弃」华为，华为改用自研的「鸿蒙」系统，你是否愿意尝试？
如何看待珠穆朗玛峰大拥堵致 14 人死亡重大事件？
假如地球上所有体重超过 20kg 的生物都拥有人类的智商，会碰撞出怎样的文明火花？
有哪些瞬间「 hold 住全场 」的表情包？
有什么特别恐怖，听了背后凉飕飕的鬼故事？
2019 年 5 月 28 日发布的红米新旗舰 K20 手机有哪些值得一提的亮点和想吐槽的方面？
如何看待网传联邦快递私自转运华为邮件，华为将审查与联邦快递合作关系一事？
刘慈欣的作品中有哪些史诗感很强的片段？
梦会不会是在给你暗示？
为什么施工单位的年轻人越来越少了?
学习哲学有什么坏处？
有哪些让你见过就无法忘记的文身？
如何评价 HBO 新剧《切尔诺贝利》第 4 集？
晋升很快的职场人都有什么共性？
室友无意中打碎了我两瓶香水，应不应该让她赔？
有哪些很皮的句子?
现代社会为何还要学习拗口难懂的古文？
如何看待郑州「奥迪女」因孩子挡路掌掴 5 岁女童一事？
宅男如何正常和女生聊天？
游戏《全面战争：三国》有哪些技巧和战术？
如何看待现今部分医生对患者的不良态度？
人为什么会得痔疮？
男人更愿意找宝钗还是黛玉？
每天跑步五公里，能给自己带来什么？
张云雷有哪些惊艳你的神图?
为何男女比例失调下我依然没有男朋友？
《破冰行动》是以哪起真实事件改编的？具体情况是怎样的？
如何看待黄磊和王迅发两条庆祝微博？
不出国如何练就一口流利的英语？
前女友到底是怎样的存在？
是否存在某些大学辅导员比较嚣张的现象，为什么？
有哪些瘦腿的方法？
如何看待张艺兴首场演唱会 8 秒售完？
如果地球只剩你自己，你会怎样？
如何评价 Dior 的口红？
都说支付宝促进了社会信用的进步，是否夸张了？
四月中旬决定考研还来得及吗？每天至少复习多久？
如何评价《英雄联盟》重做后的「铁男」莫德凯撒？
沈眉庄为什么大家都叫她眉儿而不是庄儿？
有哪些很多人觉得很烂但你要吹爆的动漫?
如何评论张艺兴演唱会无团票，而且票价挺贵的？
有哪些「随手一做好吃又饱肚 」的美食？
如何评价《这就是街舞》第二季第二期中易烊千玺 2v2battle 的表现 ？
红米 K20 搭载全面屏和 7 代屏下指纹，说明小米产品线布局发生了哪些变化?
如何看待吴昕将钟汉良送的礼物转卖了？
经常便秘日常吃什么？
怎么评价《龙珠超：布罗利》这部作品？
黄磊在节目里叫子枫女儿，多多看了会怎么想？
有什么明日方舟玩家看了能会心一笑的笑话或图片？