代码

#coding:utf-8

import requests

from bs4 import BeautifulSoup

res = requests.get("http://news.sina.com.cn/china/")

res.encoding = "utf-8"

soup = BeautifulSoup(res.text,'html.parser')

for news in soup.select('.blk122'):

    # print news

    new_as = news.select("a")

    i = 1

    for news_a in new_as:

        print '第%d条新闻标题:'%i,news_a.text

        i = i+1

结果

第1条新闻标题: 少将为何带500多名海军未来精英赴欧

第2条新闻标题: 9月18日 这4艘中国军舰齐聚日本海

第3条新闻标题: 中国最大市同时调整2名高层 其中1人为跨界入政

第4条新闻标题: “百名红通人员”王林娟回国投案 已到案45人

第5条新闻标题: 海军戚继光舰首次远航实习出访 舰上能唱K健身

第6条新闻标题: 35颗卫星3重天网 中国这个全球定位系统厉害了

第7条新闻标题: 港中大“标语战”升级 有人贴出：这里就是中国

第8条新闻标题: 韩媒:萨德问题致韩企对中国直接投资缩水近一半

第9条新闻标题: 刚与台“断交”三个月 巴拿马总统对中国送祝愿

第10条新闻标题: 天舟一号与天宫二号分离 最终将陨落太平洋

第11条新闻标题: 新华社：从金砖国家领导人会晤看五大民生实惠

Python爬虫：获取新浪网新闻的更多相关文章

  1. [Python]爬虫获取知乎某个问题下所有图片并去除水印

    获取URL 进入某个知乎问题的主页下,按F12打开开发者工具后查看network面板. network面板可以查看页面向服务器请求的资源.资源的大小.加载资源花费的时间以及哪些资源加载失败等信息.还可 ...

  2. 如何科学地蹭热点：用python爬虫获取热门微博评论并进行情感分析

    前言:本文主要涉及知识点包括新浪微博爬虫.python对数据库的简单读写.简单的列表数据去重.简单的自然语言处理(snowNLP模块.机器学习).适合有一定编程基础,并对python有所了解的盆友阅读 ...

  3. Python爬虫获取知乎图片

    前段时间想抓点知乎问题中的图片,了解了下爬虫,发现还是Python的简单方便,于是做了点尝试. #coding=utf-8 import urllib import re def getHtml(ur ...

  4. Python爬虫获取异步加载站点pexels并下载图片(Python爬虫实战3)

    1. 异步加载爬虫 对于静态页面爬虫很容易获取到站点的数据内容,然而静态页面需要全量加载站点的所有数据,对于网站的访问和带宽是巨大的挑战,对于高并发和大访问访问量的站点来说,需要使用AJAX相关的技术 ...

  5. python爬虫获取百度图片（没有精华，只为娱乐）

    python3.7,爬虫技术,获取百度图片资源,msg为查询内容,cnt为查询的页数,大家快点来爬起来.注:现在只能爬取到百度的小图片,以后有大图片的方法,我会陆续发贴. #!/usr/bin/env ...

  6. Python爬虫获取迅雷会员帐号

    代码如下: import re import urllib.request import urllib import time from collections import deque head = ...

  7. Python爬虫获取百度贴吧图片

    #!/usr/bin/python# -*- coding: UTF-8 -*-import urllibimport re文章来源:https://www.cnblogs.com/Axi8/p/57 ...

  8. 【原创】python爬虫获取网站数据并存入本地数据库

    #coding=utf-8 import urllib import re import MySQLdb dbnumber = MySQLdb.connect('localhost', 'root', ...

  9. python爬虫获取图片

    import re import os import urllib #根据给定的网址来获取网页详细信息,得到的html就是网页的源代码 def getHtml(url): page = urllib. ...

随机推荐

  1. 李洪强iOS开发之OC[002] - OC中注释以及@符号的使用

  2. IE浏览器上传图片预览兼容（IE 7 8 9 10 11）

    $("#file_upload").change(function () { var $file = $(this); ]; var windowURL = window.URL ...

  3. 配置LANMP环境（3）-- 安装anmp前准备与实用软件安装

    一.安装配置vim 1.安装 yum -y install vim* 2.创建文件夹 mkdir -p /etc/vim/ 3.配置 vim ~/.vimrc  "插入模式时 光标的上下左右 ...

  4. OpenFiler configuration

    5.OpenFiler configuration   登录Openfiler   步骤1:安装 FireFox   步骤2:通过FireFox以HTTPS://server-ip:446 远程访问O ...

  5. Erlang 和 Elixir 互相调用 （转）

    lixr设计目标之一就是要确保兼容性,可以兼容Erlang和其生态系统.Elixir和Erlang 都是运行同样的虚拟机平台(Erlang Virtual Machine).不管是在Erlang使用E ...

  6. Java基础01 从HelloWorld到面向对象（转载）

    Java是完全面向对象的语言.Java通过虚拟机的运行机制,实现“跨平台”的理念. "Hello World!" public class HelloWorld{    publi ...

  7. 通信协议之广播---recvfrom 放回客户端的ip地址第一次全为0.0.0.0

    遇到一个很恶心的问题. while(1) { recvfrom(sockfd, readbuff, UDP_CMD_BUFF_LENGTH - 1, 0, (struct sockaddr *)&am ...

  8. PHPthinking邀请您一起赚Money

    原文地址:http://bbs.phpthinking.com/thread-790-1-1.html 为了让大家工作或者学习之余.可以赚些money,PHPthinking为大家推荐一个赚钱的站点! ...

  9. CentOS 7.0 防火墙

    CentOS 7.0默认使用的是firewall作为防火墙,这里改为iptables防火墙.firewall:systemctl start firewalld.service#启动firewalls ...

  10. sublime text3 安装配置

    sublime text 3 语法检查插件(一直都是安装了但是却没有语法报错提示和苦恼) 第一种方法:有点卡 先去下载对应的开发环境,安装到本地,例如php. 从Pakage Control中安装su ...