admin 管理员组

文章数量: 887021

简介

爬取新闻标题

1. 安装

pip install request
pip install fake_useragent

2. 演示

  1. 进入网址，查看网页源代码

  2. 找到标题界面，根据li标签的特征使用re匹配

  3. 代码演示

import requests
from fake_useragent import UserAgent # 伪装请求头的库
import re

url = 'http://sports.qq/'   # 腾讯体育新闻网址
headers = {'User-Agent': UserAgent().chrome} 

response = requests.get(url, headers)
pattern = r'<li><a target="_blank" href="(.*?)" class="(.*?)">(.*?)</a></li>'
s = re.findall(pattern=pattern, string=response.text)

for content in s:
    print(content[2])

print('--------完成-------')
  1. 结果

本文标签： 腾讯 体育新闻 requests

版权声明：本文标题：requests使用re爬取腾讯体育新闻 内容由网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：http://www.freenas.com.cn/jishu/1726442471h961446.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。