Python 爬取澳超比赛 FID 示例代码

本示例代码展示如何使用 Python 爬取 500.com 网站澳超比赛数据，并解析提取比赛 FID。

代码:

import requests
from bs4 import BeautifulSoup

# 构造请求头
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'
}

# 发送请求并获取响应
url = 'https://liansai.500.com/'
response = requests.get(url, headers=headers)

# 解析响应内容
soup = BeautifulSoup(response.text, 'html.parser')
matches = soup.select('#matchGroupId_20173 .matchList .match a')
fids = []
for match in matches:
    href = match['href']
    if 'fid=' in href:
        fid = href.split('fid=')[1]
        fids.append(fid)

# 打印结果
print('澳超2023年以来已完成比赛的fid：', fids)

代码说明:

构造请求头: 模拟真实的浏览器请求，防止被网站拒绝访问。
发送请求并获取响应: 使用 requests 库发送 GET 请求，获取网页内容。
解析响应内容: 使用 BeautifulSoup 库解析网页内容，找到澳超比赛链接。
提取 FID: 从比赛链接中提取 FID 信息。
打印结果: 打印解析得到的 FID 列表。

注意:

实际操作中，可能需要根据网站结构调整代码中的选择器。
爬取网站数据时，请遵守网站的使用规则，避免过度抓取导致网站崩溃。
该示例代码仅供参考，实际使用时需要根据实际情况进行修改。