我想要一个进阶的爬虫脚本程序

好的，下面是一个进阶的爬虫脚本程序的示例：

import requests
from bs4 import BeautifulSoup

def get_links(url):
    # 发送HTTP请求获取页面内容
    response = requests.get(url)
    # 使用BeautifulSoup解析页面内容
    soup = BeautifulSoup(response.text, 'html.parser')
    # 获取页面中的所有链接
    links = soup.find_all('a')
    return links

def crawl_website(url, depth):
    visited = set()
    queue = [(url, 0)]
    
    while queue:
        current_url, current_depth = queue.pop(0)
        
        if current_depth > depth:
            break
        
        if current_url in visited:
            continue
        
        visited.add(current_url)
        print('Crawling', current_url)
        
        links = get_links(current_url)
        
        for link in links:
            next_url = link.get('href')
            
            # 处理相对路径
            if next_url.startswith('/'):
                next_url = url + next_url
            
            # 添加到队列中
            queue.append((next_url, current_depth + 1))

# 调用爬虫函数
crawl_website('https://example.com', 2)

这个示例程序使用requests库发送HTTP请求获取页面内容，使用BeautifulSoup库解析页面内容，然后获取页面中的所有链接。然后通过广度优先搜索算法，逐层爬取网页，直到达到指定的深度。

请注意，这只是一个简单的示例，实际的爬虫脚本可能需要更多的功能和处理逻辑，例如处理JavaScript渲染、处理重定向、处理动态内容等