Python爬虫入门：使用requests和BeautifulSoup提取网页数据

"Python爬虫入门：使用requests和BeautifulSoup提取网页数据"\n\n本文介绍了如何使用Python的requests和BeautifulSoup库编写简单的爬虫代码，以获取网页内容并提取所需数据。\n\npython\nimport requests\nfrom bs4 import BeautifulSoup\n\n# 发送HTTP请求获取页面内容\nurl = \'http://example.com\'\nresponse = requests.get(url)\ncontent = response.text\n\n# 使用BeautifulSoup解析页面内容\nsoup = BeautifulSoup(content, \'html.parser\')\n\n# 提取需要的数据\ndata = soup.find(\'div\', {\'class\': \'content\'}).text\n\n# 打印提取的数据\nprint(data)\n\n\n这个示例使用requests库发送HTTP请求并获取页面内容，然后使用BeautifulSoup库解析页面内容。然后，使用find方法提取页面中具有特定属性的元素，并使用text属性获取元素的文本内容。最后，将提取的数据打印出来。\n\n请注意，这只是一个简单的示例，实际的爬虫代码可能需要处理更复杂的页面结构、处理JavaScript渲染的内容、处理分页等等。