spider_name = 'Baiduspider' spider_url = 'http://www.baidu.com/search/spider.html'

百度蜘蛛是搜索引擎爬虫，是百度搜索引擎提供的一种免费的、非垃圾的、高效的网络搜索服务。它可以爬取网页上的内容，把网页内容以网页形式展示出来，方便用户搜索查找信息。百度蜘蛛的官方网站为：http://www.baidu.com/search/spider.html，可以在此网站上查看百度蜘蛛的相关信息。