requests库爬虫如何加入端口号进行爬虫
要在使用requests库进行爬虫时加入端口号,可以通过在URL中指定端口号来实现。下面是一个示例代码:
import requests
url = "http://example.com:8080" # 在URL中指定端口号
response = requests.get(url)
print(response.text)
在上述代码中,我们将URL设置为"http://example.com:8080",其中8080是端口号。然后使用requests库的get()方法发送GET请求,并将响应保存在response变量中。
请注意,如果要使用HTTPS协议(例如"https://example.com:8443"),则需要使用requests库的get()方法之前,先执行以下代码来禁用证书验证:
import requests
from requests.packages.urllib3.exceptions import InsecureRequestWarning
requests.packages.urllib3.disable_warnings(InsecureRequestWarning)
url = "https://example.com:8443" # 在URL中指定端口号
response = requests.get(url, verify=False)
print(response.text)
上述代码中,我们导入了InsecureRequestWarning类,并使用disable_warnings()方法禁用证书验证警告。然后,我们将verify参数设置为False,以便在发送HTTPS请求时不验证证书。请注意,禁用证书验证可能会导致安全风险,请谨慎使用
原文地址: https://www.cveoy.top/t/topic/igAn 著作权归作者所有。请勿转载和采集!