import csvimport requestsimport timeimport osfrom scrapy import Selectorimport urllib3import reurllib3disable_warnings# CSVhead = DOIDOI_URLArticle_URLTitleHTML_URLPDF_URLLocal_Pathcsv_f = openDa爬数据期刊

处理URL时发生异常可能是由于以下原因：

1. 网络连接问题：可以增加重试次数和关闭多余链接来解决，代码示例如下：

# 增加重试次数
requests.adapters.DEFAULT_RETRIES = 5
# 关闭多余链接
s = requests.session()
s.keep_alive = False

2. 异常处理：可以使用try-except语句捕获异常，并在发生异常时进行处理，例如打印异常信息。代码示例如下：

try:
    # 处理URL的代码
except Exception as e:
    print("处理URL时发生异常：", e)

在上述代码中，将处理URL的代码放在try语句块中，如果发生异常则会跳转到except语句块中，并打印异常信息。

你可以根据具体的异常类型进行相应的处理，比如网络连接异常可以使用requests.exceptions.RequestException进行捕获，其他异常可以根据具体情况选择适合的异常类型进行捕获。