Spacy库中token.text, token.has_vector, token.vector_norm, token.is_oov的含义、联系与区别

1. 'token.text'：表示一个token的文本内容，即原始文本中的单词或标点符号。

2. 'token.has_vector'：表示一个token是否具有向量表示。如果该token已经在预训练的词向量库中出现过，则该值为True，否则为False。

3. 'token.vector_norm'：表示一个token的向量的L2范数（即欧几里得范数）。它衡量了向量的大小，即向量的长度。

4. 'token.is_oov'：表示一个token是否在预训练的词向量库中出现过。如果该token未在词向量库中出现过，则该值为True，否则为False。

联系：这些属性都与token的向量表示有关，其中'token.has_vector'和'token.is_oov'用于判断token是否具有向量表示，而'token.vector_norm'用于衡量向量的大小。

区别：'token.text'表示原始文本中的单词或标点符号，而其他三个属性都与token的向量表示有关。'token.has_vector'和'token.is_oov'用于判断token是否具有向量表示，其中'token.has_vector'表示该token是否在预训练的词向量库中出现过，而'token.is_oov'则表示该token是否未在词向量库中出现过。'token.vector_norm'则用于衡量向量的大小，即向量的长度。