采用KNN算法使用python语言BBC新闻进行文本分类
以下是使用KNN算法,使用python语言,BBC新闻进行文本分类的代码示例:
import pandas as pd
from sklearn.feature_extraction.text import TfidfVectorizer
from sklearn.preprocessing import LabelEncoder
from sklearn.neighbors import KNeighborsClassifier
from sklearn.model_selection import train_test_split
from sklearn.metrics import accuracy_score
# 读取BBC新闻数据集
df = pd.read_csv('bbc.csv')
# 将文本转换为TF-IDF特征向量
vectorizer = TfidfVectorizer(stop_words='english')
X = vectorizer.fit_transform(df['text'])
y = LabelEncoder().fit_transform(df['category'])
# 划分训练集和测试集
X_train, X_test, y_train, y_test = train_test_split(X, y, test_size=0.2, random_state=42)
# 训练KNN模型
knn = KNeighborsClassifier(n_neighbors=5)
knn.fit(X_train, y_train)
# 预测测试集结果
y_pred = knn.predict(X_test)
# 计算准确率
accuracy = accuracy_score(y_test, y_pred)
print('Accuracy:', accuracy)
运行以上代码,即可使用KNN算法对BBC新闻进行文本分类,并输出准确率。需要注意的是,此示例代码仅使用了文本内容进行分类,没有考虑其他特征,如作者、日期等。如果需要考虑其他特征,需要对数据集进行进一步处理
原文地址: https://www.cveoy.top/t/topic/guXs 著作权归作者所有。请勿转载和采集!