图像检索:基于SIFT特征、颜色直方图和PCA降维的图像相似性搜索
图像检索:基于SIFT特征、颜色直方图和PCA降维的图像相似性搜索
本代码使用SIFT特征、颜色直方图和PCA降维技术实现图像检索功能,能够根据给定图像查找图像库中与其最相似的图像。
import cv2
import numpy as np
import os
from sklearn.decomposition import PCA
# 图像集文件夹路径
IMAGE_FOLDER_PATH = './100/'
# 需要检索的图片路径
QUERY_IMAGE_PATH = './01.jpg'
# KNN参数
KNN_K = 3
# 颜色直方图参数
HISTOGRAM_SIZE = [4, 4, 4]
# HISTOGRAM_SIZE = [8, 8, 8]
# PCA参数
PCA_COMPONENTS = 5
# PCA_COMPONENTS = 300
def read_images(image_folder_path):
'''
读取并返回图像集
:param image_folder_path: 图像集文件夹路径
:return: 图像集列表
'''
images = []
for file_name in os.listdir(image_folder_path):
if file_name.endswith('.jpg'):
file_path = os.path.join(image_folder_path, file_name)
images.append(cv2.imread(file_path))
return images
def extract_sift_features(image):
'''
提取图像SIFT特征
:param image: 输入图像
:return: 特征向量
'''
gray_image = cv2.cvtColor(image, cv2.COLOR_BGR2GRAY)
sift = cv2.xfeatures2d.SIFT_create()
keypoints, descriptors = sift.detectAndCompute(gray_image, None)
return descriptors
def compute_color_histogram(image, histogram_size):
'''
计算图像颜色直方图特征向量
:param image: 输入图像
:param histogram_size: 直方图尺寸
:return: 特征向量
'''
histogram = cv2.calcHist([image], [0, 1, 2], None, histogram_size, [0, 256, 0, 256, 0, 256])
histogram = cv2.normalize(histogram, None).flatten()
return histogram
def run_pca(features, components):
'''
使用PCA方法进行特征降维
:param features: 待降维特征
:param components: 保留主成分数量
:return: 降维后的特征
'''
pca = PCA(n_components=components)
pca.fit(features)
reduced_features = pca.transform(features)
return reduced_features
# 读取图像集
image_set = read_images(IMAGE_FOLDER_PATH)
# 提取SIFT和颜色直方图特征
sift_features = []
color_histograms = []
for image in image_set:
sift_features.append(extract_sift_features(image))
color_histograms.append(compute_color_histogram(image, HISTOGRAM_SIZE))
# 转换特征向量形状
sift_features = np.vstack(sift_features)
color_histograms = np.vstack(color_histograms)
# # 对SIFT特征进行PCA降维
# sift_features = run_pca(sift_features, PCA_COMPONENTS)
# 对SIFT特征进行PCA降维
sift_features = run_pca(sift_features, PCA_COMPONENTS)
query_sift_features = run_pca(query_sift_features, PCA_COMPONENTS)
# 读取要查询的图像
query_image = cv2.imread(QUERY_IMAGE_PATH)
# 提取SIFT和颜色直方图特征
query_sift_features = extract_sift_features(query_image)
query_color_histogram = compute_color_histogram(query_image, HISTOGRAM_SIZE)
# 调整特征向量形状
query_sift_features = query_sift_features.reshape((1, -1))
# 对SIFT特征进行PCA降维
query_sift_features = run_pca(query_sift_features, PCA_COMPONENTS)
# 计算待查询图像的SIFT和颜色直方图特征与图像集中所有图像的距离
sift_distances = np.linalg.norm(sift_features - query_sift_features, axis=1)
color_histogram_distances = np.linalg.norm(color_histograms - query_color_histogram, axis=1)
# 合并SIFT和颜色直方图特征的距离结果
distances = sift_distances + color_histogram_distances
# 对距离结果进行排序,并获取前K个相似的图像索引
sorted_index = np.argsort(distances)[:KNN_K]
# 显示结果
for i in sorted_index:
cv2.imshow(f'Result-{i}', image_set[i])
cv2.waitKey(0)
cv2.destroyAllWindows()
n_components=5 must be between 0 and min(n_samples, n_features)=1 with svd_solver='full'
如何解决这个问题内容:这个问题是因为PCA降维的保留主成分数量超过了特征向量中的维度,导致无法进行降维。可以通过减小PCA_COMPONENTS的值来解决这个问题,或者使用更多的特征向量来满足降维的需求。比如增加图像集大小或者使用更多的SIFT特征点。
代码解析:
- 读取图像集:
read_images()函数读取指定文件夹中的所有.jpg图像文件并返回图像集列表。 - 提取SIFT特征:
extract_sift_features()函数使用OpenCV的SIFT算法提取图像的SIFT特征,返回特征向量。 - 计算颜色直方图:
compute_color_histogram()函数计算图像的颜色直方图,返回特征向量。 - PCA降维:
run_pca()函数使用Scikit-learn库的PCA算法对特征向量进行降维,返回降维后的特征向量。 - 计算距离: 代码计算待查询图像与图像集中的每个图像的SIFT特征距离和颜色直方图距离,并将其合并。
- 排序并显示结果: 代码根据距离对图像进行排序,并显示前K个最相似的图像。
解决PCA降维报错问题:
代码中出现了 n_components=5 must be between 0 and min(n_samples, n_features)=1 with svd_solver='full' 错误。这是因为PCA降维的保留主成分数量(PCA_COMPONENTS)超过了特征向量中的维度。可以通过以下两种方法解决:
- 减小
PCA_COMPONENTS的值: 降低保留主成分的数量,使其小于等于特征向量中的维度。 - 使用更多的特征向量: 增加图像集的大小或使用更多的SIFT特征点,以增加特征向量的维度,满足降维的需求。
代码优化:
- 使用
try...except语句处理图像读取错误。 - 添加参数验证,确保参数值有效。
- 可以使用多线程或多进程加速图像处理和特征提取过程。
应用场景:
本代码可以应用于各种图像检索场景,例如:
- 图像相似性搜索
- 图像分类
- 图像聚类
- 图像去重
原文地址: https://www.cveoy.top/t/topic/nXgF 著作权归作者所有。请勿转载和采集!