图像检索:基于SIFT特征、颜色直方图和PCA降维的图像相似性搜索

本代码使用SIFT特征、颜色直方图和PCA降维技术实现图像检索功能,能够根据给定图像查找图像库中与其最相似的图像。

import cv2
import numpy as np
import os
from sklearn.decomposition import PCA

# 图像集文件夹路径
IMAGE_FOLDER_PATH = './100/'

# 需要检索的图片路径
QUERY_IMAGE_PATH = './01.jpg'

# KNN参数
KNN_K = 3

# 颜色直方图参数
HISTOGRAM_SIZE = [4, 4, 4]
# HISTOGRAM_SIZE = [8, 8, 8]
# PCA参数
PCA_COMPONENTS = 5
# PCA_COMPONENTS = 300

def read_images(image_folder_path):
    '''
    读取并返回图像集
    :param image_folder_path: 图像集文件夹路径
    :return: 图像集列表
    '''
    images = []
    for file_name in os.listdir(image_folder_path):
        if file_name.endswith('.jpg'):
            file_path = os.path.join(image_folder_path, file_name)
            images.append(cv2.imread(file_path))
    return images


def extract_sift_features(image):
    '''
    提取图像SIFT特征
    :param image: 输入图像
    :return: 特征向量
    '''
    gray_image = cv2.cvtColor(image, cv2.COLOR_BGR2GRAY)
    sift = cv2.xfeatures2d.SIFT_create()
    keypoints, descriptors = sift.detectAndCompute(gray_image, None)
    return descriptors


def compute_color_histogram(image, histogram_size):
    '''
    计算图像颜色直方图特征向量
    :param image: 输入图像
    :param histogram_size: 直方图尺寸
    :return: 特征向量
    '''
    histogram = cv2.calcHist([image], [0, 1, 2], None, histogram_size, [0, 256, 0, 256, 0, 256])
    histogram = cv2.normalize(histogram, None).flatten()
    return histogram


def run_pca(features, components):
    '''
    使用PCA方法进行特征降维
    :param features: 待降维特征
    :param components: 保留主成分数量
    :return: 降维后的特征
    '''
    pca = PCA(n_components=components)
    pca.fit(features)
    reduced_features = pca.transform(features)
    return reduced_features


# 读取图像集
image_set = read_images(IMAGE_FOLDER_PATH)

# 提取SIFT和颜色直方图特征
sift_features = []
color_histograms = []
for image in image_set:
    sift_features.append(extract_sift_features(image))
    color_histograms.append(compute_color_histogram(image, HISTOGRAM_SIZE))

# 转换特征向量形状
sift_features = np.vstack(sift_features)
color_histograms = np.vstack(color_histograms)


# # 对SIFT特征进行PCA降维
# sift_features = run_pca(sift_features, PCA_COMPONENTS)

# 对SIFT特征进行PCA降维
sift_features = run_pca(sift_features, PCA_COMPONENTS)
query_sift_features = run_pca(query_sift_features, PCA_COMPONENTS)


# 读取要查询的图像
query_image = cv2.imread(QUERY_IMAGE_PATH)

# 提取SIFT和颜色直方图特征
query_sift_features = extract_sift_features(query_image)
query_color_histogram = compute_color_histogram(query_image, HISTOGRAM_SIZE)

# 调整特征向量形状
query_sift_features = query_sift_features.reshape((1, -1))

# 对SIFT特征进行PCA降维
query_sift_features = run_pca(query_sift_features, PCA_COMPONENTS)

# 计算待查询图像的SIFT和颜色直方图特征与图像集中所有图像的距离
sift_distances = np.linalg.norm(sift_features - query_sift_features, axis=1)
color_histogram_distances = np.linalg.norm(color_histograms - query_color_histogram, axis=1)

# 合并SIFT和颜色直方图特征的距离结果
distances = sift_distances + color_histogram_distances

# 对距离结果进行排序,并获取前K个相似的图像索引
sorted_index = np.argsort(distances)[:KNN_K]

# 显示结果
for i in sorted_index:
    cv2.imshow(f'Result-{i}', image_set[i])
cv2.waitKey(0)
cv2.destroyAllWindows()

n_components=5 must be between 0 and min(n_samples, n_features)=1 with svd_solver='full'
如何解决这个问题内容:这个问题是因为PCA降维的保留主成分数量超过了特征向量中的维度,导致无法进行降维。可以通过减小PCA_COMPONENTS的值来解决这个问题,或者使用更多的特征向量来满足降维的需求。比如增加图像集大小或者使用更多的SIFT特征点。

代码解析:

  1. 读取图像集: read_images() 函数读取指定文件夹中的所有.jpg图像文件并返回图像集列表。
  2. 提取SIFT特征: extract_sift_features() 函数使用OpenCV的SIFT算法提取图像的SIFT特征,返回特征向量。
  3. 计算颜色直方图: compute_color_histogram() 函数计算图像的颜色直方图,返回特征向量。
  4. PCA降维: run_pca() 函数使用Scikit-learn库的PCA算法对特征向量进行降维,返回降维后的特征向量。
  5. 计算距离: 代码计算待查询图像与图像集中的每个图像的SIFT特征距离和颜色直方图距离,并将其合并。
  6. 排序并显示结果: 代码根据距离对图像进行排序,并显示前K个最相似的图像。

解决PCA降维报错问题:

代码中出现了 n_components=5 must be between 0 and min(n_samples, n_features)=1 with svd_solver='full' 错误。这是因为PCA降维的保留主成分数量(PCA_COMPONENTS)超过了特征向量中的维度。可以通过以下两种方法解决:

  • 减小PCA_COMPONENTS的值: 降低保留主成分的数量,使其小于等于特征向量中的维度。
  • 使用更多的特征向量: 增加图像集的大小或使用更多的SIFT特征点,以增加特征向量的维度,满足降维的需求。

代码优化:

  • 使用try...except语句处理图像读取错误。
  • 添加参数验证,确保参数值有效。
  • 可以使用多线程或多进程加速图像处理和特征提取过程。

应用场景:

本代码可以应用于各种图像检索场景,例如:

  • 图像相似性搜索
  • 图像分类
  • 图像聚类
  • 图像去重
图像检索:基于SIFT特征、颜色直方图和PCA降维的图像相似性搜索

原文地址: https://www.cveoy.top/t/topic/nXgF 著作权归作者所有。请勿转载和采集!

免费AI点我,无需注册和登录