SQL Server 脏数据问题解决方案：删除重复记录

脏数据是指数据中存在错误、重复、不一致等问题。例如，一张订单表中可能出现重复的订单记录或者订单金额与订单详情表不一致的情况。

举例：

假设有一张订单表 orders，其中有重复的订单记录：

| order_id | customer_id | order_date | amount | |----------|-------------|------------|--------| | 1 | 1001 | 2021-01-01 | 100 | | 2 | 1002 | 2021-01-02 | 200 | | 3 | 1001 | 2021-01-03 | 300 | | 4 | 1003 | 2021-01-04 | 400 | | 1 | 1001 | 2021-01-01 | 100 |

解决方案：

可以使用以下 SQL 语句来删除重复的订单记录：

WITH CTE AS (
    SELECT *, ROW_NUMBER() OVER (PARTITION BY order_id ORDER BY order_date DESC) AS RN
    FROM orders
)
DELETE FROM CTE
WHERE RN > 1;

该语句使用了 CTE（公共表表达式）和 ROW_NUMBER() 函数来给每个重复的订单记录分配一个排名 RN，然后删除排名大于 1 的记录，保留最新的一条记录。

删除重复记录后，订单表变为：

| order_id | customer_id | order_date | amount | |----------|-------------|------------|--------| | 1 | 1001 | 2021-01-01 | 100 | | 2 | 1002 | 2021-01-02 | 200 | | 3 | 1001 | 2021-01-03 | 300 | | 4 | 1003 | 2021-01-04 | 400 |