Kafka log.dirs 文件占用空间过大？快速清理无用日志！

Kafka log.dirs 文件占用空间过大？快速清理无用日志！

Kafka 的 log.dirs 文件随着时间的推移可能会占用大量的磁盘空间。如果发现 log.dirs 文件占用空间过大，可以通过以下步骤清理不需要的日志内容：

1. 停止 Kafka 服务。

2. 找到需要清理的 topic 所在的 log.dirs 目录。

3. **确定可以删除的日志文件的起始和结束偏移量。**可以使用 Kafka 自带的工具 kafka-log-dirs.sh 找到每个 partition 的起始和结束偏移量。

4. **删除起始和结束偏移量之间的日志文件。**可以手动删除或使用 Linux 命令行工具如 rm 或 find 进行删除。

5. 启动 Kafka 服务。

注意事项：

• 在删除日志文件之前，确保已经备份需要保留的数据。
• 删除日志文件可能会影响 Kafka 的可用性。请在低峰期执行清理操作。
• 清理日志文件后，需要重新计算每个 partition 的起始和结束偏移量。可以使用 Kafka 自带的工具 kafka-log-dirs.sh 重新计算。