fastdup

fastdup

快速清理图像视频数据集的免费工具

AI官网

应用介绍

训练视觉模型前,数据集里混着重复图、模糊图、异常图和错标签,人工检查几十万张根本不现实。fastdup 能快速分析图像和视频数据集,找出重复、异常和错误标注。

它在普通 CPU 上就能处理上百万张图片,生成可视化报告,大幅降低数据清洗成本。

软件功能



去重:近似重复图。

异常检测:模糊与离群。

标签检查:发现错标。

高速:CPU 百万级。