AI相似度阈值筛选器-按阈值留样本

AI相似度阈值筛选器-按阈值留样本

1 次使用 1星 - 很差 2星 - 较差 3星 - 一般 4星 - 很好 5星 - 非常好 0.0 (0人已评)

AI相似度阈值筛选器-按阈值留样本

做向量去重、聚类预筛时想知道哪些样本互相太像?贴入一批向量,按余弦相似度阈值两两比对,列出所有超过阈值的相似对和重复嫌疑,再决定合并或剔除。

样本数
比较对数
相似对数
涉及样本数
口径说明:相似度用余弦 cos = A·B / (|A|×|B|),取值 -1 到 1,≥ 阈值判为相似对(含等号)。embedding 去重常用 0.95 以上视为疑似重复、0.90 左右视为高度相似,聚类预筛可放宽到 0.75;阈值越低对数越多,按需调整。所有行维度必须一致,全零向量无法计算方向会被拦截。

工具信息

发布日期: 2026-09-08

描述: AI相似度阈值筛选器,解决向量集里不知道哪些样本互相太像的问题。按余弦阈值两两比对,列出相似对与重复嫌疑,附统计与去重建议。

使用方法: 1. 每行贴一条向量,支持「名称: 1, 2, 3」或直接数字;2. 设相似阈值,默认 0.90;3. 点开始筛选,看相似对明细、涉及样本与占比;4. 按建议合并或剔除重复样本,复制或下载结果。

← 返回

评论 (0)

发表评论

0/300

暂无评论,来发表第一条评论吧!

便签
已输入:0/500字

    扫码访问工具