Show HN· jweaz·· 12 天前AI 评分45
Univo 1.0:Python 中快速查找重复数据的工具
Show HN: Find duplicates in 5 lines of Python (offline, lightweight, fast, Rust)
AI 导读
Univo 1.0 是一款基于 Python 的快速查找重复数据的工具,支持模糊匹配、局部嵌入和字段级规则。无需服务器,无需训练和 API 密钥,支持离线操作。默认返回匹配分数大于等于 0.8 的记录,支持语义文本比较。适用于数据清理、实体解析、机器学习数据集去重和实时重复检查。
来源:Show HN · github.com