Keenable AI 开源实时搜索基准 NEEDLE，每小时重建查询集

Techub News 消息，AI 搜索公司 Keenable AI 开源了实时搜索基准 NEEDLE。与固定数据集不同，NEEDLE 每小时会从 RSS 订阅源和 Google Trends 等公共来源重建查询集，用来处理模型可能直接读取答案，或利用参数记忆作答的问题。

NEEDLE 覆盖新闻、金融、学术、法律和稀有实体查询，并通过统一协议对 15 个搜索 API 进行评测。该基准还引入了「终极天花板」指标，用于衡量整个领域可检索的最佳结果。

作为开源评估工具，NEEDLE 可通过 Python CLI 安装和运行，评判过程需要 OpenRouter 密钥，也支持在笔记本电脑或 CI 环境中使用。

评测结果显示，金融类查询已接近解决。Exa 得分 0.910，Keenable 为 0.872，Perplexity 为 0.871，Google 为 0.847，「终极天花板」为 0.965。

消息源注明为 MarkTechPost。