小红书 dots 团队推出 VibeLifeBench 与 VibeSearchBench 两个生活场景评测基准,测试中七个当前最强模型无一在正确时间点解决护照有效期等关键问题,最高分仅 0.325(Opus 5)。
论文
·公众号:小红书技术(dots.llm)
小红书 dots 团队发布 VibeLifeBench 与 VibeSearchBench:七个最强模型无一及格
— 把最强模型丢进真实生活一个月,没有一个及格
— 把最强模型丢进真实生活一个月,没有一个及格