跳到正文

#评测/基准

今日 0 条
10月14日周三
  1. 钛媒体30

    “求索”4.0上线:国内首个AI全产业链评测基准发布,DeepSeek据称将完成1000亿元融资

    “求索”4.0版于10月13日正式发布,成为国内首个面向算力、模型算法、智能系统与产品、行业应用、安全治理等人工智能全产业链的评测基准,体系含四大板块、16项测评工具,相关轻量版代码工具对外开源。多位参与交易人士称,DeepSeek将在近期完成第二轮融资,金额从此前计划的500亿元增至约1000亿元,投前估值仍约5000亿元。

10月13日周二
10月12日周一
10月10日周六
  1. 雷峰网32

    零跑第二品牌要做"iPhone式革命",朱江明称其为移动空间新物种

    零跑将于明年第四季度推出第二品牌,朱江明称其要像iPhone替代功能手机一样做革命性变化,座舱得房率超过100%、舱内纵向长度约4400毫米。该品牌将搭载四叶草5.0中央集成架构,线束压到500米以内。零跑同时宣布技术外供已成第二增长曲线,整车级技术赋能一汽和Stellantis集团。

10月9日周五
10月8日周四
  1. 钛媒体38

    谁在给大模型出题、卖题、判卷?聊聊AI数据行业的野蛮生长

    Scale AI后训练与评测研究者何允中、Agents' Last Exam项目研究者孙一铀拆解AI数据行业:数据公司交付物正从人工标注、专家rubric评分细则转向含任务、工具与验证机制的强化学习环境。ALE覆盖55个非体力类职业,何允中称rubric数据需求已趋饱和,孙一铀则认为专家主观判断类rubric仍远远不够。

10月7日周三
  1. 钛媒体46

    OpenRouter 榜单分析:美版硅基流动的流水单,三张榜与正在贬值的信用

    OpenRouter 是私人 API 聚合商,靠充值手续费盈利,2026 年 8 月被 Stripe 以超 70 亿美元收购。其周榜只是滚动 7 天窗口,同一模型隔两天数字可差 5.1 万亿 Token,且美国用户占 47.17%、中文不足 5%,中国信通院许珊称其调用量仅占全球约 2%。中国模型在该榜连续二十二周领先,但 9 月当周冠军由免费匿名模型太空兔以 33.5 万亿 Token 拿下。

  2. Simon Willison40

    Mistral Large 4 生成 SVG 实测

    Simon Willison 用 llm 命令行分别调用 claude-opus-5.5、gpt-6.1-sol、gemini-3.8-flash 和 mistral/mistral-large-4,让它们各自生成一张"穿渔网袜在火星上乱穿马路的犰狳"SVG 图片。这一测试源于 wren6991 对基准测试已饱和的调侃。

10月6日周二
10月5日周一
10月4日周日
  1. Hugging Face Blog71

    Microsoft 与 Hugging Face 发布 ThinkingBox:按数据库终态评测 AI 智能体

    Microsoft Copilot Studio 团队联合 Hugging Face 发布 ThinkingBox,它让智能体在隔离的 MCP 工具会话中运行,按终端数据库状态和副作用评分,而非最终回复,每个任务重复 20 次。

    推荐理由:通过 507 个有状态业务工作流的 20 次重复运行,揭示模型单次成功率与稳定完成率之间的差距。

10月3日周六
  1. The Verge · AI55

    OpenAI 的 Dot 智能体实测:企业软件也能帮你订晚餐

    OpenAI 本周发布智能体平台 Dots,面向最高档订阅用户开放,作者用每月 100 美元的 Pro 账户进行了实测。Dot 可访问 Blender、GIMP 等应用,也能通过桌面版 ChatGPT 访问本机,但作者在预约安装、宜家账户查询等任务中多次卡在安全验证,需要人工接管。作者认为它在接入自己电脑后表现更好,完成了视频合并和网站更新,更像是面向普通人的 Codex。

10月2日周五
9月30日周三
  1. 雷峰网44

    实测 GPT‑6 Astra、Claude Fable 5.1 与 GPT‑5.6 Sol 控制同一台云台机器人,谁真正把活干完了?

    同一台两轴云台、同一句"满行程转一遍",GPT‑5.6 Sol、GPT‑6 Astra Pro 和 Claude Fable 5.1 都让机器转了起来,但对"完成"的理解完全不同:Sol 走完四个极限角,Astra 用 7 步十字动作配合连续三帧误差小于 3° 才标记 verified,Fable 5.1 做了 12 步并留下可复用脚本,却反馈可疑时仍打印扫描完成。