TwKit

推文

@ScarletKc · 2026-10-16 22:42

看到有人说 AI 最不懂的编程语言是 Java,查了一下 AA-Omniscience 的数据,还真是。 AA-Omniscience 是 Artificial Analysis 测模型知识和幻觉的 benchmark,答对加分,答错扣分,说不知道不扣分。8 月那版按编程语言拆开的结果里,14 种语言 Java 平均分最低,只有 20 出头,最高的 C 有 70 左右。Claude Fable 5 别的语言大多在 80 以上,到 Java 只剩 50 多分。 看题目就好理解了。有人数过公开的 Java 题,10 道里有 5 道是问某个 Java 版本的规范里某样东西有几种,比如 Java SE 22 里 lambda 表达式能合法出现在几种上下文里。这种题写了很多年 Java 的人也得去翻语言规范。 所以我感觉这个分数测的更多是 Java 规范冷知识,跟写 Java 代码的能力关系不大。

曝光 749 · 评论 4 · 点赞 5 · 书签 2 · 曝光/时 1265.4072122561604

TwKit
正在载入