Simon Willison · 博客

引用 Armin Ronacher

Quoting Armin Ronacher

二〇二六年五月二十四日 · 英文原文

Armin Ronacher 批评提交给 Pi 的 issue 中充斥着由 LLM 生成的“垃圾”(slop)内容。这些 issue 并非出自用户口吻,而是将实际问题投入“垃圾生成器”改写后变得混乱,因提示词(prompt)质量差导致结论不准确但自信,包含对根本原因的猜测、虚假最小复现步骤及错误代码类比。Ronacher 呼吁 issue 报告应精简为人类实际观察到的内容:运行命令、期望结果、实际结果及确切错误或日志。

目前最令人沮丧的失败模式是,人们提交的 issue 并非出自他们自己的口吻。这些 issue 中包含了某个地方观察到的实际问题,但被扔进了一个"垃圾生成器"(clanker)里,经过改写后变得一团糟。通常,由于提示词(prompt)写得极差,得出的结论往往不准确,却总是充满自信。结果就是:对根本原因的完全猜测、虚假的最小复现步骤、建议的实现策略、与邻近但常常错误的代码的类比,以及一长串可能相关也可能无关的错误类别。[...] 所以,至少就我个人而言,我越来越希望 issue 报告能精简到人类实际观察到的东西:我运行了这个命令。我期望发生这个。实际却发生了这个。这里是确切的错误或日志。— Armin Ronacher,针对提交给 Pi 的"垃圾"(slop)issue

标签:ai , github-issues , llms , ai-ethics , open-source , coding-agents , generative-ai , armin-ronacher , pi , slop

译自 Simon Willison · 博客 · 录于 二〇二六年五月二十四日