斯坦福研究发现LLM相关既有结论44%已过期 衰减平均15.7个月

斯坦福研究人员Owen Queen和James Zou测试了50个关于LLM的既有结论，发现44%已过期，平均寿命仅15.7个月。推理相关结论衰减最快，而偏好和倾向性结论更持久，例如LLM的自我偏好和对用户的迎合行为仍有持续表现。研究强调LLM的经验性发现应作为特定模型在特定时间点的观察，而非普遍真理。