OpenAI 发文介绍改进 ChatGPT 在低资源编程语言上的表现,并给出软件工程、SQLite 与 COBOL 迁移三类新评测
主流语言之外的代码能力开始有专门的评测,老系统迁移是最直接的落地场景。
// 要点
- OpenAI 发布文章,介绍如何改进 ChatGPT 在低资源编程语言上的表现。
- 文章给出三类新评测:软件工程、SQLite 与 COBOL 迁移。
开发者视角对接老系统的团队可以关注:COBOL 迁移进了官方评测,说明模型厂商开始把它当正经场景。我的建议是别等榜单,拿一段自己的存量代码做「翻译 + 跑原有测试」的小实验,测试通过率比任何评测分都说明问题。