路宁-大模型辅助需求代码开发.pdf
2024-09-13
文档编号:175317
文档页数:18
文档大小:6.57MB
下载积分:VIP专享
文档格式:PDF
1、录模型辅助开发态开发真实需求的挑战切换到知识产和消费的思维框架依赖经验知识的编码任务实验 知识分类及提词框架 模型辅助开发的实形态 模型辅助开发态-任务全貌 利模型的模式:模型辅助开发态-主任务相关应现状 搓模型 模型辅助开发态-了解测评背后的任务 任务是JS开发个Web Server 得出结论-效率提升55%较为独的函数级任务 Github Copilot的实验 HumanEval评估数据 模型辅助开发态-了解测评背后的任务 Lite评估集有300个case,18%仅1改动,30%在2以内,20+改动的占7.3%。被解决的问题集中在评估集中的简单任务。项都是纯python的库,如django
2、和pytest。.SWE-Bench 开发真实需求的挑战-看个例 实现步骤类似粗粒度的伪码,包含:改动或函数签名及输输出格式:如何与现有代码集成。复的约束:遵循设计约束,新写套。新能实现的提:提较难的细节。开发步骤提的够细成的效果就够好,但是.最好的模型实验才能得到最好的成效果。录结构+代码件+任务描述作为提词的起点。选个真实需求,做任务的规划。开发真实需求的挑战-分析任务难度 模型能:规划推理、指令遵从、窗度、注意、输出倾向等 切换到知识产和消费的思维框架 依赖经验知识的编码任务 如何遵循设计 是复杂编码任务的重要挑战 依赖经验知识的编码任务-利通过框架完成任务的法描述 代码上下中已蕴藏这些





点击查看更多