程序员 AI 助手新竞品,蚂蚁集团宣布开源代码大模型 CodeFuse

[焦点] 时间:2024-04-27 00:01:45 来源:蓝影头条 作者:时尚 点击:23次
9 月 8 日消息,程序目前市面上已经有不少能够辅助写代码的手新 AI 产品了,在今日的竞品集团外滩大会分论坛上,蚂蚁集团首次开源了代码大模型 CodeFuse,蚂蚁加入这一市场竞争中。宣布型

据介绍,开源这是代码大模蚂蚁自研的代码生成专属大模型,可以根据开发者的程序输入提供智能建议和实时支持,帮助开发者自动生成代码、手新自动增加注释、竞品集团自动生成测试用例、蚂蚁修复和优化代码等,宣布型以提升研发效率。开源

蚂蚁集团表示:“无论用户是代码大模初学者还是有经验的开发者,CodeFuse 都能够极大地提高编程效率和准确性,程序让人人可编程、可创新成为现实。”

CodeFuse 基于蚂蚁基础大模型研发,在近期代码补全的 HumanEval 评测中,CodeFuse 得分 74.4%,超过 GPT-4(67%)的成绩,也超过了 WizardCoder-34B 73.2% 的得分。本次开源内容包括代码框架、模型等,现已上架相关平台,小伙伴可在 HuggingFace 下载模型。

代码框架部分包括自研的多任务微调(Multi-task fine-tuning,缩写为 MFT)框架。MFT 支持代码生成、代码翻译、测试用例生成、bug 修复等数 10 个任务一起微调。MFT 微调框架支持蚂蚁自研模型,以及多个开源大模型的代码能力微调。同时,框架内含创新的微调数据打包技术,号称可提升微调速度约 8 倍;并使用多重部署优化技术,使推理加速约 2 倍。

模型部分包括 CodeFuse13B-4K、CodeFuse-CodeLlaMa34B-MFT 两个大模型。模型训练过程中,CodeFuse 使用了程序分析校验技术,对高质量代码数据进行筛选,并构建了代码领域专用字典,编码平均长度低 10%+。

蚂蚁集团透露,CodeFuse 早在今年 6 月就开始内测,用以真实开发环境,可以助力开发者低门槛编程,例如用自然语言编写 H5 小游戏、快速开发支付宝小程序等。基于 CodeFuse 的应用场景有开发助手、IDE 插件、数据分析器等,覆盖了目前研发工作的主要需求,在蚂蚁集团内部研发流程中陆续得到验证。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,所有文章均包含本声明。

(责任编辑:知识)

    相关内容
    精彩推荐
    热门点击
    友情链接