从图中可以看出,相较于底座模型DeepSeek-Coder-33b,CodeFuse-DeepSeek-33b在所有维度上均有正向提升;相较于我们此前开源的CodeFuse-CodeLlama-34b,CodeFuse-DeepSeek-33b在绝大多数维度上表现更优;相较于通用模型DeepSeek-67b-Chat,CodeFuse-DeepSeek-33b在语言能力、代码能力和理解能力上整体表现更优,在推理能力...
codefuse deepseek coder 33b 编程能力测试 大题 测试了几十道题,基本上都是一次性通过,真的好强。。。 源题库链接: https://blog.csdn.net/qq_41320433/article/details/104453874 本人部署环境:wsl2+vllm+手搓ui cuda 12.2 vllm 2.7 连续问答测试: 。 。 反向输出一个链表。。 使用python写个程序实现他...
模型效果评估 CodeFuse-DeepSeek-33b模型在代码能力方面表现卓越，在HumanEval和MBPP测试集上的pass@1指标值分别为78.65%和71%，平均达到74.83%。在多语言代码能力评测集HumanEval-X上，该模型的平均pass@1指标值为67.07%，在多种语言上的表现均超过了先前的模型。此外，CodeFuse模型还在NLP通用能力方面展现了...
使用多任务高效微调框架MFTCoder,以DeepSeek-Coder-33b模型为底座,微调获得的CodeFuse-DeepSeek-33b模型在Big Code Models Leaderboard代码大模型榜单上以43.58% WinRate成为新晋榜首,同时模型在NLP任务上也取得了很好的表现。本文我们将介绍该模型的得来和使用,包括训练数据、训练超参设置、模型评测效果以及如何获取该...
近期CodeFuse新开源模型在Big Code Models Leaderboard代码大模型榜单上荣登榜首,成为代码大模型领域的新焦点。这一成就得益于多任务高效微调框架MFTCoder的强大支持,以及以DeepSeek-Coder-33b模型为基础进行微调的精细策略。 Huggingface模型下载:https://huggingface.co/codefuse-ai/ 训练数据与超参设置 CodeFuse模型的训...
作者: 手动测试了幻方的一些code llm (不局限于数据结构算法,复杂df数据操作,简单ml) CodeFuse-DeepSeek-33B-4bits(效果相对较差,而且生成速度慢) deepseek-coder-6.7b-instruct (半数case能够达到gpt3+的水平)
使用多任务高效微调框架MFTCoder,以DeepSeek-Coder-33b模型为底座,微调获得的CodeFuse-DeepSeek-33b模型在Big Code Models Leaderboard代码大模型榜单上以43.58% WinRate成为新晋榜首,同时模型在NLP任务上也取得了很好的表现。本文我们将介绍该模型的得来和使用,包括训练数据、训练超参设置、模型评测效果以及如何获取该模型...
* [x] CodeFuse-DeepSeek: [33B](https://huggingface.co/codefuse-ai/CodeFuse-DeepSeek-33B) * Baichuan (`BaichuanForCausalLM`) * [x] [Chat-7B](https://huggingface.co/baichuan-inc/Baichuan2-7B-Chat), [Chat-13B](https://huggingface.co/baichuan-inc/Baichuan2-13B-Chat) @@ -150,6 +...
🔥🔥 [2024/01/30] The modelCodeFuse-DeepSeek-33Bfine-tuned with MFTCoder ranks first in HuggingFaceBig Code Models LeaderBoard 🔥🔥 [2024/01/17] We released MFTCoder v0.3.0, mainly for MFTCoder-accelerate. It now supports new models like Mixtral(MoE), DeepSeek-coder, chatglm3. ...
🔥🔥 [2024/01/30] The modelCodeFuse-DeepSeek-33Bfine-tuned with MFTCoder ranks first in HuggingFaceBig Code Models LeaderBoard 🔥🔥 [2024/01/17] We released MFTCoder v0.3.0, mainly for MFTCoder-accelerate. It now supports new models like Mixtral(MoE), DeepSeek-coder, chatglm3. ...