拥有7亿和34亿个参数,在MATH基准测试中表现卓越,超越了所有已知的开源基础模型。 在与Google Research开发的专门用于数学的封闭模型相比,参数量只有Minerva 62B一半的条件下,Llemma 34B获得了几乎相同的性能。 Llemma在等参数基础上超越了Minerva的问题解决性能,通过应用计算工具和进行形式定理证明,为数学问题的解决提供...
在Yi开源模型的全球首发日，李开复也宣布，在完成Yi-34B预训练的同时，已经旋即启动下一个千亿参数模型的训练。“零一万物的数据处理管线、算法研究、实验平台、GPU资源和AI Infra都已经准备好，我们的动作会越来越快”。3、打造更多ToC Super App，培育新型“AI-first”创新生态 零一万物认为，34B的模型尺寸在开源社...
11月6日，李开复博士带队创办的AI2.0公司零一万物正式开源发布首款预训练大模型 Yi-34B，模型开放商用申请，已在阿里云魔搭社区ModelScope首发。魔搭第一时间推出了模型部署相关教程，供开发者参考并快速上手。零一万物此次开源的Yi系列模型包含34B和6B两个版本。据 Hugging Face英文开源社区平台和C-Eval中文评测的最...
近日，南方科技大学统计与数据科学系讲席教授、大数据创新中心荆炳义课题组和粤港澳大湾区数字经济研究院（IDEA）认知计算与自然语言中心（CCNL）联合发布开源34B通用Chat模型：SUS-Chat-34B，在由美国Hugging Face社区支持的、致力于追踪、排名和评估大语言模型性能的开放大语言模型排行榜（Open LLM Leaderboard）中占据榜...
日前,智源团队发布了中英双语基础模型 Aquila2-34B以及中英双语对话模型AquilaChat2-34B,在各种中英双语主/客观综合评测中全面领先现有的全球开源模型(包括LLama-70B等)。其强大的推理(Reasoning)能力在多项推理评测中超越LLama2-70B、GPT3.5等模型,仅次于GPT4。
在MMLU 英文知识水平评测集,C-Eval、CMMLU 中文综合考试评测集,以及 GSM8K、BBH 两个常用的评估大模型数学及推理能力的评测集中,Yi-34B-Chat 在开源模型中取得多项优异成绩(评测结果均采用 zero-shot 的方式,结果会受到 prompt 设计的影响,官方使用了相同的 prompt 和生成策略来评测表中所有模型以获得一个较为公...
南方科技大学开源的SUS-Chat-34B模型在多轮对话领域取得了显著成果,为自然语言处理技术的发展注入了新的活力。作为非专业读者,我们可以通过了解这一模型的技术特点、应用场景及未来发展前景,更好地认识多轮对话技术的潜力和价值。随着技术的不断进步和应用场景的拓展,我们有理由相信,多轮对话技术将在未来为我们的生活带...
其中MAmmoTH-7B模型在MATH(竞赛级数据集)上的准确率达到了35%,超过了最好的开源7B模型(WizardMath)25%,MAmmoTH-34B模型在MATH上的准确率达到了46%,甚至超过了GPT-4的CoT结果。 数学推理领域新王:MAmmoTH 在数学推理任务上,开源和闭源的大型语言模型(LLM)之间存在巨大的性能差距,目前基准数据集上的sota仍然是GPT-...
零一万物发布了Yi-34B-Chat微调模型，并提供4bit/8bit量化版，在评测中取得优异成绩，可在消费级显卡上使用，已开源并可免费商用。【AiBase提要:】🚀 模型开源与微调发布: 零一万物发布Yi-34B-Chat微调模型，同时提供4bit/8bit量化版，在评测中表现优异，已开源并可免费商用。⚙️ 量化版适用性:4bit量化版...
11月6日,由李开复带队创办的AI 2.0公司零一万物,正式开源发布首款预训练大模型 Yi-34B。 据悉,零一万物此次开源发布的Yi系列模型,包含34B和6B两个版本。对比参数量和性能,Yi-34B相当于只用了不及LLaMA2-70B一半、Falcon-180B五分之一的参数量;对比大模型标杆GPT-4,在CMMLU、E-Eval、Gaokao 三个主要的中文指标...