昆仑万维：天工通用大模型推理才能逾越GPT-35和LLaMA2

来源：ayx爱游戏手机登录    发布时间：2024-01-01 03:13:07

  自研的通用基座大模型天工大模型以80%的正确率锋芒毕露，大幅抢先GPT-3.5（57.1%）和LLaMA2-70B（56.8%），“标志着天工大模型的推理才能到达全球抢先，挨近GPT-4”。

  音讯说到，天工大模型不仅在推理性能上有着强壮的竞争力，在MMLU、C-EVAL、HumanEval等三项数据集测验中也相同表现出色。在MMLU数据集测验中，天工大模型以65%准确率逾越了LLaMA-65B的63.4%；在C-EVAL数据集测验中，天工大模型以65%准确率逾越了GPT3.5的54.4%。在HumanEval数据集测验中，天工大模型以37.2%的准确率逾越了PaLM-540B（26.2%）、LLaMA-65B（23.7%）、LLaMa2 -70B（30.5%）。