随着人工智能技术的飞速发展,大模型(Large Language Model,LLM)成为了AI领域的热点。大模型在自然语言处理、计算机视觉、语音识别等多个领域展现出惊人的能力,也成为了各大科技公司竞争的焦点。为了衡量大模型的实力,各类专业测评榜应运而生,本文将揭秘近期大模型专业测评榜的排名情况。
一、MedBench中文医疗大模型评测
MedBench是由上海AI实验室和上海市数字医学创新中心推出的权威评测平台,专注于中文医疗大模型的评测。近期,MedBench发布了新一轮自测榜单,其中微医控股的微医医疗大模型以总分94.7分位列第一,蚂蚁AI健康管家的蚂蚁医疗大模型和杭州智诊科技的WiseDiag分列第二、三名。
微医医疗大模型在医学知识问答、医学语言生成、复杂医学推理、医学语言理解和医疗安全和伦理等评测维度均有突出表现。这一成绩表明,微医医疗大模型在AI医疗领域具有较强的综合能力。
二、CMB医疗大模型评测
CMB(Comprehensive Medical Benchmark in Chinese)是国内权威的医疗大模型评测平台,近期,微医医疗大模型也曾多次登顶CMB榜单。CMB评测涵盖了医学影像、医学文本、医学知识图谱等多个方面,旨在全面评估医疗大模型在医疗领域的应用能力。
微医医疗大模型在CMB评测中的优异表现,再次证明了其在AI医疗领域的领先地位。
三、MMMU多模态大模型评测
MMMU(Multi-modal Model Benchmark)是由IN.AI Research等多家机构联合构建的多模态人工智能模型基准评测集,专注于考量人工智能在解决大学层次多学科问题时的多模态理解与推理能力。
近日,MMMU更新了榜单,云知声山海多模态大模型UniGPT-mMed以通用能力、医疗专业能力双双排名第一的优异成绩登顶榜首。UniGPT-mMed是云知声基于山海大模型底座构建的多模态大模型,具备强大的多模态处理能力。
四、RockAI Yan架构大模型评测
RockAI自主研发的Yan架构大模型,是国内首个非Transformer架构、非Attention机制的大模型。近期,RockAI荣膺“最佳大模型TOP20”称号,充分展示了Yan架构大模型在多模态处理和多设备部署方面的强大实力。
Yan架构大模型依托MCSD和类脑激活机制两大基础原理创新,有效降低对算力的依赖,成功适配机器人、无人机、手机、PC等终端设备,具备图像、语音、文本等多模态信息高效处理能力。
五、总结
从以上评测结果可以看出,各大模型在各自领域均表现出色。微医医疗大模型在AI医疗领域具有较高的综合能力;UniGPT-mMed在多模态处理方面表现出色;Yan架构大模型在多模态处理和多设备部署方面具有强大实力。
未来,随着AI技术的不断发展,大模型将在更多领域发挥重要作用。各大公司将继续加大研发投入,推动大模型技术的创新与应用,为人类社会带来更多便利。
