【书生浦语第二期实战营学习笔记&作业(七)】

  • 开发
  • 35

课程文档：https://github.com/InternLM/Tutorial/blob/camp2/opencompass/readme.md
课程作业：https://github.com/InternLM/Tutorial/blob/camp2/opencompass/homework.md

OpenCompass 大模型评测实战

1. 大模型的评测

1.1 大模型评测如何促进发展

在这里插入图片描述

1.2 大模型评测中的难点

在这里插入图片描述

2. OpenCompass介绍

2.1 OpenCompass发展历程

在这里插入图片描述

2.2 OpenCompass广泛应用助力

在这里插入图片描述

2.3 OpenCompass评测大模型方式和优点特性

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

2.4 OpenCompass模型排行

在这里插入图片描述

作业

基础作业

  • 使用 OpenCompass 评测 internlm2-chat-1_8b 模型在 C-Eval 数据集上的性能

查看支持的数据集和模型
在这里插入图片描述
评测结果：
在这里插入图片描述

进阶作业

  • 将自定义数据集提交至OpenCompass官网
阅读全部

相关推荐

最近更新

  3. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-04-27 21:36:03       94 阅读

  4. Could not load dynamic library ‘cudart64_100.dll‘

    2024-04-27 21:36:03       100 阅读

  9. 在Django里面运行非项目文件

    2024-04-27 21:36:03       82 阅读

  19. Python语言-面向对象

    2024-04-27 21:36:03       91 阅读

  20. 如何分清楚常见的 Git 分支管理策略Git Flow、GitHub Flow 和 GitLab Flow

    2024-04-27 21:36:03       85 阅读

热门阅读

  1. OpenInventor/Coin3D 学习指南

    2024-04-27 21:36:03       31 阅读

  8. go自编自导自写一片协成池

    2024-04-27 21:36:03       29 阅读

  10. Day39代码随想录动态规划part02：62.不同路径、63. 不同路径 II

    2024-04-27 21:36:03       36 阅读

  12. undo log和redo log区分

    2024-04-27 21:36:03       34 阅读

  13. LeetCode-101-对称二叉树

    2024-04-27 21:36:03       25 阅读

  16. Android 14 transtion 动画流程

    2024-04-27 21:36:03       30 阅读

  18. Redis中transactions命令详解

    2024-04-27 21:36:03       26 阅读

  19. 霍兰德高考专业倾向测试：发展与应用，为梦想插上翅膀

    2024-04-27 21:36:03       38 阅读

  20. QT C++ QCustomPlot 简单使用

    2024-04-27 21:36:03       29 阅读

  23. 【VUE】解决 Element UI 中 el-tab 切换时 ECharts 渲染宽度问题

    2024-04-27 21:36:03       32 阅读

  29. 缩放图片时，按照比例缩放图片，自适应目标分辨率

    2024-04-27 21:36:03       35 阅读