evalscope

evalscope工具使用介绍:

url: https://docs.google.com/document/d/1l0rdb5gkIdp9PfagfFfq41XEfBYOJ5tS/edit?usp=sharing&ouid=113541524035810444202&rtpof=true&sd=true
title: "evalscope.docx"
description: "evalscope evalscope介绍  EvalScope是魔搭社区官方推出的模型评测与性能基准测试框架，内置多个常用测试基准和评测指标，支持多种类型的模型评测 所有的功能主要是三个子命令进行操作:perf, eval,app，分别对应着性能评测，精度评测和可视化评测 Perf测试说明 perf命令选项可以通过evalscope perf --help或者直接获取源码找到evalscope/perf/arguments.py文件查看 perf评测支持random数据集，speed_benchmark数据集或者是自定义数据集 通过观察可以发现perf评测通过--dataset来指定..."
host: docs.google.com
image: https://lh7-us.googleusercontent.com/docs/AHkbwyJW80J1BH984MPqcy6PulS4ocF45iBGz-P3pmKvaglCvozxYT3sQvNwLDCJ2deY0Z3Mg4fJPQL_v4Fx2IE1YvZZ9_BPH_jyhE9E=w1200-h630-p