FlagPerf
开源AI芯片性能基准测试平台
0
- 构建多维度评测指标体系，包含性能指标、资源使用指标及生态适配能力指标。
- 支持多样例场景及任务，覆盖计算机视觉、自然语言处理等领域的30余个经典模型。
- 支持多训练框架及推理引擎，如PyTorch、TensorFlow，并与PaddlePaddle、MindSpore等国产框架合作。
- 支持多测试环境，综合考察单卡、单机、多机性能。
- 严格审核参评代码，确保测试过程公正、结果公平。
- 开源所有测试代码，确保测试过程、数据可复现。
产品详情
FlagPerf是由智源研究院联合AI硬件厂商共建的一体化AI硬件评测引擎，旨在建立以产业实践为导向的指标体系，评测AI硬件在软件栈组合（模型+框架+编译器）下的实际能力。该平台支持多维度评测指标体系，覆盖大模型训练推理场景，并支持多训练框架及推理引擎，连接AI硬件与软件生态。
