FlagPerf
F
Flagperf
简介 :
FlagPerf是由智源研究院联合AI硬件厂商共建的一体化AI硬件评测引擎,旨在建立以产业实践为导向的指标体系,评测AI硬件在软件栈组合(模型+框架+编译器)下的实际能力。该平台支持多维度评测指标体系,覆盖大模型训练推理场景,并支持多训练框架及推理引擎,连接AI硬件与软件生态。
需求人群 :
FlagPerf的目标受众为AI硬件厂商、研究人员和开发者,他们需要一个公正、全面的平台来评估和比较不同AI硬件的性能。该平台提供的多维度评测和开源特性,使其成为AI领域技术评估的重要工具。
总访问量: 474.6M
占比最多地区: US(19.34%)
本站浏览量 : 64.3K
使用场景
NVIDIA使用FlagPerf测试其A100芯片的性能。
百度PaddlePaddle团队利用FlagPerf集成Llama模型进行性能评估。
华为昇思MindSpore团队通过FlagPerf测试框架性能。
产品特色
构建多维度评测指标体系,包含性能指标、资源使用指标及生态适配能力指标。
支持多样例场景及任务,覆盖计算机视觉、自然语言处理等领域的30余个经典模型。
支持多训练框架及推理引擎,如PyTorch、TensorFlow,并与PaddlePaddle、MindSpore等国产框架合作。
支持多测试环境,综合考察单卡、单机、多机性能。
严格审核参评代码,确保测试过程公正、结果公平。
开源所有测试代码,确保测试过程、数据可复现。
使用教程
1. 安装docker和python环境。
2. 确保硬件驱动、网络、硬件虚拟化等服务器基础配置齐全。
3. 下载FlagPerf项目代码并部署到服务器。
4. 修改机器配置文件,包括硬件配置和测试环境设置。
5. 启动测试,根据需要选择基础规格评测、算子评测、训练评测或推理评测。
6. 查看测试结果和日志,分析AI硬件的性能表现。
AIbase
智启未来,您的人工智能解决方案智库
© 2025AIbase