当前位置： 首页 > news >正文

学习MLPERF

news 文章来源：https://blog.csdn.net/zhouhuaooo/article/details/133182679 2025/1/12 19:37:51

测试基准与标准 | BenchCouncil

其中涉及AI的有如下：

AI

(1) AIBench Training

AIBench 培训采用平衡的 AI 基准测试方法，考虑全面性、代表性、可负担性和可移植性。该方法广泛调查人工智能任务和模型，并在最大程度上涵盖了算法级、系统级和微架构级因素空间。从算法层面考虑常用的构建块、模型层、损失函数、优化器、FLOP、不同尺度参数大小;从系统层面考虑收敛速率和热函数。从微架构层面，考虑了不同的计算和内存访问模式。AIBench 培训涵盖 19 项具有代表性的 AI 任务，采用最先进的模型来保证多样性和代表性。此外，还提供了两个AIBench培训子集：RPR和WC子集，以实现可负担性。

项目主页: AIBench Training | Balanced Industry-Standard AI Training Benchmarking, BenchCouncil.

(2) AIBench Inference

通过深入分析搜索引擎、社交网络、电子商务三大互联网服务的核心场景，AIBench 推理提供了 19 个工作负载，每个工作负载代表一个具有代表性的 AI 任务。

项目主页: AIBench Inference | BenchCouncil.

(3) ScenarioBench

ScenarioBench 不是使用实际应用程序或从头开始实现成熟的应用程序，而是提出基本任务的排列作为场景基准。目标是确定实际方案的关键路径和主要模块，因为它们消耗最多的系统资源，并且是系统设计和优化的核心焦点。每个场景基准都提炼了行业规模应用程序的关键属性，并减少了后者在巨大的代码大小、极端的部署规模和复杂的执行路径方面的复杂性的副作用。

项目主页: ScenarioBench | BenchCouncil

(4) AI Matrix

AI Matrix是对阿里巴巴内部使用的深度学习应用程序进行全面调查的结果，旨在涵盖占阿里巴巴数据中心GPU使用率90%以上的典型DL应用程序。收集的基准主要分为三类：计算机视觉、推荐和语言处理，它们构成了阿里巴巴中大多数的深度学习应用程序。

项目主页: home, GitHub - alibaba/ai-matrix: To make it easy to benchmark AI accelerators

(5) Dcbench

Dcbench旨在提供一种标准化的方法来评估以数据为中心的AI开发的工具和系统。

项目主页: GitHub - data-centric-ai/dcbench: A benchmark of data-centric tasks from across the machine learning lifecycle.

(6) DAWNBench

DAWNBench 是一项基准测试和竞赛，专注于端到端训练时间，以达到最先进的精度水平，以及具有该精度的推理时间。

项目主页: Stanford DAWN Deep Learning Benchmark (DAWNBench) ·

(7) Fathom

Fathom 是用于研究的八个原型深度学习工作负载的集合。这些模型中的每一个都来自深度学习社区的开创性工作，从Krizhevsky等人熟悉的深度卷积神经网络，到Facebook人工智能研究小组的更奇特的记忆网络。

项目主页: GitHub - rdadolf/fathom: Reference workloads for modern deep learning methods.

(8) MLPerf Training Benchmark

MLPerf 训练基准测试衡量系统将模型训练到目标质量指标的速度。它包含 8 个工作负载，每个工作负载由数据集和质量目标定义。

项目主页: v2.1 Results | MLCommons

(9) MLPerf Inference Benchmark

MLPerf 推理基准测试提供了评估 ML 推理系统的基准测试方法，并规定了一组规则和最佳实践，以确保具有截然不同架构的系统之间的可比性。

项目主页: v2.1 Results | MLCommons

(10) TPCx-AI

TPCx-AI是由TPC开发的端到端AI基准标准。该基准测试衡量端到端机器学习或数据科学平台的性能。基准开发侧重于模拟与当前生产数据中心和云环境相关的代表性行业 AI 解决方案的行为。

项目主页: TPCx-AI Homepage

而其中MLPerf Training Benchmark的相关的如下

v3.1 Results | MLCommons 信息如下：

后面有详细的detail信息

https://github.com/mlcommons/inference_results_v3.1/blob/main/closed/Dell/code/resnet50/tensorrt/README.md

可以根据github上的信息进行相应的测试

Resnet50架构与MLPerf竞赛 - 知乎   里面详细的如何操作的步骤

测试操作步骤   这里有netapp的测试信息 包括物理架构信息

相关文章：

学习MLPERF

测试基准与标准 | BenchCouncil 其中涉及AI的有如下： AI (1) AIBench Training AIBench 培训采用平衡的 AI 基准测试方法，考虑全面性、代表性、可负担性和可移植性。该方法广泛调查人工智能任务和模型，并在最大程度上涵盖了算法级、系统级…...

编程日记 2023/9/22 23:33:15

openEuler-20.03 LTS管理用户和用户组

openEuler-20.03 LTS 管理用户和用户组的官方文档，在这里。补充一下关于如何在 openeuler 上创建启用 sudo 新用户（无需修改服务器 /etc/sudoers 文件）的一个小知识点。 创建启用 sudo 新用户 该 sudo 命令提供了一种向普通用户授予管理员特权…...

编程日记 2023/9/22 23:31:13

什么是读写锁

读写锁 读写锁有3 种状态：读模式下的加锁状态、写模式下的加锁状态和不加锁状态，一次只有一个线程可以占有写模式的读写锁，但是可以有多个线程同时占有读模式的读写锁。因此可知，读写锁比互斥锁具有更高的并行性！ 读…...

编程日记 2023/9/22 23:27:08

低代码助力企业数字化转型

在当今这个数字化快速发展的时代，企业面临的竞争越来越激烈，数字化转型已成为企业发展的必经之路。低代码平台作为一种新型的开发工具，正在逐渐成为企业数字化转型的重要助力。本文将从数字化转型背景、低代码平台介绍、低代码平台的应用、低…...

编程日记 2023/9/22 23:26:06

Linux 作业

一. 题目 二.作业内容 第一题： 因老师要求上传安装后远程连接XShell截图，如下： 制作yum缓存：[rootRHEL8 ~]# yum makecache 安装gcc：[rootRHEL8 ~]# yum install gcc -y 制作快照：快照，初始 s…...

编程日记 2023/9/22 23:24:04

【数据分享】2005-2022年全国民航机场客货吞吐量和起降架次数据

机场是一个城市对外联系的重要渠道，机场的旅客吞吐量和货物吞吐量是体现一个城市对外联系程度的重要指标。 本次我们给大家分享的是2005-2022年我国民航机场的旅客吞吐量、货邮吞吐量、起降架次数据。数据格式为Excel和Shp两种格式。数据坐标为WGS1984。原始数据来…...

编程日记 2023/9/22 23:23:04

清华博士面试的准备（已通过）

内修（30%） 不管如何 任何人都不能影响你的心态。因为冷静、理性，才能处理好95%以上的问题。剩下的5%我可以不拥有。不能既要、又要、还要。尊重客观规律。放下我执。 价值导向、解决问题为导向。 允许一切事情的发生，是我们最大的…...

编程日记 2023/9/22 23:22:03

requests爬虫详解

Requests 安装 pip install requests 示例 from fake_useragent import UserAgent import requestsdef cra1_1(): url http://xx/front/website/findAllTypes headers {User-Agent: UserAgent().chrome} resp requests.get(url, headersheaders) result resp.json()i…...

编程日记 2023/9/22 23:20:01

oracle的正则表达式(regular expression)

当前，正则表达式已经在很多软件中得到广泛的应用，包括Linux, Unix，HP等操作系统，PHP，C#，Java等开发环境，ORACLE则在10G中推出了自己的正则表达式。 Oracle 10g正则表达式提高了SQL灵活性&#…...

编程日记 2023/9/22 23:19:00

sh脚本 单独可以执行，放到crontab中不执行（定时清空redis）

1.原因： 执行环境的不同 2.解决办法： 添加环境变量 PATH/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:~/bin export PATH 3. 完整示例： #!/bin/shPATH/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:…...

编程日记 2023/9/22 23:14:56

mysql 半同步复制模式使用详解

目录 一、前言 二、mysql主从架构简介 2.1 mysql主从复制架构概述 2.2 为什么使用主从架构 2.2.1 提高数据可用性 2.2.2 提高数据可靠性 2.2.3 提升数据读写性能 2.3 主从架构原理 2.4 主从架构扩展 2.4.1 双机热备（AB复制） 2.4.2 级联复制 2…...

编程日记 2023/9/22 23:13:55

以太坊代币标准ERC20、ERC721

两个概念 ERC(Ethereum Request for Comment) 以太坊意见征集稿EIP(Ethereum Improvement Proposals)以太坊改进提案 ERC和EIP用于使得以太坊更加完善；在ERC中提出了很多标准，用的最多的标准就是它的Token标准; 有哪些标准详细见https://eips.ethereum…...

编程日记 2023/9/22 23:11:54

编写基于冒泡排序算法的qsort函数

目录 1.简单认识冒泡排序 2.进入正文分析如何实现函数 3.1比较两个相邻元素的大小 3.2比较两个相邻元素大小后要换函数 4.my_qsort函数： 5.总结： 1.简单认识冒泡排序 冒泡排序的步骤如下： 比较相邻的两个元素，如果第一个元素比…...

编程日记 2023/9/22 23:10:53

有什么推荐使用的企业上网行为管理软件?

在当今信息化社会，企业的上网行为管理越来越重要。企业上网行为软件是一种能够监控和管理企业员工上网行为的工具，它可以帮助企业更好地管理网络资源，提高工作效率，保护企业信息安全，并符合相关的法律法规。本文将深入…...

编程日记 2023/9/22 23:09:52

机器学习第五课--广告点击率预测项目以及特征选择的介绍

这个项目的主要的目的是通过给定的广告信息和用户信息来预测一个广告被点击与否。 如果广告有很大概率被点击就展示广告，如果概率低，就不展示。 因为如果广告没有被点击，对双方（广告主、平台）来讲都没有好处。所以预测…...

编程日记 2023/9/22 23:07:50

细说tcpdump的妙用

原文地址:EMC中文支持论坛https://community.emc.com/go/chinese 介绍 tcpdump命令最初设计用于观察TCP/IP性能问题，它是一个用于截取网络分组，并输出分组内容的工具。tcpdump可以将网络中传送的数据包的报文头完全截获下来提供分析，它支持针…...

编程日记 2023/9/22 23:04:47

【深度学习实验】前馈神经网络（七）：批量加载数据（直接加载数据→定义类封装数据）

目录 一、实验介绍 二、实验环境 1. 配置虚拟环境 2. 库版本介绍 三、实验内容 0. 导入必要的工具包 1. 直接加载鸢尾花数据集 a. 加载数据集 b. 数据归一化 c. 洗牌操作 d. 打印数据 2. 定义类封装数据 a. __init__(构造函数：用于初始化数据集对象) b.…...

编程日记 2023/9/22 23:03:46

气体放电模拟装置中1Pa~101kPa范围内的真空度控制技术

摘要：针对微间隙气体放电特性分析中需要对不同真空压力进行精密控制的要求，本文提出了相应的解决方案。解决方案采用了双路调节技术，由真空计、电控针阀和真空压力控制器组成进气和排气控制回路，可实现真空度1Pa~101kPa全量程范围…...

编程日记 2023/9/22 23:02:45

华为OD机试 - 构成正方形的数量 - 数据结构map（Java 2023 B卷 100分）

目录 专栏导读一、题目描述二、输入描述三、输出描述四、Java算法源码五、效果展示1、输入2、输出3、说明 华为OD机试 2023B卷题库疯狂收录中，刷题点这里 专栏导读 本专栏收录于《华为OD机试（JAVA）真题（A卷B卷）》。 …...

编程日记 2023/9/22 23:01:44

sql on条件判断是要注意null值

我是因为用了merge into语法，然后on条件中判断的字段是可配置的，这就导致了，有时候判断条件多的情况下，判断的字段会碰到有null值的情况，如果on两边的字段都是null，null和null对比就会导致结果为false&…...

编程日记 2023/9/22 23:00:43

9.22(一):数组扁平化

ES6的flat方法 const arr[1,2,[33,44,5,[6,7]],3]// es6中的flat方法function arr1() { //数组自带的扁平化方法,flat的参数代表的是需要展开几层， //如果是Infinity的话，就是不管嵌套几层，全部都展开return arr.flat(Infinity) } let resul…...

编程日记 2023/9/22 22:59:42

【vue2第十九章】手动修改ESlint错误 和 配置自动化修改ESlint错误

目标:认识代码规范 代码规范:一套写代码的约定规则。例如:“赋值符号的左右是否需要空格”，"一句结束是否是要加;”等 为什么要使用代码规范？ 在团队开发时，提高代码的可读性。 在创建项目时，我们选择的就是一套完整的代码…...

编程日记 2023/9/22 22:58:41

计算机网络常见面试题

目录 一、谈一谈对OSI七层模型和TCP/IP四层模型的理解？ 答：OSI七层模型主要分为： TCP/IP四层协议： 二、谈谈TCP协议的3次握手过程？ 三、TCP协议为什么要3次握手？2次，4次不行吗？ …...

编程日记 2023/9/22 22:56:39

springboot整合MeiliSearch轻量级搜索引擎

一、Meilisearch与Easy Search点击进入官网了解&#xff0c;本文主要从小微型公司业务出发&#xff0c;选择meilisearch来作为项目的全文搜索引擎&#xff0c;还可以当成来mongodb来使用。 二、starter封装 1、项目结构展示 2、引入依赖包 <dependencies><dependenc…...

编程日记 2023/9/22 22:55:38

禁用鼠标的侧边按键

新买了个鼠标&#xff0c;整体都不错&#xff0c;就是鼠标左侧有两个按键&#xff0c;大拇指经常无意触碰到&#xff0c;造成误操作。 就想着关闭侧边按键功能。以下这批文章帮了大忙&#xff01; 鼠标侧键屏蔽&#xff0c;再也不用担心按到侧键了。_禁用鼠标侧键_挣扎的蓝藻…...

编程日记 2023/9/22 22:54:36

【C语言】数组和指针刷题练习

指针和数组我们已经学习的差不多了&#xff0c;今天就为大家分享一些指针和数组的常见练习题&#xff0c;还包含许多经典面试题哦&#xff01; 一、求数组长度和大小 普通一维数组 int main() {//一维数组int a[] { 1,2,3,4 };printf("%d\n", sizeof(a));//整个数组…...

编程日记 2023/9/22 22:53:36

2023年中国研究生数学建模竞赛D题解题思路

为了更好的帮助大家第一天选题&#xff0c;这里首先为大家带来D题解题思路&#xff0c;分析对应赛题之后做题阶段可能会遇到的各种难点。 稍后会带来D题的详细解析思路&#xff0c;以及相关的其他版本解题思路 成品论文等资料。 赛题难度评估&#xff1a;A、B>C>E、F&g…...

编程日记 2023/9/22 22:52:35

在编译源码的环境下，搭建起Discuz!社区论坛和WordPress博客的LNMP架构

目录 一.编译安装nginx 二.编译安装MySQL 三.编译安装PHP 四.安装论坛 五.安装wordpress博客 六.yum安装LNMP架构&#xff08;简要过程参考&#xff09; 一.编译安装nginx 1&#xff09;关闭防火墙&#xff0c;将安装nginx所需软件包传到/opt目录下 systemctl stop fire…...

编程日记 2023/9/22 22:51:34

腾讯面试题：无网络环境，如何部署Docker镜像？

亲爱的小伙伴们&#xff0c;大家好&#xff01;我是小米&#xff0c;很高兴再次和大家见面。今天&#xff0c;我要和大家聊聊一个特别有趣的话题——腾讯面试题&#xff1a;无网络环境&#xff0c;如何部署Docker镜像&#xff1f;这可是一个技术含量颇高的问题哦&#xff01;废…...

编程日记 2023/9/22 22:50:33

医学影像信息(PACS)系统软件源码

PACS系统是PictureArchivingandCommunicationSystems的缩写&#xff0c;与临床信息系统&#xff08;ClinicalInformationSystem,CIS&#xff09;、放射学信息系统(RadiologyInformationSystem,RIS)、医院信息系统(HospitalInformationSystem,HIS)、实验室信息系统&#xff08;L…...

编程日记 2023/9/22 22:48:31

如何做网站企划案/百度怎么优化关键词排名

由于不同开源软件对 Erlang 版本的选取有所不同&#xff0c;可能会存在需要多 Erlang 版本的情况。目前已知Riak requires Erlang R15B01. Note: dont use Erlang version R15B02 or R15B03, for the moment, as it causes an error with riak-admin status commands.开源组件组…...

编程日记 2025/1/12 18:02:13

专门做旅游攻略的网站/360搜索首页网址是多少

服务器D盘上传的文件过多&#xff0c;空间剩下很少了&#xff0c;于是想把里面部分文件&#xff0c;大概几万个文件转移到E盘&#xff0c;做了这个小工具。先查询出要转移的文件清单&#xff0c;保存在一个记事本中&#xff0c;如下所示&#xff1a; 接着读取文件名&#xff0c…...

编程日记 2025/1/12 17:15:29

wordpress邮件有%3c%3e/关键词有哪些

最近工作中需要监测某个分公司到IDC机房的网络情况&#xff0c;到网络上找了不少软件&#xff0c;发现一款叫smokeping的开源软件还不错&#xff0c;它是rrdtool的作者制作的&#xff0c;在图形显示方面很漂亮&#xff0c;可以用来很好的检测网络状态和稳定性。 下面介绍一下软…...

编程日记 2025/1/12 17:11:27

熊掌号如何做网站/seo技术培训班

我上一篇关于vue的文章和这一篇时间隔了有点久了。最近终于写完了。 因为我一直想写个有点实绩的东西&#xff0c;而不是随便写一个教程一样东西。结合最近在项目中学到的经验和我的一点创意。 首先介绍下这是个什么&#xff01; H5直播平台&#xff01; 不是一个标题&…...

编程日记 2025/1/12 16:54:15

wordpress音乐盒/东莞seo网站排名优化公司

1. 流水线实现多周期指令简图2. MIPS流水线基本流程1. 取指令&#xff1b;2. 读寄存器和译码&#xff1b;3. 执行ALU和地址计算&#xff1b;4. 存储器访问&#xff1b;5. 写结果到寄存器。3. 非流水与流水的对比&#xff1a;非流水的执行时间– 3条指令共需3800&#xff1d;240…...

编程日记 2025/1/12 12:50:53

女生做网站编辑好吗/网站收录有什么用

最近进行性能排查的时候发现一个怪事&#xff1a;用php-memcache&#xff0c;缓存命中率越高CPU反而占用越大。联想起之前用Xcache进行载入速度排除测试时也出现此问题&#xff0c;不禁疑惑了&#xff1a;不是说缓存命中率越高越好么&#xff1f;怎么变成烧CPU了&#xff1f;今…...

编程日记 2025/1/12 11:19:32