术语

术语/缩略语 说明
ACL Ascend Computer Language,提供Device管理、Context管理、Stream管理、内存管理、模型加载与执行、算子加载与执行、媒体数据处理等C++ API库,供用户开发深度神经网络应用。
AIR Ascend Intermediate Representation,类似ONNX,是华为定义的针对机器学习所设计的开放式的文件格式,能更好地适配Ascend AI处理器。
Ascend 华为昇腾系列芯片的系列名称。
Backpropagation 反向传播。
Batch 模型训练的一次迭代(即一次梯度更新)中使用的样本集。
Batch size 模型迭代一次,使用的样本集的大小。
CCE Cube-based Computing Engine,面向硬件架构编程的算子开发工具。
CCE-C Cube-based Computing Engine C,使用CCE开发的C代码。
CheckPoint MindSpore模型训练检查点,保存模型的参数,可以用于保存模型供推理,或者再训练。
CIFAR-10 一个开源的图像数据集,包含10个类别的60000个32x32彩色图像,每个类别6000个图像。有50000张训练图像和10000张测试图像。
CIFAR-100 一个开源的图像数据集,它有100个类别,每个类别包含500张训练图像和100张测试图像。
Clip 梯度裁剪。
Davinci 达芬奇架构,华为自研的新型芯片架构。
Device 设备侧,主要执行MindSpore算子的硬件,包括Ascend、GPU、CPU等。
Device_id 分布式并行中,卡的物理ID。
Dimension Reduction 降维。
Epoch 数据集的一次完整遍历。
EulerOS 欧拉操作系统,华为自研的基于Linux标准内核的操作系统。
FC Layer Fully Conneted Layer,全连接层。整个卷积神经网络中起到分类器的作用。
FE Fusion Engine,负责对接GE和TBE算子,具备算子信息库的加载与管理、融合规则管理等能力。
Fine-tuning 基于面向某任务训练的网络模型,训练面向第二个类似任务的网络模型。
Format 数据格式,如NCHW、NHWC、NC0HWC1等。N: batch size; C: channel; H: height; W:width。
昇腾AI软件栈中,张量数据统一采用NC0HWC1的五维数据格式。其中C0等于AI Core中矩阵计算单元的大小,对于FP16类型为16,对于INT8类型则为32,这部分数据需要连续存储;C1是将C维度按照C0进行拆分后的数目,即C1=C/C0。如果结果不整除,最后一份数据需要补零以对齐C0。
FP16 16位浮点,半精度浮点算术,消耗更小内存。
FP32 32位浮点,单精度浮点算术。
GE Graph Engine,MindSpore计算图执行引擎,主要负责根据前端的计算图完成硬件相关的优化(算子融合、内存复用等等)、device侧任务启动。
GHLO Graph High Level Optimization,计算图高级别优化。GHLO包含硬件无关的优化(如死代码消除等)、自动并行和自动微分等功能。
GLLO Graph Low Level Optimization,计算图低级别优化。GLLO包含硬件相关的优化,以及算子融合、Buffer融合等软硬件结合相关的深度优化。
Graph Mode MindSpore的静态图模式,将神经网络模型编译成一整张图,然后下发执行,性能高。
HCCL Huawei Collective Communication Library,实现了基于Davinci架构芯片的多机多卡通信。
Host 主机侧,主要进行图编译、数据处理等。
ImageNet 根据WordNet层次结构(目前仅名词)组织的图像数据库。
Layout 分布式并行中,数据在卡上的分布情况。
LeNet 一个经典的卷积神经网络架构,由Yann LeCun等人提出。
Loss 损失,预测值与实际值的偏差,深度学习用于判断模型好坏的一个标准。
Loss scale 为了防止梯度下溢而进行的梯度放大。
LSTM Long short-term memory,长短期记忆,对应的网络是一种时间循环神经网络,适合于处理和预测时间序列中间隔和延迟非常长的重要事件。
Manifest 一种数据格式文件,华为ModelArts采用了该格式,详细说明请参见https://support.huaweicloud.com/engineers-modelarts/modelarts_23_0009.html
ME Mind Expression,MindSpore前端,主要完成从用户源码到计算图的编译任务、训练中控制执行及上下文维护(非下沉模式配置下)、动态图(PyNative模式)等。
MindArmour MindSpore安全模块,通过差分隐私、对抗性攻防等技术手段,提升模型的保密性、完整性和可用性,阻止攻击者对模型进行恶意修改或是破解模型的内部构件,窃取模型的参数。
MindData MindSpore数据框架,提供数据加载、增强、数据集管理以及可视化。
MindInsight MindSpore可视化组件,可视化标量、图像、计算图以及模型超参等信息。
MindIR MindSpore IR,一种基于图表示的函数式IR,定义了可扩展的图结构以及算子IR表示,存储了MindSpore基础数据结构。
MindRecord MindSpore定义的一种数据格式,是一个执行读取、写入、搜索和转换MindSpore格式数据集的模块。
MindSpore 华为主导开源的深度学习框架。
MindSpore Lite 一个轻量级的深度神经网络推理引擎,提供了将MindSpore训练出的模型在端侧进行推理的功能。
MNIST database Modified National Institute of Standards and Technology database,一个大型手写数字数据库,通常用于训练各种图像处理系统。
NCCL Nvidia Collective multi-GPU Communication Library的简称,它是一个实现多GPU的collective communication通信库。
ONNX Open Neural Network Exchange,是一种针对机器学习所设计的开放式的文件格式,用于存储训练好的模型。
PyNative Mode MindSpore的动态图模式,将神经网络中的各个算子逐一下发执行,方便用户编写和调试神经网络模型。
Proto ProtoBuffer文件格式。
ResNet-50 Residual Neural Network 50,由微软研究院的Kaiming He等四名华人提出的残差神经网络。
Rank_id 分布式并行中,卡的逻辑ID。
Scalar 标量Tensor,其shape为()。
Schema 数据集结构定义文件,用于定义数据集包含哪些字段以及字段的类型。
Shape 张量在各种维度中包含的元素数,如Tensor[2,3],shape为{2,3},表示是一个2维张量,第一维有2行,第二维有3列,共2*3=6个元素。
Step或Iteration 完成一次前向计算和反向传播。
Summary 是对网络中Tensor取值进行监测的一种算子,在图中是“外围”操作,不影响数据流本身。
TBE Tensor Boost Engine,华为自研的NPU算子开发工具,在TVM( Tensor Virtual Machine )框架基础上扩展,提供了一套Python API来实施开发活动,进行自定义算子开发。
TFRecord Tensorflow定义的数据格式。
Tensor 张量,存储多维数组的数据结构。最常见的是标量、向量或矩阵。
广播 在矩阵数学运算中,是将操作数的shape扩展到与该运算兼容的维。在分布式并行中,是某卡上的参数同步到其他卡上。
计算图下沉 计算图整图下沉到Device上执行,减少Host-Device交互开销。详见on-device执行
循环下沉 在On Device执行的基础上的优化,目的是进一步减少Host侧和Device侧之间的交互次数。详见on-device执行
数据下沉 下沉即数据通过通道直接传送到Device上。详见on-device执行
图模式 又称静态图模式,将神经网络模型编译成一整张图,然后下发执行。该模式利用图优化等技术提高运行性能,同时有助于规模部署和跨平台运行。
PyNative模式 动态图模式,将神经网络中的各个算子逐一下发执行,方便用户编写和调试神经网络模型。