在人工智能领域,蒸馏技术即知识蒸馏(Knowledge Distillation,KD),是一种重要的模型压缩与知识迁移方法,以下是更详细的介绍:### 关键技术- **软目标与硬目标**:传统训练用硬标签,如猫=(1,0,0),狗=(0,1,0)。知识蒸馏用软标签,如猫=(0.
1 0-1 Loss Function 0-1损失函数 2 Accept-Reject Sampling Method 接受-拒绝抽样法/接受-拒绝采样法 3 Accumulated Error Backpropagation 累积误差反向传播 4 Accuracy 精度 5 A