知识蒸馏 是一种用于模型压缩和优化的技术，最初由 Hinton 在文章“Distilling the Knowledge in a Neural Network”中提出，核心思想是从一个复杂的较大的模型中提取知识，将这些知识转移到一个精简的小模型中。
在 nvdia gpu，x86、arm 和 部分 AI 芯片平台上，均支持 8bit 的计算，效率提升从 1 倍到 16 倍不等，其中 tensor core 甚至支持 4bit计算，这也是非常有潜力的方向。
提起博士生导师，可能很多人会想到一些业界大牛，他们即便不是资历丰厚的老教授，也往往是年富力强的中年学者。然而，最近有位颇受关注的博导年仅27岁。据报道，1997年出生的张林峰，今年6月在清华大学交叉信息研究院获得博士学位，现已担任上海交通大学人工智能学院助理教授、博士生导师。
随着BERT、Megatron、GPT-3等预训练模型在NLP领域取得瞩目的成果，越来越多团队投身到超大规模训练中，这使得训练模型的规模从亿级别发展到了千亿甚至万亿的规模。EasyNLP is a Comprehensive and Easy-to-use NLP Toolkit。
视点 发自 凹非寺量子位 | 公众号 QbitAI2022年4月，特斯拉公司首席执行官埃隆·马斯克宣布，预计到2024年将实现无方向盘和踏板的新型“Robotaxi”的量产。这表明以特斯拉为代表的自动驾驶“渐进式”发展路径，率先看到了无人驾驶大规模量产的曙光。
最近，“27岁清华博士任上海交大博导”登上了微博热搜，引起了很多网友的关注。他是谁？为什么这么年轻就能做博导？上海交通大学证实，这位年轻的博导名叫张林峰，1997年出生于山东潍坊，今年6月在清华大学交叉信息研究院获得博士学位，现已担任上海交通大学人工智能学院助理教授、博士生导师。
近日，“27岁清华博士任上海交大博导”话题登上热搜，引发广泛关注。据人民网消息，这名年轻的学者叫张林峰，1997年出生于山东潍坊。今年6月在清华大学交叉信息研究院获得博士学位后，他选择到上海交通大学人工智能学院任教，担任助理教授、博士生导师。
天 气济南：白天晴，最低气温 －1℃，最高气温 8℃。山东：今天白天鲁南地区天气多云间阴，其他地区天气晴间多云。最低气温 －2℃左右，最高气温 9℃左右。本 地{}【27岁清华博士任上海交大博导！他是山东人！】最近，“27岁清华博士任上海交大博导”登上了微博热搜。
