英文中的Token:Token通常是一个单词或者标点符号:在英文中，Token经常与单词一一对应。例如，句子 “The quick brown fox jumps over the lazy dog.” 中的每个单词都是一个Token。
上次《科普神文，一次性讲透AI大模型的核心概念》一文中，我基于结合大量示例及可视化的图形手段给大家科普了AI大模型的相关算法和核心概念。但是收到不少非技术背景的小伙伴反馈，相关的算法内容的解释技术性还是太强，很难完全理解。
在大语言模型（如GPT-4）中，token 是大语言模型一个基本的处理单元。理解token的概念对于理解自然语言处理（NLP）和语言模型的工作机制非常重要。也是为什么所有大语言模型的收费都是按照 token 数量来收费的。什么是token？
这几天，业界把刚刚闭幕的“北京智源大会”比作是一场AI界的“春晚”。会上国产大模型成了主角，会后大模型创业者们也受到了明星般地围堵、追问。在大会主论坛上，主办方独具匠心地设置了一段大咖对话。嘉宾是零一万物CEO李开复与中国工程院院士、清华大学智能产业研究院（AIR）院长张亚勤。
3月15日凌晨，OpenAI正式发布了大家期待已久的GPT-4，很快就在中外科技圈刷屏了。这款新的AI大模型确实拿出了一些新东西，不但理解能力、可靠性、输入处理长度上都有显著提高，还有一个重大进化——拥有了多模态的能力，简单说就是不仅能看懂文字，也能看懂图片了。
【编者按】2022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出聊天机器人ChatGPT。它不仅催生了人工智能界的又一轮高光期，还并不常见地被誉为“蒸汽机时刻”、“iPhone时刻”甚至“钻木取火时刻”。
·在产业化背景下，模型并非越大越好，模型越大能力越强，但使用成本也更高。因此从企业角度讲，要在满足一定效果之下尽可能降低成本。大模型价格降低有利于产业普及和推广，如果价格低于企业实际成本将扰乱市场。大模型企业应通过技术提升降成本，而不是仅仅为了占领市场。
虽然此前腾讯集团CEO马化腾表示不急于推出半成品大模型，但在这样的技术迭代节点，缺席不行。9月7日，腾讯终于通过腾讯云对外开放通用大模型“腾讯混元”，由腾讯全链路自研，拥有超千亿参数规模，预训练语料超2万亿tokens。
编者按：1956年，人工智能（AI，Artificial Intelligence）的概念首次提出，迄今已逾六十载。60年来，AI历经了从爆发到寒冬、再到野蛮生长的历程，伴随着人机交互、机器学习等技术的提升，AI成为了技术时代的新趋势。
来源：环球时报 自从大模型出现，人工智能前沿研发就带有“烧钱”属性，甚至让提供AI开发硬件的英伟达，靠着“卖铲子”营收与利润暴涨，一度成为全球市值最高的公司。而近日高盛、红杉等多家华尔街机构发布研报，质疑人工智能“淘金热”，认为数十亿美元投资的合理性需要足够利润回报来证明。
