在昨天Open AI推出GPT-4o之后,北京时间今天凌晨,在谷歌I/O开发者大会上,谷歌CEO桑达尔·皮查伊发布几十款Google和AI结合产品,包括支持200万token长文本的Gemini 1.5 Pro。
英文中的Token:Token通常是一个单词或者标点符号:在英文中,Token经常与单词一一对应。例如,句子 “The quick brown fox jumps over the lazy dog.” 中的每个单词都是一个Token。
上次《科普神文,一次性讲透AI大模型的核心概念》一文中,我基于结合大量示例及可视化的图形手段给大家科普了AI大模型的相关算法和核心概念。但是收到不少非技术背景的小伙伴反馈,相关的算法内容的解释技术性还是太强,很难完全理解。
从 ChatGPT 发布至今,已经有半年之久,国内各大厂商都在如火如荼地训练着各自的大模型。在大模型的开源世界里,也纷纷涌现出各种各样的大模型,效果却不尽相同。据中信所等机构的报告,截至2023年5月,国内已发布79个大模型。