LIVE PROTOCOL
EET--:--:-- edition--.--.--

词元消耗量大爆发 成为衡量人工智能的新标尺

词元消耗量大爆发 成为衡量人工智能的新标尺

据中央电视台报道,随着人工智能广泛应用,词元也就是token的消耗量大爆发。词元是人工智能理解自然语言的最小计量单位,使智能可计量、可定价、可交易。我国大模型豆包日均词元消耗已突破一百万亿,成为全球第三个达到这一规模的大模型。

据中央电视台报道,如同刷手机要消耗流量一样,越来越多的人每天也在消耗大量词元。词元,也就是通常所说的token,正在成为人工智能时代一个新的关注焦点,其调用量的大爆发清晰地表明人工智能时代已经到来。

报道介绍,词元实际上是人工智能理解自然语言的最小基本单元。以向大模型提问今天北京天气怎么样为例,大模型会把这句话拆分成五个词元,而一个词元大约相当于一点五到两个字,是衡量智能服务的基础单位。

从日常对话、文案创作、视觉生成,到智能体自主执行复杂任务,人工智能的应用场景不断拓宽。报道指出,随着训练规模越来越大、质量越来越好,大模型在一个个词元的基础上,与人类对话、思考和推理的方式也越来越接近。

过去,人们很难为智力服务找到统一的计量单位,而词元的出现解决了这一难题。据中央电视台报道,词元让人工智能从此可计量、可定价、可交易,成为提供智能服务的最小计量单位,这被视为一个非常重要的里程碑。

报道打了一个比方:如今所处的智能时代,正如百年前电力普及的前夜。时代从工业文明迈入智能文明,衡量发展的核心标尺,也从千瓦时换成了词元。词元的整体消耗量,被看作反映人工智能使用深度和广度的最核心指标。

在这股浪潮中,大模型公司或许最先感受到变化。报道介绍,豆包是我国第一个、也是全球第三个日均词元消耗突破一百万亿的大模型,两年时间增长了千倍,反映出智能服务需求的快速扩张。

词元消耗为何大爆发?据中央电视台报道,去年用户多以问答、知识获取和简单的人工智能搜索为主,今年则出现大量非常复杂的任务,单个任务的词元量成十倍、百倍增长;与此同时,使用相关服务的用户越来越多,已有几亿用户每月频繁、深度地使用。

Loading article...