豆包大模型公布价格清单,支持国内最高并发标准

访客11个月前AI生活1515

近期,火山引擎官网更新了豆包大模型的定价详情,全面展示豆包通用模型不同版本、不同规格的价格信息。在模型推理定价大幅低于行业价格的基础上,豆包通用模型的 TPM(每分钟Tokens)、RPM(每分钟请求数)均达到国内最高标准。以豆包主力模型 pro-32k 为例,价格比行业低99%,TPM限额则高达同规格模型的2.7倍到8倍。

豆包大模型公布价格清单,支持国内最高并发标准 图:豆包系列模型“后付费”定价信息

官方信息显示:在按照 Tokens 实际使用量计算费用的“后付费”模式下,豆包通用模型-pro、豆包通用模型-lite的 32k 及以下窗口版本,模型限流为 10K RPM 和 800K TPM(以 RPM 和 TPM 其中之一到达上限为准)。国内其他主流模型的 TPM 限额大多在 100K 到 300K 之间,RPM则是在60到120区间,轻量级模型的RPM限额相对较高,但仅仅在300到500之间。

按照 10K RPM 限额计算,企业客户平均每秒可以同时调用167次豆包通用模型,从而满足绝大多数业务场景在生产系统的大模型应用需求。这一标准,已经达到 OpenAI 为高级别客户( Tier4 及 Tier5 等级客户)提供的 RPM 上限。

在算力挑战更大的长文本模型上,豆包通用模型 pro 和 lite 的 128k 版本,模型限流为 1K RPM 和 400K TPM,同样大幅高于国内其他的128k长文本模型。

此外,豆包大模型公布了最新的“预付费”模型单元价格。“预付费”是以调用某个特定模型的 TPM 配额,企业购买后无需再为 Tokens 消耗付费,提前为可以预见的流量波动规划好算力 。

豆包大模型公布价格清单,支持国内最高并发标准 图:豆包系列模型“预付费”模型单元价目表

以豆包通用模型 pro-32k为例:

按照 “预付费”模型单元价格计算,10K TPM 的包月价格为2000元。10K*60*24*30=43200K。即 432000K Tokens的价格为2000元,平均价格为 0.0046元/千Tokens。

按照“后付费”模式计算:在模型推理的计算成本中,推理输入通常占绝大部分比例,业界一般认为推理输入是输出的5倍。根据豆包通用模型 pro-32k 推理输入 0.0008元/千Tokens、推理输出 0.002元/千Tokens 计算,模型推理的综合价格为 0.001元/千Tokens。

火山引擎方面表示,豆包大模型为客户提供了灵活、经济的付费模式,“后付费”即可满足绝大多数企业客户的业务需求,助力企业以极低成本使用大模型、加速大模型的应用落地。

“豆包模型的超低定价,来源于我们有信心用技术手段优化成本,而不是补贴或是打价格战争夺市场份额。”火山引擎总裁谭待认为,“羊毛出在猪身上”在企业市场行不通,技术驱动的极致性价比才能真正创造价值。火山引擎与字节跳动豆包大模型团队正在密切合作,将持续优化模型效果和推理成本,为企业和开发者提供更好模型、更低成本和更易落地的平台支持。

附:火山引擎官网的模型服务价格文档https://www.volcengine.com/docs/82379/1099320

本站部分文章来自互联网,文章版权归原作者所有。如有疑问请联系QQ:362580117!

相关文章

首个千亿模型压缩算法 SparseGPT 来了,降低算力成本的同时保持高精度

首个千亿模型压缩算法 SparseGPT 来了,降低算力成本的同时保持高精度

自 2020 年 GPT-3 横空出世以来,ChatGPT 的爆火再一次将 GPT 家族的生成式大型语言模型带到...

直播预告 | 全新定义业务观测新范式,让稳定更有力量

直播预告 | 全新定义业务观测新范式,让稳定更有力量

多年来,云原生和微服务架构的发展推动着企业数字化转型快速落地,不仅重塑了企业IT系统架构,也改变了应用的研发和运维体系。而随着微服务化后IT系...

北京移动智能天线权值自优化技术助开学季5G网络畅通

北京移动智能天线权值自优化技术助开学季5G网络畅通

 进入9月,北京各大高校陆续迎来了开学季。开学迎新往往是校园内话务量和数据流量的高峰期,移动网络也面临着人员大量汇集和业务量大幅上涨的挑战...

2020年中国智慧医疗行业发展现状分析,未来发展空间可观!

2020年中国智慧医疗行业发展现状分析,未来发展空间可观!

一、智慧医疗行业概况 智慧医疗是指在诊断、治疗、康复、支付、卫生管理等各环节,基于物联网、云计算等高科技技术,建设医疗信息完整...

AI助力智慧生活,讯飞星火亮相AWE2024

AI助力智慧生活,讯飞星火亮相AWE2024

近日,2024年中国家电及消费电子博览会(AWE2024)在上海新国际博览中心闭幕。本届AWE以智能科技为展示重点,聚焦智能家电领域,吸...

华为智慧公路军团或将与海关和港口军团合并

华为智慧公路军团或将与海关和港口军团合并

华为军团再迎变革。 新智驾获悉,华为智慧公路军团或将与海关和港口军团合并,相关流程已推进大半,近期将对外官宣。除此之外,其他军团亦有合并计划...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。