cerebrassystems宣布推出全球最快ai推理解决方案
2024-10-09 【 字体:大 中 小 】

品玩8月28日讯,据siliconangle 报道,Cerebras Systems 宣布 推出全球最快的 AI 推理解决方案 Cerebras Inference。
据悉,该新解决方案为 Llama 3.1 8B 提供每秒 1800 个 token,为 Llama 3.1 70B 提供每秒 450 个 token,速度是微软 Azure 等超大规模云中提供的基于英伟达 GPU 的 AI 推理解决方案的 20 倍。
除了令人难以置信的性能之外,这款新型推理解决方案的定价也比流行的 GPU 云低得多,起价仅为每百万个 token 10 美分,从而为 AI 工作负载提供 100 倍更高的性价比。

猜你喜欢

国防部发布:中国海军陆战队将参加


开放式无线运动耳机怎么戴,佩戴舒适在线的几款开放式耳机分享


44年来首次戒严 韩国惊魂6小时!首尔不眠 民众愤怒 尹锡悦将面临什么?


中国期货配资公司:高杠杆下的风险与机遇


配资网站首选平台:避坑指南与安全投资策略


一图看懂历年春节前后两周大宗商品涨跌规律


银行零售上演“消失的利润”:透视限价背后的保息差与防套利


“喜迎全运·志愿一夏”,广州将举办超4000场活动


港股异动 京东集团-SW(09618)涨超4% 隔夜美股收涨近7% 富瑞予以“买入”评级


齐威王积极纳谏广开言路,经过几十年的励精图治,四方咸服


科创板自律委建议:发行人股东将首发前股份托管于保荐机构


肖羊人的性格命运_自带_那悠悠_岁岁年年


主动量化剑指超额,富国致盛量化今日正式发行


轻松一刻:以为中国男人个个都像李小龙呢_功夫_生活_朋友


“身弱不担财”的年轻人如何逆袭?9个小技巧送给你”--王镜海_能量_风水_调整


银行零售上演“消失的利润”:透视限价背后的保息差与防套利


光大证券:给予宏达电子买入评级


国际原油期货结算价大幅收跌超35% 美油、布油4月份均大跌超17%


超千家上市公司披露年报 高额分红抢眼


4月30日好客转债下跌019%,转股溢价率2419%
