您现在的位置是:焦点 >>正文
AMD X3D搞AI居然比打游戏还猛!8核暴打16核 领先达88%
焦点15人已围观
简介据GiggleHD实际测试,AMD X3D处理器在RAG检索增强生成)AI基准测试中展现出远超预期的性能表现,最高领先非X3D芯片达88%。RAG AI通过外部向量数据库检索信息来增强大模型的回答质量 ...
据GiggleHD实际测试,比打AMD X3D处理器在RAG(检索增强生成)AI基准测试中展现出远超预期的游戏性能表现,最高领先非X3D芯片达88%。还猛核暴
RAG AI通过外部向量数据库检索信息来增强大模型的打核达回答质量,与纯LLM推理不同,领先向量搜索的比打大量计算负载落在CPU而非GPU上。
随着Agentic AI工作负载的游戏推进,搜索驱动的还猛核暴任务流越来越多,CPU的打核达延迟瓶颈问题日益突出。
HNSW(分层可导航小世界)搜索算法就是领先典型例子,在GPU执行LLM推理的比打同时,CPU负责图检索,游戏更大的还猛核暴缓存意味着更短的检索时间。
GiggleHD使用开源的打核达X3D RAG基准测试,针对个人PC和小团队单节点场景(约100K-200K向量),领先对AMD锐龙9000X3D系列及多款非X3D芯片进行了实测。


结果显示,在100K向量批量搜索中,X3D CPU最高比非X3D芯片快88%;在200K向量测试中,同为8核的锐龙7 9850X3D比锐龙7 9700X快50%以上,且8核X3D芯片的速度超过了16核的锐龙9 9950X。


索引构建方面,100K向量测试时间缩短50%,200K向量缩短39%,并发RAG吞吐量同样由X3D芯片领跑。


差距较小的项目是TTFT(首Token时间)吞吐量,因为该任务主要依赖GPU而非CPU。

Tags:
相关文章
38岁重疾险买合算,38岁保险怎么买最划算
焦点导读: 38岁重疾险买合算,38岁保险怎么买最划算?38岁买什么重疾险合适?2022有热门的重疾险产品推荐吗?重疾险买来有啥用?相信很多小 ...
【焦点】
阅读更多钢化玻璃有什么检验标准 如何鉴定钢化玻璃的质量,行业资讯
焦点随着经济的发展与科学的进步,玻璃行业也不断进步,在研发新品种的同时也对原有的玻璃种类进行了加强。各种类型的深加工玻璃逐渐取代普通平板玻璃,在各自的应用领域大放异彩。为了能够买到质量更好、价格合 ...
【焦点】
阅读更多上市即动销,这三款饮品燃爆旺季市场,咨询量暴涨!订单量暴涨!
焦点发布者:梦珂 浏览量:11512发布时间:2020/8/20 15:13:04 金九银十的旺销季即将来临,各大品牌频推新品、市场竞争激烈,饮料大战可谓一触即发。在这场旺销战中 ...
【焦点】
阅读更多