Intel将上一代Broadwell-EP处理器的改进分为了三个方面:Orchestration(编排)、Security(安全)和Performance(性能),其中,Orchestration(编排)是一个在Broadwell-EP上提出的新概念,核心就是Intel Resource Director Technology(RDT,资源管理技术),笔者认为,这是Broadwell-EP上带来的最重要也是最显著的一个变化。到了Skylake-SP,Xeon家族的信念具有了一个飞跃,新的重点囊括为三个:Performance(性能)、Security(安全)和Agility(敏捷):
如下图所示,可以看出:
Intel Xeon Scalable Processor: Performance, Security and Agility
敏捷取代了编排,可以很容易认识到的是,敏捷包含了编排,可以说,Xeon Scalable处理器具有着更多的野心,也搭载了更多的特性,从而,它也需要着更多的微架构/架构改变:
Intel Skylake-SP——初代Xeon Scalable处理器家族的特性改进一览
我等不及要对这些提升一一讨论了:
Intel Skylake-SP——初代Xeon Scalable处理器特性一览
Intel Skylake-SP搭配的Lewisburg PCH芯片组的进化也颇值得一提,但这部分内容我们决定放在以后的文章当中。
由于每处理器最多具有3个UPI外联总线,因此Glueless模式仍然支持到8路系统为止,但现在2个UPI的型号也可以支持环形的四路配置;理论上,环形配置可以支持无限多的处理器(考虑一个无限大的处理器首尾连接的圆环),只是延迟也会线性地增加
Intel Xeon Scalable Processor: Re-architected from the Ground Up
初代Xeon Scalable处理器搭配了支持AVX-512指令集的微架构,可以一次性处理512位数据,并且可以每处理器达到28个核心,支持6个内存通道,更多的PCIe 3.0信道,更多的性能、安全特性以及更新更强的PCH。Intel号称其为Re-architected from the Ground Up,从头重新架构,且让我们从头开始,从Skylake的微架构开始一一介绍。
好文章,需要你的鼓励
OpenAI首席执行官Sam Altman表示,鉴于投资者的AI炒作和大量资本支出,我们目前正处于AI泡沫中。他承认投资者对AI过度兴奋,但仍认为AI是长期以来最重要的技术。ChatGPT目前拥有7亿周活跃用户,是全球第五大网站。由于服务器容量不足,OpenAI无法发布已开发的更好模型,计划在不久的将来投资万亿美元建设数据中心。
阿里巴巴团队提出FantasyTalking2,通过创新的多专家协作框架TLPO解决音频驱动人像动画中动作自然度、唇同步和视觉质量的优化冲突问题。该方法构建智能评委Talking-Critic和41万样本数据集,训练三个专业模块分别优化不同维度,再通过时间步-层级自适应融合实现协调。实验显示全面超越现有技术,用户评价提升超12%。
英伟达推出新的小型语言模型Nemotron-Nano-9B-v2,拥有90亿参数,在同类基准测试中表现最佳。该模型采用Mamba-Transformer混合架构,支持多语言处理和代码生成,可在单个A10 GPU上运行。独特的可切换推理功能允许用户通过控制令牌开启或关闭AI推理过程,并可管理推理预算以平衡准确性和延迟。模型基于合成数据集训练,采用企业友好的开源许可协议,支持商业化使用。
UC Berkeley团队提出XQUANT技术,通过存储输入激活X而非传统KV缓存来突破AI推理的内存瓶颈。该方法能将内存使用量减少至1/7.7,升级版XQUANT-CL更可实现12.5倍节省,同时几乎不影响模型性能。研究针对现代AI模型特点进行优化,为在有限硬件资源下运行更强大AI模型提供了新思路。