在拉斯维加斯正在进行的 AWS re:Invent 大会上,AWS 推出了针对高性能 AI 工作负载的下一代Trainium 和 Graviton 芯片。根据 AWS 的说法,Graviton4 比 Graviton3 提供明显更好的性能、更多的内核和更多的内存带宽。Graviton 是专为云工作负载构建的人工智能芯片系列。

第二个芯片 Trainium2 是一款高性能芯片,旨在在 Amazon Elastic Compute Cloud (EC2) “UltraClusters”中大规模部署100,000 个独立芯片。这些 EC2 Ultracluster 旨在满足使用云的计算能力的可扩展需求。
根据GitHub 上的 AWS 官方技术指南,该阵容中之前的芯片也以高效率和高性能为目标。例如,Graviton3E 由针对云原生工作负载优化的可扩展 Arm Neoverse V1 CPU 提供支持。Neoverse V1使用可扩展矢量扩展SVE,使Graviton3E能够适应不同的工作负载。与传统的单指令多数据 (SIMD) 架构相比,SVE 允许处理器在运行时而不是编译时适应不同的向量长度。
向量可以被认为是并行处理的元素的集合。传统 SIMD 架构中向量处理指令的一个示例是Intel x86 指令 _mm256_add_ps 指令。该指令适用于固定大小的 256 位向量。或者,使用 SVE,计算中使用的向量的大小是在运行时动态确定的。对于需要较小计算的工作负载,可以使用较小的向量来提高能源效率。因此,AWS 称赞 Graviton 3E 的矢量处理性能提高了 35%,也就不足为奇了。
AWS 创建 Graviton4是为了进一步提高 Graviton3E 的性能和可扩展性。Graviton4 由 Arm Neoverse V2 CPU 提供支持,Arm 表示该 CPU 可以使 Graviton3E 中使用的 Neoverse V1 的性能提高一倍。
Graviton4还具有增强的安全功能。Neoverse V2 CPU底层采用ArmV9,由于其保密的计算架构,本质上比其前辈更加安全。除了拥有更大的 2 MB 二级缓存外,Graviton4 还实现了分支目标识别 (BTI),这是底层 Arm CPU 架构的另一个功能。这可以防止由于间接分支而执行不需要的指令,从而增强代码安全性。AWS 表示,Graviton4 的数据库速度提高了 40%,Web 应用程序速度提高了 30%,同时仍然强调安全性和可扩展性。
人工智能或机器学习技术最重要的一个方面是训练,即使用一组数据“教授”人工智能的过程。AWS Trainium 专门针对通过云进行高性能训练计算基础设施。
Trainium AI 加速器使用AWS NeuronCore 架构,每个加速器具有 32 GB 的带宽内内存,并提供高达 190 TFLOP 的计算能力。NeuronCore 具有用于张量多维数组计算、矢量处理和标量处理的独立引擎。
AWS 表示,通过部署在 EC2 UltraCluster 中,Trainium2 的训练基础模型 (FM) 和大型语言模型 (LLM) 的速度比以前快四倍。AWS 还允许访问其他令人垂涎的人工智能芯片,例如 Nvidia GPU。一些 Nvidia 芯片,例如 GH200 Superchips,将可以通过 EC2 服务访问。
相关文章:
NXP新型UWB IC 系列提供安全的汽车访问
什么是arp攻击?arp攻击原理以及arp断网攻击解决方法
什么是usb调试模式?华为/小米/Oppo/Vivo/手机usb调试在哪
AWS 推出了两款人工智能芯片--Trainium 和 Graviton
质量为本:英飞凌推出全球首款采用微型封装的工业级eSIM卡
电感单位是什么?电感单位换算公式与关系
DDR4是什么意思?ddr3和ddr4有什么区别
网线的线序:交叉网线线序和直连网线线序图解
直流接触器有什么用?直流接触器和交流接触器的区别
Picocom 推出小型低功耗 5G 小型蜂窝 O-RU
什么是UHD?UHD和FHD的区别
祝贺获得正能量电子网的颁奖企业
TDK超声波 ToF 传感器工作距离可达5米
Siglent 推出新款旗舰数字存储示波器
Ampere首席产品官:云计算和人工智能需求,需要新的更高性能处理器
英国法拉第电池挑战赛鼓励追求更轻、更先进且成本更低的电动汽车电池
Onsemi、三菱电机和 ST 各自扩大 SiC 产能
RDS 推出紧凑、高性能 OLED 显示模块
PCC是什么意思?PCC和PLC、IPC的区别
研华宣布量产灵活的原生AI模块SOM-6884
3款高可靠性电路保护器件,更有效的过压保护
LVDS是什么意思?lvds接口是什么接口?LVDS接口的特点
英飞凌将1.2kV和2kV的SiC MOSFET半桥引入62mm模块封装
视在功率是什么意思?视在功率有功功率无功功率的公式和关系
ddr3是什么意思?ddr2和ddr3有什么区别
Microsoft通过新的AI加速器和CPU涉足定制芯片
日亚化学将推出 UV-B (308nm) 和 UV-A (330nm) LED
CDE的EMI抑制电容器,可在恶劣条件下工作
什么是二进制?一张图看懂二进制
TDK、LEM 开发基于TMR的电流传感器
铭瑄推出五个风扇的MegaGamer Nvidia RTX 4070 显卡
为什么 Li-Fi 可能比 Wi-Fi 更好?
驱动器是什么?计算机系统中的驱动器的功能与类型
EDA是什么意思?eda技术是什么?eda软件有哪些?
ccd是什么相机?ccd相机与cmos相机有什么区别?
Nicomatic 为所有DMM连接器引入了新的插接前锁定机制
瑞萨推出采用其自行设计的 32 位 RISC-V 内核的新 CPU
网线插座怎么接?墙壁网线插座接法
Nisshinbo Micro Devices推出NB7142和NB7143系列锂离子电池保护IC
罗姆的新型高功率激光二极管可扩展激光雷达范围
英特尔:全新 Xeon CPU是目前市场上最适合人工智能的 CPU
意法半导体推出新款低功耗、高灵活性无线MCU
医疗应用传感器在提高医疗设备性能方面发挥着基础性作用
AI人工智能已经在工程工作场所发挥着越来越重要的作用
意法半导体宣布推出1200V耐压、车用SiC功率电源模块
什么是机械键盘轴?机械键盘轴的区别
全球首款AMD Linux 游戏笔记本电脑首次亮相
Intel凭借酷睿Ultra处理器开启AI PC时代
Rambus 推出首款 Gen4 DDR5 RCD,内存带宽增加了 50%
什么是涡街流量计?涡街流量计的工作原理解析