半导体跨界潮,谁在跟风,谁在下棋?Nikola,一个千亿造车独角兽破产了消息称谷歌将因违反反垄断规则而遭欧盟指控,恐被处以高额罚款透明美学再进化,Nothing Phone(3a)系列手机宣传物料曝光2025 年春运今日迎来最后一天,全国铁路已累计发送旅客 4.99 亿人次国内通信运营商首次:中国联通通过数字货币桥实现跨境支付微软 Outlook“保存邮件到 OneNote”功能 3 月谢幕,“发送到 OneNote”接棒全国首个:浙江率先布局低空经济“下乡”,目标到年底建成 200 个乡村无人机起降枢纽拨打客服电话强制等待 15 分钟,惠普欧洲试点遭强烈反对后取消OPPO一键问屏 / 全能搜基于阶跃星辰Step系列多模态模型打造京东&创维联合定制JD100 Mini电视发布 下单享免费送装一体服务我国成功发射中星 10R 卫星中科闻歌发布“智川”企业智能体平台1.0、“优雅”音视频大模型平台1.5,领先技术加速AI普惠落地这个周末,在最懂开发者的城市邂逅最懂开发者的算力平台DDN推出 Infinia 2.0对象存储 加速AI数据处理速度全部免费!百度文心智能体平台已全面接入DeepSeek模型灯塔云系统:开启劳务派遣管理4.0时代超2671万名消费者申请手机等数码产品购新补贴 用国补买手机上京东皇家马德里对阵赫罗纳:不乏进球与高水平竞技的足球现场OpenAI宣布面向多个国家推出AI代理 Operator
  • 首页 > 数据存储频道 > 数据.存储频道 > 数据中心

    GenAI 时代的数据中心和网络

    2024年06月27日 20:25:51   来源:千家网

      GenAI 的兴起对各行各业产生了重大影响,影响了从工作流程到创新战略甚至客户互动等方方面面。各公司正在积极寻求整合以提高运营效率。这种影响在数据中心和网络中尤为明显,促使它们做出调整以满足其处理需求。从这个角度来看,根据 JLL 报告,超大规模数据中心正在以 7.8% 的复合年增长率增加机架密度,以满足对计算能力不断增长的需求。

      数据中心适应 GenAI 需求

      生成式人工智能 (GenAI) 的兴起,尤其是大型语言模型 (LLM),正在迅速改变数据中心,需要高密度配置。这意味着将强大的 GPU 和专用人工智能芯片装入更小的空间,最大限度地提高每平方英尺的处理能力。这对于通常位于大型超大规模设施附近的卫星数据中心的 LLM 来说变得更加重要。

      高性能计算 (HPC) 集群是另一个改变游戏规则的因素。这些互连的计算机网络擅长并行处理,大大加快了复杂 AI 模型的训练和推理运行(使用训练好的模型进行预测)。然而,这种能力是有代价的。GenAI 巨大的能源需求需要创新的解决方案。数据中心正在采用液浸冷却,将服务器浸入专用液体中以实现高效传热。其他方法,如直接液体到芯片 (DLC) 冷却、INROW 冷却和 RDHX(后门热交换器)冷却机制也在实施中。这些技术为冷却密集的 GPU 和 AI 机架创造了一个高效的环境,同时也对 PUE 产生了积极影响。

      对于服务器、交换机和面板等 IT 硬件产品来说,采用这些技术可能是一个挑战,因为它们需要兼容并能够承受这些冷却方法的独特要求。此外,探索太阳能和风能等可再生能源对于可持续增长至关重要。

      为 GenAI 改造网络基础设施

      数据中心的处理能力可能是 GenAI 的驱动引擎,但网络基础设施充当其高速传输系统。GenAI 应用程序生成的大量数据(尤其是在训练和推理阶段)需要对数据中心管理网络流量的方式进行重大改变。一些关键的改造包括:

      增加带宽:为了促进服务器和存储系统之间的无缝数据传输,数据中心正在投资高带宽网络解决方案,如以太网结构和远程直接内存访问技术。

      分布式 AI 架构:为了分配处理工作负载并增强可扩展性,分布式 AI 架构正在获得关注。这些架构将训练或推理过程分散到地理分散的数据中心甚至边缘设备,从而减少对单个集中位置的依赖。

      人工智能驱动的网络优化和自动化:人工智能算法可以分析网络流量模式、预测瓶颈并实时自动调整网络,从而优化性能和资源分配。

      GenAI 时代的安全性和合规性

      随着数据中心不断发展其网络基础设施以适应 GenAI 应用程序,有必要解决这一技术转变引发的安全性和合规性挑战。数据中心需要实施高级威胁检测解决方案、网络分段和持续监控,以抵御潜在的 AI 攻击或操纵企图。

      监管机构正在努力应对 GenAI 的道德影响及其潜在的滥用。数据中心必须调整其运营和 AI 部署策略,以遵守更严格的数据隐私和安全法规。这些法规可能侧重于负责任的数据治理、减轻算法偏见以防止歧视性结果,并通过 AI 决策的可解释性和透明度促进信任和问责制。

      GenAI 世界中数据中心的未来

      GenAI 时代为数据中心和网络基础设施带来了激动人心的机遇和重大挑战。随着 GenAI 应用的不断发展,数据中心需要保持敏捷性和适应性。兼容 AI 负载的数据中心将需要更大的规模和更高的功率可用性,以及更密集的光纤配置。此外,优先考虑绿色电源和实现更好的 PUE 也是必不可少的。

      然而,其影响不仅限于基础设施。数据中心专业人员也必须不断发展以满足这一新形势的需求——发展 AI 专业知识以优化资源管理并与 AI 开发人员合作以确保负责任和安全的实施。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

    即时

    新闻

    明火炊具市场:三季度健康属性贯穿全类目

    奥维云网(AVC)推总数据显示,2024年1-9月明火炊具线上零售额94.2亿元,同比增加3.1%,其中抖音渠道表现优异,同比有14%的涨幅,传统电商略有下滑,同比降低2.3%。

    企业IT

    重庆创新公积金应用,“区块链+政务服务”显成效

    “以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。

    3C消费

    华硕ProArt创艺27 Pro PA279CRV显示器,高能实力,创

    华硕ProArt创艺27 Pro PA279CRV显示器,凭借其优秀的性能配置和精准的色彩呈现能力,为您的创作工作带来实质性的帮助,双十一期间低至2799元,性价比很高,简直是创作者们的首选。

    研究

    中国信通院罗松:深度解读《工业互联网标识解析体系

    9月14日,2024全球工业互联网大会——工业互联网标识解析专题论坛在沈阳成功举办。