性能超H100!英特尔发布新一代人工智能芯片Gaudi 3 压力给到英伟达!
英特尔发布了新一代人工智能芯片Gaudi3,引发了业界的广泛关注。Gaudi3的性能远超竞争对手英伟达的H100芯片,成为当前市场上最强大的AI芯片之一。这使得Gaudi3在AI领域的应用中具有出色的表现,特别适合处理大规模的深度学习模型。
攻陷短视频后,Sora将需要72万块H100 GPU
在被大规模采用后,Sora的推理成本将很快超过训练成本。OpenAI推出的Sora模型能够在各种场景下生成极其逼真的视频,吸引了全世界的目光。视频内容的创意驱动了对OpenAI的Sora等模型最直接的需求。
微软工程师爆料:OpenAI训练GPT-6把微软电网搞崩 刷爆10万张H100
微软工程师的爆料引发了广泛关注,透露GPT-6的训练计划不仅已启动导致大规模GPU集群的部署引发了电网崩溃的尴尬局面。这一事件凸显了AI训练对能源的巨大需求,与此同时,OpenAI内部消息的曝光也揭示了GPT-5和GPT-6的训练已经在进行中。解决这些挑战将需要全球范围内的合作与创新,以确保AI技术能够持续发展并造福人类社会。
OpenAI的Sora在NVIDIA H100上生成1分钟视频约需12分钟
据Factorial基金估计,OpenAI的Sora每小时在NVIDIAH100上生成5分钟的视频,相当于每天能生成120分钟的视频。报告进一步指出,为支持TikTok和YouTube的创作者社区,大约需要89,000个NVIDIAH100GPU。ChatGPT的创造者将于下周在洛杉矶与好莱坞制片厂、媒体高管和人才代理商会面,以在娱乐行业建立伙伴关系,并鼓励电影制作人将其新的AI视频生成器整合到他们的工作中。
老黄祭出新核弹B200!30倍H100单机可训15个GPT-4模型,AI迎新摩尔时代
【新智元导读】就在刚刚,老黄又来打破摩尔定律了:英伟达新核弹B200,一块能顶5个H100,30倍推理加速,能训万亿参数大模型!同时推出的AI推理微服务NIM,号称让全世界用上AI。就在刚刚结束的GTC人工智能大会上,英伟达的新一代性能巨兽Backwell诞生了!BlackwellB200GPU,是如今世界上最强大的AI芯片,旨在「普惠万亿参数的AI」。有了世界最强的处理器Blackwell,新一轮技术革命即将开启。
英伟达发布最强AI加速卡 大语言模型性能比H100提升30倍
英伟达在GTC开发者大会上发布了最强AI加速卡BlackwellGB200,计划今年晚些时候发货。GB200采用新一代AI图形处理器架构Blackwell,其AI性能可达20petaflops,比之前的H100提升了5倍。英伟达的系统还可扩展至数万GB200超级芯片,具有11.5exaflops的FP4计算能力。
Meta公布Llama 3训练集群细节!储备60万块H100迎接AGI
【新智元导读】LLM开源从Infra做起!Meta公布了自己训练Llama3的H100集群细节,看来Llama3快来了。每年3月份,照例各家大厂又要开始秀自己最新的产品和研究了。Meta的目标是创建灵活可靠的系统,以支持快速发展的新模式和研究。
全球最快AI芯片WSE-3发布 性能碾压H100!
最新发布的全球最强AI芯片WSE-3引起了行业的瞩目。该芯片采用了先进的4万亿晶体管5nm制程,拥有惊人的性能,单机可训练出24万亿参数的模型,远超英伟达H100GPU。这种技术进步将对整个AI产业产生深远的影响,加速了AI技术在各个领域的应用和发展。
Llama-3公布基础训练设施,使用49,000个H100
3月13日,社交、科技巨头Meta在官网公布了两个全新的24KH100GPU集群,专门用于训练大模型Llama-3。Llama-3使用了RoCEv2网络,基于Tectonic/Hammerspace的NFS/FUSE网络存储,继续使用了PyTorch机器学习库。将Meta的Tectonic分布式存储解决方案和Hammerspace结合在一起,可以在不影响规模的情况下实现快速功能迭代。
英伟达最强通用大模型Nemotron-4登场!15B击败62B,目标单张A100/H100可跑
英伟达团队推出了全新的模型Nemotron-4,150亿参数,在8Ttoken上完成了训练。值得一提的是,Nemotron-4在英语、多语言和编码任务方面令人印象深刻。这种能力凸显了Nemotron-415B对广泛的自然语言的深刻理解。
英伟达发布Nemotron-4:150亿参数通用大模型,目标单张A100/H100可跑
英伟达最新推出的Nemotron-4语言模型引起广泛关注。这一通用大模型拥有150亿参数,经过在8Ttoken上的训练,在英语、多语言和编码任务中表现出色。Nemotron-4的推出标志着英伟达在通用大模型领域的一次重要突破,为单个A100或H100GPU上运行的最佳通用大模型设定了新标准。
首席分析师揭秘爆火Groq,每小时要烧168美元!10倍H100拥有成本,老黄笑而不语
SemiAnalysis的行业专家对最近爆火的Groq推理系统进行了像素级的拆解,测算出其持有成本依然高达现有H100的10倍,看来要赶上老黄的步伐,初创公司还有很多要做。最近爆火的AI初创公司Groq,推出了比目前常见GPU推理系统快4倍,成本低70%的大模型推理解决方案。还有一个更为关键的问题,快速响应小型模型推理这个市场到底有多大,以至于值得抛下灵活的GPU不用,转去构建专门
英伟达首次公开目前最快AI超算:搭载4608个H100 GPU!
近日,英伟达首次向外界公布了其最新的面向企业的AI超级计算机Eos,同时也是英伟达目前速度最快的AI超级计算机。Eos共配备了4608个英伟达H100GPU,同时还配备了1152个英特尔XeonPlatinum8480C处理器。英伟达表示,Eos整合了其在AI领域的专业技术和经验,是先前DGX超级计算机知识的结晶,可以帮助企业处理最具挑战性的项目,并实现AI目标。
GPT-5被5万张H100卡脖子!Altman急筹数十亿美元,欲取代英伟达建起AI芯片帝国
【新智元导读】最近,外媒曝出SamAltman正计划筹集数十亿美元,为OpenAI建起全球性的半导体晶圆厂网络。GPT-5训练严重缺芯,OpenAI誓不让英伟达掌握主动权,干脆自己做新的AI芯片霸主?SamAltman正在筹集数十亿美元,建立一个全球性的半导体晶圆厂网络!这一事件背后的原因很可能就是,OpenAI已经无「芯」训练「GPT-5」了。如今到处奔走的Altman,能为建立晶圆厂筹到数十亿甚至数千亿美元的资金吗?能维持厂子的运营吗?目前我们只知道,他的举动有可能改变整个代工市场的格局。
扎克伯格宣战AGI:Llama 3训练中,今年要囤35万块H100,砸近百亿美元
为了通用人工智能的宏大目标,扎克伯格正在给Meta的AI研究部门进行大幅度的改组。Meta首席执行官马克・扎克伯格宣布,他的公司正在致力于为人工智能助手构建「通用智能」并「负责任地开源」,Meta正在将其两个主要研究小组合并在一起以实现这一目标。扎克伯格表示,Meta今年将推出一个新平台,让任何人都可以创建自己的人工智能角色,并将其分发到Meta的社交应用程序中,比如Facebook、Instagram和Threads。
Meta豪购35万块NVIDIA最强GPU H100:还在买AMD
NVIDIAAIGPU无疑是当下的硬通货,从科技巨头到小型企业都在抢。MetaCEO扎克伯格近日就透露,为了训练下一代大语言模型Llama3,Meta正在建造庞大的计算平台,包括将在今年底前购买多达35万块NVIDIAH100GPU。微软也是AMDInstinct的大客户。
小扎砸数百亿美元猛攻开源AGI!狂掷60万块H100,爆50倍GPT-4算力
【新智元导读】今天,小扎正式宣战「开源AGI」!下一代大模型Llama3正在训练,年底将拥有35万块H100,届时算力总和达60万块H100。为了追赶OpenAI,成立十年的FAIR团队纳入GenAI,全力奔赴AGI。这是一种令人愉悦的状态。
推理性能超H100十倍!21岁华裔小哥哈佛辍学开发AI加速芯片「Sohu」,2人公司估值3400万刀
【新智元导读】最近,两位哈佛辍学生共同创立的AI芯片公司,估值已达3400万美元,并计划明年交付一款名为「Sohu」的AI推理加速芯片——其LLM推理性能达到H100的10倍单价吞吐量更是高达140倍。像Pika一样的神级创业故事又要再次上演了?两位哈佛退学的年轻人,想要制造一款专用于大语言模型加速的AI加速器芯片,将于2024年第三季度交付,推理性能达H100的10倍。CerebrasSystems的CEO
性能直追GPT-4,5000个H100训成,DeepMind联创发全新一代大模型
【新智元导读】Inflection-2最新发布!性能碾压一众大厂模型,仅输一手GPT-4要集成到Pi?最近,InflectionAI发布了全新的一款AI模型。更炸裂的是InfectionAI对这款模型的评价——性能直超谷歌和Meta开发的两款模型,紧随OpenAI的GPT-4之后。真能充当心理咨询的角色呢。
英伟达仅在第三季度就售出了 50 万个 H100 AI GPU:Meta 和微软是最大买家
Nvidia最近一个季度的收入显著增长,主要归功于其数据中心产品的销售。公司年度总收入增长超过200%,在180亿美元的收益中,有145亿美元来自其数据中心产品。市场规模预计将在2027年翻倍,从目前的1000亿美元增长到将近2000亿美元的总收入。