
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
硅谷初创公司Sohu推出的AI芯片震惊业界,性能超越英伟达H100服务器20倍,每秒可处理50万token的Llama 70B模型。这款专为Transformer设计的ASIC芯片,以高效专注于此模型,单台8卡Sohu服务器可抵160块H100,颠覆传统算力格局。ASIC芯片因其在特定任务中的高效性,可能成为AI算力市场的未来趋势,挑战GPU主导地位。Sohu背后有OpenAI、谷歌等投资支持,预示着AI芯片市场可能将迎来ASIC革命,但高成本与竞争加剧也是Sohu面临的挑战。
原文链接
哈佛辍学生Gavin Uberti与Chris Zhu联手创立的AI芯片公司Etched.ai发布全球首款Transformer专用芯片Sohu,挑战英伟达在AI领域的霸主地位。这款芯片在毫秒级别处理速度快,每秒可处理50万tokens,性能比英伟达H100提升8-10倍。Sohu集成了Transformer架构,用1.2亿美元A轮融资由Primary Venture Partners和Positive Sum Ventures领投,天使投资人阵容包括Peter Thiel等。两位创始人曾因Arm指令集低效而萌生设计专用AI芯片的想法,Etched看好Transformer的未来,Sohu有望革新AI技术。
原文链接
00后哈佛华裔辍学生Gavin Uberti和Chris Zhu联手创立的初创公司Etched AI宣布完成1.2亿美元A轮融资,由Primary Venture Partners和Positive Sum Ventures领投,包括Peter Thiel等重量级投资人。他们开发的Transformer专用芯片Sohu专为大模型设计,比英伟达GPU快20倍。Sohu采用ASIC技术和连续批处理,能有效提升AI推理速度和效率。两位创始人在2022年10月休学创业,押注Transformer技术。尽管面临英伟达等巨头的竞争,Etched AI以其创新技术被视为可能的新兴挑战者。
原文链接
全球首颗Transformer专用AI芯片Sohu由美国创业公司Etched发布,速度比英伟达H100快20倍,性能超越B200近10倍。该芯片内置Transformer架构,采用4纳米工艺,不仅在推理和能耗上创新高,且专为大模型AI设计。Sohu作为Transformer ASIC,集成8块芯片的服务器可每秒处理50万Llama 7B tokens,展现出前所未有的性能。 Etched,由哈佛辍学创始人及行业专家领导的35人团队,在短短两年内便实现了这一突破,显示强大技术实力。
原文链接
哈佛辍学华人创办的初创公司Etched发布了首款大模型专用芯片Sohu,宣称一张芯片可顶20张H100,性能超越英伟达下一代芯片GB200。Sohu专为Transformer算法设计,拥有700亿参数的高吞吐量,已完成1.2亿美元融资。尽管面临Transformer架构可能被新架构取代的风险,但Etched认为其芯片将因Transformer的广泛使用而有价值。Sohu采用4nm工艺,支持大模型推理,包括MoE架构和多种Transformer变体。芯片已在云端开放抢先体验,未来可能影响实时语音客服、代码优化和文本生成等领域。然而,GPU效率提升缓慢的质疑和Transformer后继技术的不确定性引发了行业讨论。
原文链接
6月26日,新兴科技公司Etched宣布完成1.2亿美元融资,其研发的全球首款Transformer专用AI芯片Sohu亮相,基于4纳米工艺,每秒处理速度高达50万tokens,是英伟达H100的20倍。这款ASIC芯片专为Transformer架构设计,能大幅提升推理性能与能源效率,支持实时语音代理、高速文本处理等高负载任务,预示万亿级参数模型运行的新时代。由哈佛辍学生乌伯蒂和朱创立的Etched公司革新了AI芯片市场。
原文链接
加载更多

暂无内容