加入收藏
 免费注册
 用户登陆
首页 展示 供求 职场 技术 智造 职业 活动 视点 品牌 镨社区
今天是:2024年5月10日 星期五   您现在位于: 首页 →  产通直播 → 半导体器件(企业动态)
Esperanto在低功耗RISC-V硬件上移植并运行一系列生成式AI模型
2023/4/23 11:04:02     

按此在新窗口浏览图片

【产通社,4月23日讯】Esperanto Technologies官网消息,其已经在低功耗RISC-V硬件上移植并运行一系列Generative AI模型。Esperanto计划为RISC-V社区的研究人员提供访问权限,作为该公司帮助更广泛行业“民主化AI”(democratize AI)使命的一部分,并帮助加速RISC-V上生成性AI技术的开发。

这项开发是世界语战略的一部分,旨在将RISC-V技术在AI和通用应用程序中的优势从云扩展到边缘。世界语的Generative AI工作的重点领域包括大型语言模型(LLM)用例,其中与现有产品相比,使用总拥有成本(TCO)更低的低功耗硬件是关键。

特别是,Meta的开放预训练转换器(Open Pre-Trained Transformer,OPT)模型的几个版本现在正在世界语的硬件上以多种精度水平和上下文大小运行,推理的功耗水平低至每芯片25W。将OPT模型快速移植到ET-SoC-1芯片上是通过Esperanto的机器学习软件开发套件实现的,该套件目前正由该公司的商业客户使用。被授权为R&D目的访问Esperanto解决方案的研究人员将被要求遵守Meta的开源许可以及其他项目条款。

“生成式AI是机器学习的最新进展之一,我们很高兴能够为RISC-V研究社区贡献我们在大型语言模型领域的努力,”Esperanto Technologies公司总裁兼首席执行官Art Swift说。

“Penguin Computing很荣幸成为Esperanto的战略合作伙伴,帮助加速部署高性能、低功耗的生成式AI解决方案,”Penguin解决方案总裁兼Smart Global Holdings智能平台解决方案高级副总裁Thierry Pellegrino表示。“我们很高兴与Esperanto合作,将其RISC-V解决方案部署扩展到更广泛的客户,这些客户正在寻求低功耗AI推理解决方案和降低总拥有成本。”

“对RISC-V日益增长的兴趣标志着半导体行业的一个重要转折点。Creative Strategies首席执行官兼首席分析师Ben Bajarin表示,“Generative AI领域的这一发展将进一步加快研究人员对RISC-V的评估,这些研究人员希望在这一令人兴奋的领域取得突破,开发人员希望在现有平台之外增加竞争优势。

“RISC-V为协作和定制提供了无与伦比的机会,使其非常适合这波AI创新浪潮,”RISC-V国际公司首席执行官Calista Redmond说。“Esperanto是该领域领先的公司之一,它推动了性能和能效的极限,使生成式人工智能开发更容易实现。”

对于商业客户,Esperanto目前正在推出AI评估服务器,该服务器提供高性能、高能效和低总拥有成本。每台Esperanto评估服务器均采用标准的2U高外形规格,包括双至强主机处理器和8或16块ET-SoC-1 PCIe卡。每张Esperanto PCIe卡都有超过1000个64位RISC-V CPU,附带向量/张量单元,每台服务器最多可提供16000个RISC-V CPU。

Esperanto的评估服务器使客户能够通过运行各种行业标准的AI模型获得性能和功率数据,并能够自带模型和数据。查询进一步信息,请访问官方网站http://www.esperanto.ai/contact。(张怡,产通发布)    (完)
→ 『关闭窗口』
 365pr_net
 [ → 我要发表 ]
上篇文章:采用Codasip L31内核和IAR RISC-V工具链的…
下篇文章:Eliyan委任IEEE Pederson奖获得者指导小芯片…
  → 评论内容 (点击查看)
您是否还没有 注册 或还没有 登陆 本站?!
 分类浏览
官网评测>| 官网  社区  APP 
STEAM>| 学术科研  产品艺术  技术规范  前沿学者 
半导体器件>| 产品通报  企业动态  VIP追踪 
电子元件>| 产品通报  企业动态  VIP追踪 
消费电子>| 产品通报  企业动态  VIP追踪 
商业设备>| 产品通报  企业动态  VIP追踪 
电机电气>| 产品通报  企业动态  VIP追踪 
电子材料>| 产品通报  企业动态  VIP追踪 
电子测量>| 产品通报  企业动态  VIP追踪 
电子制造>| 产品通报  企业动态  VIP追踪 
应用案例>| 家庭电子  移动电子  办公电子  通信网络  交通工具  工业电子  安全电子  医疗电子  智能电网  固态照明 
工业控制>| 产品通报  企业动态  VIP追踪 
通信电子>| 产品通报  企业动态  VIP追踪 
交通工具>| 产品通报  企业动态  VIP追踪 
基础工业>| 产品通报  企业动态  VIP追踪 
农业科技>| 产品通报  企业动态  专家追踪 
信息服务>| 企业动态 
光电子>| 企业动态 
关于我们 ┋ 免责声明 ┋ 产品与服务 ┋ 联系我们 ┋ About 365PR ┋ Join 365PR
Copyright @ 2005-2008 365pr.net Ltd. All Rights Reserved. 深圳市产通互联网有限公司 版权所有
E-mail:postmaster@365pr.net 不良信息举报 备案号:粤ICP备06070889号