0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浪潮信息发布大模型智算软件栈OGAI,为大模型创新打造高效生产力

全球TMT 来源:全球TMT 作者:全球TMT 2023-08-28 08:08 次阅读

浪潮信息正式发布大模型智算软件栈 OGAI。OGAI (Open GenAI Infra)"元脑生智",是为大模型业务提供AI算力系统环境部署、算力调度保障及模型开发管理能力的全栈全流程的智算软件栈。OGAI由浪潮信息基于大模型自身实践与服务客户的专业经验而开发,旨在为大模型研发与应用创新全力打造高效生产力,加速生成式AI产业创新步伐。

大模型是当前通用人工智能产业发展创新的核心威廉希尔官方网站 。目前国内已发布的生成式AI模型超过了100个,"百模争秀"的格局初现。但大模型从研发到应用的各环节中,依然面临诸多挑战,如大模型算力的系统全栈问题、兼容适配问题、性能优化问题等。

OGAI是浪潮信息从当前大模型算力建设、模型开发和应用落地的实际需求出发,秉承全栈全流程、算力充分释放、实战验证提炼的设计原则打造而成。OGAI由5层架构组成,从L0到L4分别对应基础设施层的智算中心OS、系统环境层的PODsys、调度平台层的AIStation、模型工具层的YLink和多模纳管层的MModel。

L0层智算中心OS:面向大模型算力服务的智能算力运管平台,满足多租户以裸金属为主的弹性AI算力运管需求。其中,高效的裸金属服务支持分钟级部署上千规模裸金属节点并按需进行弹性扩展,实现异构计算芯片、IB、RoCE高速网络、高性能存储等环境一键获取,并实现计算、网络、数据隔离以保障业务安全。

L1层PODsys:开源、高效、兼容、易用的智算集群系统环境部署方案。聚焦智算集群部署场景,从OS、驱动到系统监控可视化、资源调度等集群系统环境要素全面覆盖,选用最稳定和广泛兼容的软件版本,通过一系列脚本工具简化部署过程,缩短算力上线周期,并可向企业用户提供实施安装服务和集群性能校准的专家服务。

L2层AIStation:面向大模型开发的商业化人工智能算力调度平台。针对大模型训练中常见的训练中断难题,可实现训练异常快速定位,断点自动续训:通过快速定位芯片、网卡、通讯设备异常或故障,实现全局训练暂停保持,热备算力自动弹性替换,健康节点快速CheckPoint读取,实现断点自动续训。

L3层YLink:面向大模型数据治理、预训练、微调的高效工具链。聚焦于大模型的数据治理、预训练、微调等开发过程,集成了浪潮信息在大模型研发中的自研工具和开源工具,如数据处理工具包(Y-DataKit)、大模型训练工具包(Y-TrainKit)和大模型微调工具包(Y-FTKit)等等,通过这些多样且完善的工程化、自动化工具,加速大模型的训练和开发效率。

L4层MModel:提供多模型接入、服务、评测等功能的纳管平台。核心组件包括数据集管理、模型纳管和评测,可以方便开发者和研究人员更好地管理多版本、多类型的基础大模型与任务模型,并通过多样化的评测数据集与评测任务,对多个模型进行生成准确率、推理延迟、推理稳定性等指标进行全面评估。

浪潮信息高级副总裁、AI&HPC总经理刘军表示:"OGAI提供完善的工程化、自动化工具软件堆栈,将帮助更多企业顺利跨越大模型研发应用门槛,充分释放大模型创新生产力。浪潮信息将通过智算系统软硬件高度协同进行持续创新,持续培育繁荣元脑生态,推动实现‘助百模,智千行',加速生成式AI产业创新。"

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 浪潮
    +关注

    关注

    1

    文章

    459

    浏览量

    23857
  • AI
    AI
    +关注

    关注

    87

    文章

    30805

    浏览量

    268942
  • 大模型
    +关注

    关注

    2

    文章

    2436

    浏览量

    2665
收藏 人收藏

    评论

    相关推荐

    浪潮信息源2.0大模型与百度PaddleNLP全面适配

    近日,浪潮信息宣布其开源大模型源2.0已全面适配百度PaddleNLP。这一举措标志着大模型开发生态正加速进化,用户提供了更加便捷、高效
    的头像 发表于 10-17 18:15 514次阅读

    浪潮信息发布元脑企智一体机

    在2024中国大会上,浪潮信息正式发布了其创新的元脑企智一体机。这款一体机融合了元脑企智EPAI企业大
    的头像 发表于 09-30 16:50 1398次阅读

    浪潮信息:元脑企智EPAI助力金融大模型快速落地

    浪潮信息在AI底座建设、大模型开发领域积累的成熟、成功经验工具化,助力金融机构又快、又稳地部署生成式AI应用,助力金融数智化跨越式发展。
    的头像 发表于 09-20 16:07 344次阅读
    <b class='flag-5'>浪潮信息</b>:元脑企智EPAI助力金融大<b class='flag-5'>模型</b>快速落地

    浪潮信息发布AIStation V5,全面支持大模型开发流程与高效调度

    北京2024年7月11日 /美通社/ -- 7月9日,在"元脑中国行"全国巡展济南站上,浪潮信息发布AIStation 人工智能开发平台V5升级版,具备全面的大模型流程支持能力,帮助企业用户降低构建
    的头像 发表于 07-12 09:37 405次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>AIStation V5,全面支持大<b class='flag-5'>模型</b>开发流程与<b class='flag-5'>高效</b><b class='flag-5'>算</b><b class='flag-5'>力</b>调度

    浪潮信息携全产品和方案亮相WAIC 2024

    7月4日,2024世界人工智能大会(WAIC2024)在上海开幕。大会聚焦大模型、机器人、自动驾驶等重点领域,吸引众多国内外知名人工智能企业参会。作为全球领先的IT基础设施供应商,浪潮信
    的头像 发表于 07-05 18:04 1475次阅读

    浪潮信息重磅发布“源2.0-M32”开源大模型

    浪潮信息近日发布了一款全新的开源大模型——“源2.0-M32”。这款大模型在“源2.0”系列大模型的基础上,进行了深度的威廉希尔官方网站
    的头像 发表于 06-05 14:50 785次阅读

    毕昇大模型应用开发平台+浪潮信息AIStation,让大模型定制更简单

    北京2024年6月5日 /美通社/ -- 近日,毕昇大模型应用开发平台与浪潮信息AIStation智能业务生产创新平台完成兼容性互认证。基于毕昇和
    的头像 发表于 06-05 11:58 437次阅读
    毕昇大<b class='flag-5'>模型</b>应用开发平台+<b class='flag-5'>浪潮信息</b>AIStation,让大<b class='flag-5'>模型</b>定制更简单

    浪潮信息发布源2.0-M32开源大模型,模效率大幅提升

    5月28日,浪潮信息发布“源2.0-M32”开源大模型。“源2.0-M32”在基于”源2.0”系列大模型已有工作基础上,创新性地提出和采用了
    的头像 发表于 05-29 09:34 423次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>源2.0-M32开源大<b class='flag-5'>模型</b>,模<b class='flag-5'>算</b>效率大幅提升

    浪潮信息发布“源2.0-M32”开源大模型

    浪潮信息近日推出了革命性的“源2.0-M32”开源大模型。该模型在源2.0系列基础上,引入了“基于注意机制的门控网络”威廉希尔官方网站 ,构建了一个包含32个专家的混合专家
    的头像 发表于 05-29 09:08 648次阅读

    模型专门优化 浪潮信息发布分布式全闪存储AS13000G7-N系列

    北京2024年5月10日 /美通社/ -- 近日,浪潮信息发布模型专门优化的分布式全闪存储AS13000G7-N系列。该系列依托浪潮信息
    的头像 发表于 05-10 16:37 428次阅读
    <b class='flag-5'>为</b>大<b class='flag-5'>模型</b>专门优化 <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>分布式全闪存储AS13000G7-N系列

    浪潮信息发布模型专门优化的分布式全闪存储AS13000G7-N系列

    近日,浪潮信息发布模型专门优化的分布式全闪存储AS13000G7-N系列。该系列依托浪潮信息自研分布式文件系统,搭载新一代数据加速引擎D
    的头像 发表于 05-08 09:38 560次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b><b class='flag-5'>为</b>大<b class='flag-5'>模型</b>专门优化的分布式全闪存储AS13000G7-N系列

    浪潮信息发布企业大模型开发平台&quot;元脑企智&quot;EPAI,加速AI创新落地

    of AI),企业AI大模型落地应用提供高效、易用、安全的端到端开发平台,提供数据准备、模型训练、知识检索、应用框架等系列工具,支持调度多元
    的头像 发表于 04-18 21:21 467次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>企业大<b class='flag-5'>模型</b>开发平台&quot;元脑企智&quot;EPAI,加速AI<b class='flag-5'>创新</b>落地

    浪潮信息发布企业大模型开发平台“元脑企智”EPAI

    应用提供高效、易用、安全的端到端开发平台,提供数据准备、模型训练、知识检索、应用框架等系列工具,支持调度多元和多模算法,帮助企业高效开发
    的头像 发表于 04-18 10:12 384次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>企业大<b class='flag-5'>模型</b>开发平台“元脑企智”EPAI

    浪潮信息&quot;源2.0&quot;大模型YuanChat支持英特尔最新商用AI PC

    % 。企业可以在全新的英特尔商用客户端AI PC上,使用AI PC大模型效率工具"YuanChat"快速本地化部署和运行"源2.0"大模型, 以更快的访问速度、更高的性能和更好的数据安全控制,轻松完成自动编程、商业数据计算、公文写作等任务,释放大
    的头像 发表于 03-27 22:52 499次阅读
    <b class='flag-5'>浪潮信息</b>&quot;源2.0&quot;大<b class='flag-5'>模型</b>YuanChat支持英特尔最新商用AI PC

    潞晨科技Colossal-AI + 浪潮信息AIStation,大模型开发效率提升10倍

    北京2024年2月29日 /美通社/ -- 近日,潞晨科技Colossal-AI大模型开发工具与浪潮信息AIStation智能业务创新生产平台完成兼容性互认证。基于AIStation平台部署与调度
    的头像 发表于 03-01 09:43 485次阅读
    潞晨科技Colossal-AI + <b class='flag-5'>浪潮信息</b>AIStation,大<b class='flag-5'>模型</b>开发效率提升10倍