国产AI算力加持!昇思大模型平台震撼升级,轻松上手,开箱即用
来源 | 新智元2023-04-12 16:27:13
【新智元导读】这次,昇思大模型平台迎来了全新升级,不仅推出了大模型产业专区,而且还开放了AI画廊社交平台,让开发者找到创作乐趣。自2019年开始,超大规模预训练模型逐渐涌出,到2020年发展到白炽化阶

【新智元导读】这次,昇思大模型平台迎来了全新升级,不仅推出了大模型产业专区,而且还开放了AI画廊社交平台,让开发者找到创作乐趣。

自2019年开始,超大规模预训练模型逐渐涌出,到2020年发展到白炽化阶段。

1750亿参数的GPT-3大模型的发布,大模型参数规模实现了从亿级到千亿级的突破。

2022年ChatGPT的横空出世再次点燃了人工智能火炬,国内外大厂开始纷纷发布自家大模型。

可以说,大模型迈出了通用人工智能的第一步,作为未来社会技术突破与变革的关键力量,将深刻影响未来产业格局 。

图片

然而,模型复杂度高,参数量大,对算力提出了极大的需求,基于目前业界已有主流框架进行大模型的开发,并不能很好地适应产业需求。

为此,昇思MindSpore作为新时代的AI框架,在设计之初就充分考虑大模型开发时可能会遇到的问题,为大模型创新开发提供了完备的硬核技术。

通过软硬件协同优化,实现一行代码即可完成模型自动切分、分布式并行计算,将大模型开发并行代码量降低 80%、系统调优时间下降 60%。

此外,它还有极致的全局内存复用能力,512卡就可以训练10 万亿参数大模型,极大降低大模型训练成本;极简的断点续训能力,开发者无需从头开始,千亿参数模型在分钟级就可无损恢复。

昇思MindSpore充分发挥原生支持大模型训练的能力,降低大模型创新开发门槛。

基于昇思MindSpore AI框架,中科院自动化所、武汉大学等科研单位先后发布业界首个图文音三模态大模型「紫东.太初」,全球首个智能遥感框架「武汉.LuoJia」、业界首个基于扩散模型和最大开源中文数据集生成的中文生图大模型「悟空.画画」等多个大模型。

为了让AI大模型更好地普惠大众,昇思社区打造了首个基于国产AI算力和框架、服务全球开发者的一站式大模型平台,将大模型的能力开放给开发者。

图片

昇思大模型平台:https://xihe.mindspore.cn/

平台是集模型选型、创意分享、在线体验为一体的一站式AI学习与实践平台,具备AI实验室,模型库,大模型在线体验与微调,数据集等多个模块,提供超强免费算力,经典易用的样例,优质精美的在线学习课程资源,类型多样的AI大赛和内容有趣的社区活动等。

近期,社区为了给企业开发者更好的体验,平台在各个模块也进行了升级:

  • 在产业布局上,打造大模型行业专区,包括电力专区、工业专区等,面向企业开发者提供从模型训练、推理到部署的AI应用开发专区。

  • 在全球化布局上,联手Hugging Face推出基于昇腾AI的首个基于国产AI算力的Space体验专区,开发者可以在Hugging Face上体验所有昇思大模型推理服务。

  • 在新一代AIGC社交上,开放了业界首个基于AI画廊的技术内容社交能力。

  • 在平台易用性方面,支持Jupyter Notebook在线编程,新增MindSpore Transformers模块。另外,平台还推出了课程模块,覆盖了CV、NLP以及大模型开发多个领域,让开发者可以在平台从0到1的学习与实践AI项目。

开放基于AI画廊技术社交平台,让AI「大众化」

昇思大模型平台对悟空.画画大模型体验功能进行全新升级!开放了业界首个基于AI画廊的技术内容社交能力,让AI技术从「专业化」走向「大众化」。悟空.画画是基于Diffusion结构开发的中文文生图大模型,训练时使用了中文亿级文图数据,借助悟空中文视觉-语言预训练模型的判别能力实现更好的中文图文匹配。悟空.画画有着强大的文生图能力,能够识别各类场景描述与绘画风格。开发者们在进行文生图的过程中,可以通过简单的提示,选择自己喜欢的风格,就能够创作出优秀、精美的画作,让每个开发者使用便捷,并且容易上手。与此同时,对于生成的精美画作,开发者还可以通过全新的「AI画廊」,发布自己的创意作品。最重要的是,当你看到了他人惊艳的作品,还能点赞、分享和收藏。不仅增加了你与其他开发者的互动,而且还丰富了AI社交娱乐性,从中找到了AI带来的乐趣。

图片

在线体验入口:https://xihe.mindspore.cn/modelzoo/wukong/album平台使用AIGC内容创作生成技术连接人与人之间的关系,让AI生成图片走入了人们的日常。根据用户的喜好,为用户插上想象力的翅膀,通过算法快速实现用户的想法,结合收藏,分享等行为,进一步丰富用户在内容方向的互动体验。平台利用生成式AI为用户构建了一个创造性的新世界,在这里,我们帮助用户实现他们天马行空的想法,收获拥有同样想法的朋友的认可。当然,除了丰富用户的社交,生成式AI的作用远不止于此,在某些情况下它可以解锁更好、更快、更便宜的创作,产生巨大的劳动生产率和经济价值。对于企业用户而言,除了可以随时发现平台上富有创意的作品,也可以根据企业自身的需求和输入,自动生成风格多样的内容,帮助企业高效优化设计方案。

图片

金融 数字 科技感 #风格:高清

图片

基于悟空.画画生成图片制作的金融画报

在线体验悟空.画画:https://xihe.mindspore.cn/modelzoo/wukong构建大模型产业专区,助力企业数智化转型

平台规划建设业界首个大模型产业专区,旨在面向企业开发者提供从模型训练、推理到部署的AI应用开发专区。目前,已上线人文、电力、医疗、工业四个场景企业案例。后续平台将上线相关案例精选模型,如国潮AIGC模型、电力领域大模型等,帮助企业在平台上部署大模型,建立行业样例标杆。

图片

结合已有模块和能力,平台将为企业打造一套完整的平台解决方案:- 在开发方面:联合行业客户开放企业模型相关项目代码到AI实验室,开放相关业务模型到模型库,供开发者查询/下载/本地使用,开发者可基于该代码在线体验模型训练,评估和推理,并进行二次优化,将优化后的结果贡献平台与企业。

图片
  • 在赋能方面:平台课程模块将持续上线高价值的企业AI课程,帮助开发者更好认识企业的业务;当前面临的现状、痛点;为企业开发者赋能,能够快速理解业务分析符合企业需求的模型。同时,平台可联合企业策划并开展比赛,在比赛模块上线企业专题比赛。

图片
  • 在伙伴共建方面:昇思社区将联合企业,共同开展企业专场活动;在平台展示企业精选模型,帮助企业快速部署大模型,树立行业标杆。- 在易用性方面:平台后台可提供数据统计模块,统计企业各个模块的访问量,调用次数,模型下载量等指标。平台还将在未来建设更多企业专区,欢迎企业加入昇思社区,与昇思一同推动企业数智化转型,让大模型赋能千百行业。联合各地人工智能计算中心与Hugging Face社区,让大模型服务全球开发者

平台是首个基于国产AI算力和框架、服务全球开发者的一站式大模型平台,可实现跨人工智能计算中心弹性调度各地昇腾AI算力,支撑开发者高效开发。目前,全国已有20多座城市启动建设人工智能计算中心, 10多个城已正式上线,为区域发展提供普惠AI算力。

图片

为了让算力被最大化的使用,昇思大模型平台将优化现有算力管理结构,让各计算中心能够无缝接入,演进算力调度策略和机制,根据策略自动实现训练任务多算力中心资源的最佳分配。通过联结多计算中心算力,使得大模型的开发不再需要考虑算力资源问题,平台根据用户的需求,所属的地域和算力情况等因素进行综合考量,自动为用户分配可用的算力节点,让大模型开发和使用变得更加简单。截至目前,平台已接入首个基于昇腾AI的人工智能计算中心部署了包括悟空.画画,紫东.太初等多个AI大模型,对开发者开放大模型的在线体验服务。同时平台联手Hugging Face社区推出基于昇腾AI的的首个Space体验专区,搭载平台后台的大模型推理能力,让全球开发者可以在Hugging Face上体验所有昇思大模型推理服务。

图片

未来,昇思大模型平台将接入更多的人工智能计算中心,提供更多基于国产算力的大模型开发服务,同时联合更多外部开源社区,包括但不限于Hugging Face社区,使得更多的国内外开发者能够零距离地感受到基于国产算力开发的昇思大模型带来的极致体验。手把手教学,平台即开即用

除了上述提到的大模型和算力外,昇思大模型平台还为企业提供了开发和内容上的赋能。- 昇思大模型平台新增支持Jupyter Notebook在线编程,预装丰富依赖,无需环境搭建,即开即用;- 同时,此次升级还新增了MindSpore Transformers模块,并提供pipeline高阶易用接口简化代码,支持开发者一键下载、加载、推理和部署模型,帮助企业开发者快速实现创意。

图片

不仅如此,开发者也可以在Jupyter中编写Gradio应用代码,实现推理可视化。

图片

除了模型的开发和维护外,开发者还可以通过昇思大模型平台一键在线学习,参加比赛。- 面向企业开发者提供了优质精美的在线课程资源,如AI大模型、计算机视觉等多领域系列,平台支持作业布置与提交等能力。通过课程赋能学习的开发者,社区可颁发认证证书,助力企业人才培养。

图片

  • 平台提供了类型多样的AI大赛,比如面向新手的昇思学习赛,AI挑战赛等等。平台支持自动打分、实时排名,辅助比赛高效进行。比赛模块支持企业、高校基于昇思MindSpore开展赛事,帮助企业打通开发者渠道路线。

图片

赋能千行百业,昇思大模型平台将持续发力

昇思MindSpore开源社区一直秉承「开发者第一、技术优先」的理念,持续使能科研创新与产业应用,通过原生的技术体系,不断加速中国AI应用生态。截止目前昇思MindSpore 社区已拥有核心贡献者11000+,下载量超过435万,服务企业5500+,MSG足迹遍布国内外30个城市。其中MSG暴走校园走进国内外近百所高校,为万名高校开发者赋能;MSG企业行走过8大城市,并开展7大领域互动,大幅覆盖AI企业用户。昇思MindSpore在码云(Gitee)千万开源项目中活跃度排名第一。昇思MindSpore AI框架已经成为了大模型开发的技术支撑,开源开放更使得产学界可以基于它研发自己的大模型。未来昇思大模型平台将持续发力,让更多基于昇思 MindSpore AI 框架与各地人工智能计算中心的昇腾 AI 强大算力不断发展基础大模型和行业大模型的产业生态,赋能千行百业数字化、智能化。