AI计算资源概述
更新时间:2024-01-03 16:12:33 推荐您在使用PAI功能前开通并购买用于AI开发或训练的资源。对于云原生资源,需要购买所需资源、创建资源配额,并将资源配额绑定到工作空间才能使用。对于大数据引擎资源,只需购买资源并将其绑定到工作空间,即可进行使用。本文为您介绍这几种资源详情。资源类型介绍
- 云原生资源 - 灵骏智算资源灵骏智算资源是PAI面向大规模深度学习及融合智算的算力资源,基于软硬件一体优化技术,构建高性能异构算力底座,具备高性能、高效率、高利用率等核心优势,满足高性能计算等领域需求。灵骏智算资源可以用于人工智能平台PAI的开发、训练、推理等多种场景。 - 通用计算资源通用计算资源(包括ECS、ECI、EGS等)为您提供灵活、稳定、易用和高性能的深度学习训练环境。开通PAI以后,系统默认会为您创建通用计算资源公共资源配额,提供多种型号的异构资源。您可以直接将该资源配额关联至工作空间进行使用。
- 大数据引擎资源 - 大数据计算MaxComputeMaxCompute是适用于数据分析场景的企业级SaaS(Software as a Service)模式云数据仓库,以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化运维投入,使您可以经济并高效地分析处理海量数据。有关MaxCompute资源的详细信息请参见什么是MaxCompute。您可以先购买并创建不同类型的MaxCompute资源配额,然后从PAI进行模型开发,再提交至MaxCompute进行大规模分布式训练。 - Flink全托管资源阿里云实时计算Flink版是阿里云基于Apache Flink构建的一站式实时大数据分析平台,提供端到端亚秒级实时数据分析能力,有关Flink全托管资源的详细信息请参见什么是阿里云实时计算Flink版。您可以在资源配额页面购买Flink全托管资源,并关联至工作空间进行模型训练。
使用引导
在AI计算资源>资源池中创建以下类型的资源组,并购买计算资源:- 通用计算资源:购买及管理该资源的操作详情,请参见新建资源组并购买通用计算资源。
- 灵骏智算资源:购买及管理该资源的操作详情,请参见新建资源组并购买灵骏智算资源。
- 云原生资源配额在资源池购买相应的计算资源后,您可以将一个或多个资源组中的计算资源分配到单个或多个资源配额中。支持创建子级资源配额,可以形成Quota Tree,提供更多排队和调度能力。 - 灵骏智算资源:新增及使用该资源配额的操作详情,请参见灵骏智算资源配额。 - 通用计算资源:新增及使用该资源配额的操作详情,请参见通用计算资源配额。
- 大数据资源配额 - 大数据计算MaxCompute:开通、购买以及使用该资源配额的操作详情,请参见MaxCompute资源配额。 - Flink全托管资源:开通、购买以及使用该资源配额的操作详情,请参见Flink全托管资源管理。
资源池功能介绍
更新时间:2024-01-16 11:39:24 您可以在资源池中创建资源组、购买云原生资源,并对其进行集中管理操作。功能介绍
新建资源组并购买资源
支持创建资源组并购买以下云原生资源:管理资源
登录并进入PAI控制台的资源池页面后,您可以通过资源组管理已购买的灵骏智算资源和通用计算资源。单击相应的资源组名称,在资源组页面中查看并管理已购买的资源。- 您可以查看资源组的基本信息、购买资源的订单列表以及节点列表等。
- 当资源即将到期时,您也可以对资源组的资源进行续费操作。
后续指引
创建资源组并购买资源后,您可以将资源分配到单个或多个资源配额中,用于AI开发或训练,详情请参见资源配额(Quota)功能介绍。 反馈新建资源组并购买灵骏智算资源
更新时间:2024-02-22 10:47:25 灵骏智算资源是阿里云PAI为您提供的大规模高密度计算资源服务,为您提供高性能AI训练、高性能计算所需的异构计算算力服务,可用于DSW和DLC完成AI开发和训练的工作。本文为您介绍如何创建资源组并购买灵骏智算资源。功能简介
资源类型
灵骏智算类型的资源,是阿里云自主研发的新一代智能计算资源,提供:- RDMA高速网络架构
- 高性能通信库
- 高性能加速软件
- GPU虚拟化的技术方案
资源组类型
阿里云PAI为您提供全托管的灵骏智算资源,您可在PAI产品控制台便捷地完成购买、使用的全流程,如果您已购买单独的灵骏硬件资源,也可将此类资源作为半托管的资源添加至PAI产品控制台,用于后续的训练任务使用。使用限制
- 支持使用的地域当前仅支持华北6(乌兰察布)地域。
- 支持使用的用户当前灵骏智算资源仅供白名单用户受限申请使用,如果您希望使用灵骏智算资源提交训练任务,您可先提交工单,申请添加灵骏智算使用白名单。
- 支持的任务类型当前灵骏智算资源仅支持TensorFlow、PyTorch、ElasticBatch和MPIJob类型的训练任务。
操作账号和权限要求
- 阿里云主账号(推荐):使用该账号可完成所有操作,无需额外授权。
- RAM用户:需要授予AliyunPAIFullAccess权限,详情请参见附录:AliyunPAIFullAccess。此时RAM用户将拥有PAI的全部权限,有操作风险,请谨慎添加。
依赖的云产品
灵骏智算资源在创建、购买及后续使用的过程中,依赖以下其他云产品,您在购买使用前需先了解依赖的云产品,并根据实际需要提前准备好对应的云产品。(必选)VPC
购买灵骏智算平台时,您需绑定一个同地域的VPC,并配置交换机与安全组信息,保障灵骏智算资源组与各云产品的网络是连通状态。(按需)公网NAT网关与EIP
如果后续您需要访问公网环境,例如使用公网环境下的自定义镜像等场景,您还需开通并配置公网NAT网关的SNAT功能,绑定EIP,实现灵骏智算资源访问公网的能力。 配置公网NAT网关的SNAT功能操作详情可参见使用公网NAT网关SNAT功能访问互联网。(按需)OSS/NAS/智算CPFS
您后续使用灵骏智算资源提交DLC任务时,需先创建数据集,当前支持使用OSS、NAS、智算CPFS类型的数据集,因此您需根据数据集的应用需要提前准备好OSS或NAS或智算CPFS资源,并创建好对应的数据集。详情请参见准备工作:准备数据集。新建资源组并购买灵骏智算资源
新建灵骏资源组
- 登录并进入PAI控制台的AI计算资源 > 资源池页面。
- 在灵骏智算资源页签中,单击新建资源组。
- 在新建资源组对话框中配置以下参数,完成后单击确定。
参数 | 说明 |
---|---|
类型 | 选择专有资源组。 |
资源组名称 | 根据界面提示设置满足规则的资源组名称。 |
专有网络&交换机&安全组 | 在下拉框中选择已创建好的VPC、交换机和安全组。说明后续如果您有访问公网的需求,还需对此处绑定的VPC进行公网NAT网关的配置并绑定EIP,因此建议选择的VPC为您后续用于访问公网的VPC。 |
购买灵骏智算资源
- 在灵骏智算资源页签的资源组列表中,单击资源组名称。
- 在资源组详情页面右上方,单击新建订单。
- 在购买页面中根据实际业务需要选择节点规格、节点数量和购买时长等必要参数,完成后单击立即购买。
- 在支付页面完成支付后,在订单列表页面中会展示已购买的灵骏智算资源列表。
相关文档
资源组创建成功并购买计算资源后,您可以进行以下操作: 反馈新建资源组并购买通用计算资源
更新时间:2023-12-22 16:03:52 为使用专属的通用计算资源进行AI开发,以提升AI开发和训练效率,您需要先创建一个专有资源组并购买必要的计算资源。本文为您介绍如何创建专有资源组和购买计算资源。背景信息
专有资源组需要购买计算资源。关于计算资源的定价详情,请参见通用计算资源计费说明。前提条件
已为DLC服务关联角色授权,详情请参见云产品依赖与授权:DLC。操作账号和权限要求
- 阿里云主账号(推荐):使用该账号可完成所有操作,无需额外授权。
- RAM用户:需要为该RAM用户授予AliyunPAIFullAccess权限,详情请参见附录:AliyunPAIFullAccess。此时RAM用户将拥有PAI的全部权限,有操作风险,请谨慎添加。
新建专有资源组
- 登录并进入PAI控制台的AI计算资源 > 资源池页面。
- 在通用计算资源页签中,单击新建资源组。
- 在新建资源组对话框中,配置以下关键参数,完成后单击确定。
参数 | 说明 |
---|---|
类型 | 选择专有资源组。 |
专有网络&交换机&安全组 | 在下拉框中选择已创建好的VPC、交换机和安全组。非必选。说明后续如果您有访问公网的需求,还需对此处绑定的VPC进行公网NAT网关的配置并绑定EIP,因此此处选择的VPC建议选择为您后续用于访问公网的VPC。 |
购买通用计算资源
- 在通用计算资源页签的资源组列表中,单击资源组名称。
- 在资源组详情页面右上方,单击新建订单。
- 在购买页面中根据实际业务需要选择节点规格、节点数量、购买时长和到期自动续费等必要参数,完成后单击立即购买。
- 在支付页面完成支付后,在订单列表页面中会展示已购买的通用计算资源列表。