什么是项目 云的每个区域默认对应一个项目,这个项目由系统预置,用来隔离物理区域间的资源(计算资源、存储资源和网络资源),以区域默认单位为项目进行授权,IAM用户可以访问您账号中该区域的所有资源。 如果您希望进行更加精细的权限控制,可以在区域默认的项目中创建子项目,并在子项目中购买资源
准备工作 创建IAM用户并授权使用DataArtsFabric 配置DataArtsFabric服务委托权限 创建接入客户端 创建工作空间
表1 DataArtsFabric服务计费模式 计费模式 付费方式 计费周期 适用计费项 包年包月 预付费 按照订单的购买周期结算。 按订单的购买周期计费。 RAY资源。 按需 后付费 按照云服务器实际使用时长计费。 按照资源实际使用量,每小时出话单扣费。
在保留期内资源将停止服务。保留期满仍未续费或充值,存储在云服务中的数据将被删除、云服务资源将被释放。详细说明请参考资源停止服务说明。 资源到期 如果账号欠费,会根据“客户等级”定义不同的保留期时长。
计费项 Ray、XDS计费项 DataArtsFabric SQL计费项
产品规格 DataArtsFabric SQL产品规格 DataArtsFabric SQL产品规格如下表所示。 表1 SQL产品规格 类型 规格 算力 DCU fabric.sql.dcu.std 提供约1CPU4G内存算力。
开箱即用,资源弹性,按需使用 预置开源主流三方大模型的推理服务,客户可直接调用预置推理服务API下发文本对话等任务,无需购买资源,按需付费。 推理服务支持自动扩缩。 全托管Ray支持Pod级自动扩缩,应对客户请求波峰压力,实现资源动态分配。
功能介绍 DataArtsFabric SQL功能介绍
查询数据 单表查询 多表连接查询 WITH表达式 SQL on Iceberg
GUC参数 查看和设置GUC参数 连接和认证 查询规划 客户端连接缺省设置 锁管理
函数参考 自定义函数
消息管理 创建消息通知策略 查询消息通知策略列表 删除消息通知策略 父主题: API
TMS管理 查询项目标签 查询资源标签 查询资源实例列表 查询资源实例数量 批量添加资源标签 批量删除资源标签 父主题: API
模型定义 创建模型 查询模型列表 列举基模型 删除模型的指定版本 更新模型信息 查看模型版本列表 删除未使用的模型定义 父主题: API
同时,Ray生态系统还包括一些高级库,例如Ray Tune(用于超参数调整)、RLlib(用于强化学习)、Ray Serve(用于模型服务)等,以满足不同场景下的需求。
SDK概述 数智融合服务软件开发工具包(DataArts Fabric SDK,DataArts Fabric Software Development Kit)是对DataArtsFabric服务提供的REST API进行的封装,以简化用户的开发工作。
DataArtsFabric SQL DataArtsFabric SQL使用流程 管理SQL端点 使用SQL编辑器 生态组件对接
大模型推理场景 大模型推理场景介绍 大模型推理使用流程 用公共推理服务进行推理 创建我的推理服务进行推理 通过AOM查看全量指标
根据应用程序的需求以细粒度增量扩展资源,与为峰值负载预置资源池的服务相比,可为客户节省高达50%的成本。
应用场景 本节介绍DataArtsFabric服务的主要应用场景。 数据工程 高效处理大规模数据,通过并行计算加速数据处理过程,例如数据清洗、转换和聚合。 分布式机器学习 Ray支持分布式训练和调优,可以用于处理大规模数据集和模型,使得模型训练更加高效。