开箱即用,资源弹性,按需使用 预置开源主流三方大模型的推理服务,客户可直接调用预置推理服务API下发文本对话等任务,无需购买资源,按需付费。 推理服务支持自动扩缩。 全托管Ray支持Pod级自动扩缩,应对客户请求波峰压力,实现资源动态分配。
功能介绍 DataArtsFabric SQL功能介绍
查询数据 单表查询 多表连接查询 WITH表达式 SQL on Iceberg
GUC参数 查看和设置GUC参数 连接和认证 查询规划 客户端连接缺省设置 锁管理
函数参考 自定义函数
消息管理 创建消息通知策略 查询消息通知策略列表 删除消息通知策略 父主题: API
TMS管理 查询项目标签 查询资源标签 查询资源实例列表 查询资源实例数量 批量添加资源标签 批量删除资源标签 父主题: API
模型定义 创建模型 查询模型列表 列举基模型 删除模型的指定版本 更新模型信息 查看模型版本列表 删除未使用的模型定义 父主题: API
类型"char"只用了一个字节的存储空间。它在系统内部主要用于系统表,主要作为简单化的枚举类型使用。 表2 特殊字符类型 名称 描述 存储空间 name 用于对象名的内部类型。 64字节。 "char" 单字节内部类型。 1字节。
PG_AUTHID PG_AUTHID系统表存储有关数据库认证标识符(角色)的信息。角色把“用户”的概念包含在内。一个用户实际上就是一个rolcanlogin标志被设置的角色。任何角色(不管rolcanlogin设置与否)都能够把其他角色作为成员。
PLAN 是否将执行计划存储在plan_table中。当该选项开启时,会将执行计划存储在PLAN_TABLE中,不打印到当前屏幕,因此该选项为on时,不能与其他选项同时使用。 取值范围: ON(缺省值):将执行计划存储在plan_table中,不打印到当前屏幕。
ANALYZE | ANALYSE 功能描述 用于收集有关数据库中表内容的统计信息,统计结果存储在LakeFormation上。执行计划生成器会使用这些统计数据,以确定最有效的执行计划。 能够执行ANALYZE特定表的用户,包括表的所有者、被授予该表上读取权限的用户。
注意事项: 如果频繁插入小数据,可能会出现小文件问题,建议定期重写data/manifest文件以保障存储、查询效率。 当前仅支持数据文件以Parquet格式写入。
DataArtsFabric SQL DataArtsFabric SQL使用流程 管理SQL端点 使用SQL编辑器 生态组件对接
大模型推理场景 大模型推理场景介绍 大模型推理使用流程 用公共推理服务进行推理 创建我的推理服务进行推理 通过AOM查看全量指标
产品架构 DataArtsFabric提供高性能、高可靠、低时延、低成本的海量存储系统,与华为云的大数据服务组合使用,可大幅度降低成本,帮助企业简单快捷地管理大数据。
应用场景 本节介绍DataArtsFabric服务的主要应用场景。 数据工程 高效处理大规模数据,通过并行计算加速数据处理过程,例如数据清洗、转换和聚合。 分布式机器学习 Ray支持分布式训练和调优,可以用于处理大规模数据集和模型,使得模型训练更加高效。
约束与限制 Ray、XDS约束限制 DataArtsFabric SQL约束限制
系统表 PG_AGGREGATE PG_ATTRIBUTE PG_AUTHID PG_CLASS PG_COLLATION PG_DATABASE PG_FOREIGN_DATA_WRAPPER PG_FOREIGN_SERVER PG_NAMESPACE PG_OPCLASS PG_OPERATOR
性能调优 性能调优概述 系统调优 SQL调优 SQL调优案例 Python UDF性能调优