类型 镜像包类型,Ray集群场景选择RAY_CLUSTER,Ray服务场景选择RAY_SERVICE。 版本名称 镜像包可有多个版本,根据当前创建信息填入一个版本名称。 版本描述 当前创建版本的描述信息。 版本类型 当前只支持OBS。 路径 当前创建版本所在的OBS路径。
授权范围如果同时支持IAM项目和企业项目,表示此授权项对应的自定义策略,可以在IAM和企业管理两个服务中给用户组授权并生效。如果仅支持IAM项目,不支持企业项目,表示仅能在IAM中给用户组授权并生效,如果在企业管理中授权,则该自定义策略不生效。
object:*", "obs:bucket:ListBucket" ] } ] } 可以执行推理相关的业务,包括注册模型,创建推理服务,进行推理。
Iceberg表服务 DataArtsFabric SQL提供一系列表服务,用户可以根据需要使用,例如清理旧快照,整理元数据、数据文件等,以提高存储、查询的效率。具体语法可参考ICEBERG表服务函数。
OBS I/O :表示OBS IO请求的详细信息。 count表示OBS IO请求的总数量。 averageRTT表示OBS IO请求的平均RTT(Round Trip Time,IO请求往返时间),单位为μs。
目前支持OBS路径,该路径需要当前用户有读取的权限。 再次单击“我的模型”,即可在模型列表中看见刚创建的模型。 父主题: 创建我的推理服务进行推理
location str 否 表存储路径,必须为合法OBS路径,支持OBS对象桶和并行文件系统。 如果该路径为OBS对象桶路径,则该表只读,否则该表支持读写。
创建模型 对象存储服务OBS IAM用户设置了DataArtsFabricFullPolicy之后,还需要设置OBS OperateAccess才能在模型管理界面创建模型并指定模型文件所在的OBS路径。
) # 显式,直接注册UDF udf = con.udf.python.register(calculate_product, database="your-database", register_type=RegisterType.OBS) # 显式,从文件注册UDF udf
cstore_buffers 设置列存和OBS、HDFS外表列存格式(orc、parquet、carbondata)所使用的共享缓冲区的大小。 列存表使用cstore_buffers设置的共享缓冲区,几乎不用shared_buffers。
) 指定UDF的注册形式 RegisterType.TEXT | RegisterType.OBS RegisterType.OBS comment 指定UDF的用户注释 str | None None 注意事项: 对于import参数,只支持用户传入当前Python函数所在的.py
默认值:空 log_min_messages 参数说明:控制写到服务器日志文件中的消息级别。
table_path 表存储路径,必须为合法OBS路径,支持OBS对象桶和并行文件系统。如果该路径为OBS对象桶路径,则该表只读,否则该表支持读写。
- IMPORTS 表示函数运行时所依赖在OBS的压缩包路径 IMPORTS子句中只能引入一个路径,即一个压缩包。 STRICT STRICT用于指定如果函数的某个参数是NULL,此函数总是返回NULL。
ibis_fabric as fabric from ibis_fabric.udf import RegisterType # 隐式注册UDF @fabric.udf.python(database="your-database", register_type=RegisterType.OBS
创建推理端点 注册模型 用户可以将存储在OBS的微调模型文件,在模型管理的界面注册为自己的微调模型。
CREATE SCHEMA 功能描述 CREATE SCHEMA为DataArtsFabric SQL服务下特有语法,该语法功能是在LakeFormation上创建指定名称的Database。
is_enable_obs_path 否 Boolean 参数解释:是否返回结果集的obs路径。 约束限制:不涉及。 取值范围:true:返回结果集的obs路径,false:返回结果集。 默认取值:不涉及。
用户只能使用OBS并行文件系统的桶,来存储UDF代码压缩包,且需要在LakeFormation上赋予IAM用户读的权限。 父主题: UDF开发(Python)
对于托管表(Managed Table),数据文件仍存储在常规的文件系统(OBS并行文件系统)中,用户可以在不告知DataArtsFabric SQL的情况下对其进行变更。