OBS帮助文档概览 对象存储服务OBS提供了一系列文档,帮助您由浅入深地了解和使用对象存储服务OBS。
父主题: OBS Browser+和obsutil等工具相关
OBS管理 OBS管理概述 文件传输(推荐) 上传文件至OBS 上传文件夹至OBS 从OBS下载文件 从OBS下载文件夹
OBS转储 OBS转储成本明细 OBS转储-摊销成本的字段说明 OBS转储-原始成本的字段说明 OBS转储-(FOCUS 1.0)字段说明 父主题: 导出成本明细
OMS方式迁移 对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object Storage Service,OBS)中。
OBS管理 查询OBS桶列表 查询OBS桶对象列表 父主题: Console
OBS服务端错误码 在向OBS服务端发出请求后,如果遇到错误,会在响应中包含响应的错误码描述错误信息。
例如:obsutil cp d:\temp\test.txt obs://bucket-test/key -threshold=52428800 其中 obsutil cp d:\temp\test.txt obs://bucket-test/key可以将D盘temp路径下名为test.txt
指定obsutil上传下载时进行限速 obsutil支持通过在配置文件.obsutilconfig中配置rateLimitThreshold参数实现对上传/下载操作进行限速。
其中AccessKeyId、x-obs-security-token和Signature用于鉴权,Expires定义鉴权的有效期。临时鉴权的方法及各参数的详细解释,请参见《对象存储服务API参考》的URL中携带签名章节。
OBS事件 华为云函数可以由不同的event源触发。这些事件源可以通过event定义和配置。 OBS事件 此示例设置一个OBS事件,每当对象上传到my-service-resource时,该事件将触发first函数。
应用服务器(APP Server) 提供该Android/iOS应用的开发者开发的APP后台服务,用于用户管理和授权管理等。 对象存储服务(OBS) 华为云对象存储服务,负责处理移动应用的数据请求。 统一身份认证服务(IAM) 华为云统一身份认证服务,负责生成临时安全凭证。
步骤二:购买连接OBS的终端节点 操作场景 为了实现用户本地数据中心节点通过终端节点访问OBS服务,需要购买连接OBS服务的终端节点。 前提条件 终端节点要连接的终端节点服务已经存在。 操作步骤 进入终端节点列表页。 在“终端节点”列表页,单击“购买终端节点”。
fs.obs.secret.key,fs.obs.endpoint和fs.obs.impl。
相比OBS服务,视频点播服务更能满足在线点播视频的业务诉求。 视频点播的媒资存储是基于OBS桶的,但是该OBS桶对用户是不可见的,不占用户的OBS空间,也无需用户额外开通OBS服务。 父主题: 产品咨询
配置项 在HDFS集群配置中选择“高级”,在core-site.xml的群集范围高级配置代码段(安全阀)增加OBS的ak、sk、endpoint和impl配置,对应名称为fs.obs.access.key、fs.obs.secret.key、fs.obs.endpoint、fs.obs.impl
文件导出速度受OBS服务的写入带宽上限影响,默认是16Gbit/s,如果大模型训练生成的Checkpoint文件过大、导出速度过慢,可提交工单申请调大OBS服务的写入带宽。 父主题: 基本配置
父主题: OBS Browser+和obsutil等工具相关
OBS即一种云存储服务,它提供海量、可弹性扩展的存储服务。OBS所有的业务、存储节点采用分布集群方式工作使得OBS的可扩展性更高。提供数据多份冗余、一致性检查等功能使得存储在OBS中的数据更加安全、可靠。OBS按照使用量付费,使得成本易于预测。
导出DLI表数据至OBS中 支持将数据从DLI表中导出到OBS服务中,导出操作将在OBS服务新建文件夹,或覆盖已有文件夹中的内容。 注意事项 支持导出json格式的文件,且文本格式仅支持UTF-8。