存储产品大数据分析应用场景

大数据分析

场景介绍

提供高性能、高可靠、低时延、低成本的海量存储系统,与华为云的大数据服务组合使用,可大幅降低成本,帮助企业简单便捷的管理大数据

优势

  • 高性能

    处理突发的高峰流量,无需担心扩容不及时带来问题

  • 低成本

    资源弹性伸缩,按需付费

  • 高可用

    设计规格为99.995%可用性,满足业务连续性的要求

对象存储服务OBS有什么特点

  • 稳定可靠

    数据持久性高达99.9999999999%(12个9),业务连续性高达99.995%

  • 安全可信

    支持加密、防盗链、细粒度权限控制等多种数据安全功能,保障数据安全可信

  • 超高性能

    千万级TPS,2.4Gb/s单流上传速度

  • 多协议

    兼容对象及POSIX协议

OBS存储常见问题

OBS存储常见问题

  • 如何获得OBS对象存储服务?

    在云服务网站申请帐号,充值后,即可使用对象存储服务。

    若是IAM子帐号,需主帐号通过IAM授权其OBS资源使用权限,IAM子帐号才能访问OBS。

    在OBS上创建桶和上传对象,以及对桶和对象的相关操作请参见桶管理对象管理

  • OBS的数据存储在哪里?

    在OBS上创建桶时,您可以指定一个区域。在该区域内,您的数据存储在多台设备上。

  • 为什么OBS存储的数据丢失了?

    请检查桶中是否设置了生命周期过期删除规则,符合规则的对象会被删除。

    请检查桶是否授权了其他用户桶的写权限,被授权的用户都可以删除对象。若您开启了日志记录功能,可以通过日志记录查询到删除对象的用户。

  • 已删除的OBS存储数据是否可以恢复?

    桶开启了多版本控制功能时,删除的对象会保存到“已删除对象”列表中,您可以在“已删除对象”列表中恢复对象,详情请参见取消删除文件

    桶没有开启多版本控制功能时,已删除的对象不可恢复。

  • 访问OBS存储链接提示告警信息

    原因

    因为部分用户使用OBS桶时上传了包含色情、暴恐、涉政等违法违规内容,OBS和第三方平台(微信/支付宝/百度等)检测到后会封禁此资源。第三方平台在封禁此资源的同时,会将OBS域名列为不信任域名,导致其他合法使用OBS域名的用户也受到影响。

    解决方案

    需要通过第三方平台,如微信/支付宝/百度等平台或小程序使用OBS的用户,建议使用自定义域名访问OBS资源,避免封禁。

  • OBS存储桶内无对象,为什么还会产生存储费用?

    OBS的计费项之一是存储费用。桶中的对象、已删除对象和碎片均会占用存储空间,进而产生存储费用。如果桶内没有对象,请检查桶内是否还存在已删除对象或碎片。

    检查是否存在已删除对象

    什么是已删除对象?

    1、在左侧导航栏,单击“对象”。

    2、在对象列表上方,单击“已删除对象”页签,在列表中可以查看到桶中的已删除对象。

    如需清理已删除对象,请选中所有已删除对象后,单击列表上方的“删除”。

    检查是否存在碎片

    什么是碎片?

    1、在左侧导航栏,单击“对象”。

    2、在对象列表上方,单击“碎片”页签,在列表中可以查看到桶中碎片。

    如需清理碎片,请选中所有碎片后,单击列表上方的“删除”。

  • 使用OBS SDK上传超过5GB的大文件失败

    OBS服务端上传对象接口有规格限制,单次可上传的最大文件为5GB,如果需要上传超过5GB的大文件,需要通过OBS服务端提供的分段上传接口实现。具体步骤为:

    1. 调用OBS服务端初始化上传段任务接口,生成分段上传ID(Upload ID)。
    2. 调用OBS服务端上传段接口,逐个或并行上传段,每个段最大可支持5GB。
    3. 上传段完成后,调用OBS服务端合并段接口,生成最终对象。

    OBS SDK实现了OBS服务端分段上传需要使用的原子接口,可在各语言《SDK参考》的“分段上传”章节获取更多使用OBS SDK进行分段上传的介绍。

  • OBS存储如何实现备份和容灾?

    OBS通过如下方式实现备份和容灾:

    1. 创建桶时开启多AZ属性,用户数据冗余存储至多个AZ中。
    2. 通过跨区复制功能。用户可以将一个区域的桶中数据复制到另一个区域,实现云端备份。
    3. 将OBS中的数据下载到本地,本地备份数据。