检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
然后执行如下命令,获取客户端一键部署工具: curl -O -k "https://cloudtable-publish.obs.myhuaweicloud.com/quick_start_hbase_shell.sh" 此命令适用于HBase 1.x版本。
成长地图 | 华为云 表格存储服务 表格存储服务(CloudTable)为用户提供专属集群,即开即用,适合业务吞吐量大,时延要求低的用户。轻松运行HBase、ClickHouse等大数据组件。 产品介绍 立即使用 立即使用 成长地图 由浅入深,带您玩转CloudTable 01 了解
CloudTable HBase存储的是原始数据吗? CloudTable HBase服务存储的是原始数据,支持使用压缩存储,支持的压缩算法有SNAPPY和GZ。CloudTable HBase不会对原始数据做加解密处理,如果需要数据加解密,请在应用程序的业务代码侧实现。 父主题:
curl -O -k "https://cloudtable-publish.obs.myhuaweicloud.com/cloudtable-client/quick_start_hbase_shell.sh" 此命令适用于HBase 2.x版本。 一键部署包内置校验文件。
数据导入 使用DLI Flink作业实时同步MRS Kafka数据至CloudTable HBase集群 使用DLI Flink作业实时同步MRS Kafka数据至CloudTable ClickHouse集群
对象存储服务OBS CloudTable使用对象存储服务(Object Storage Service,简称OBS)存储集群数据的备份和快照,实现安全、高可靠和低成本的存储需求。 了解更多OBS的相关信息,请参见对象存储服务。
Observer Observer主要用于扩展集群的查询并发能力,可选部署。Observer不参与选主,不会增加集群的选主压力。 StarRocks基本概念 在StarRocks中,数据都以表(Table)的形式进行逻辑上的描述。
样例代码 此章节主要介绍CloudTable ClickHouse冷热分离的使用命令,以及冷数据如何自动存储到obs桶中。 样例代码 创建ClickHouse冷热分离表test_table。
表示超过90天转存OBS。 TTL date + INTERVAL 90 DAY TO DISK 'cold_disk' INTERVAL支持的操作:second,minute,hour,day,week,month,quarter,year。 导入数据测试验证。
权限管理 创建用户并授权使用CloudTable
表1 导入方式说明 导入方式 支持格式 Broker Load parquet、orc、obs Stream Load csv、json、parquet、orc 导入说明 Doris的数据导入实现有以下共性特征,这里分别介绍,以帮助大家更好的使用数据导入功能。
obs.secret_key secret key,获取方式请参见对象存储服务的获取访问密钥(AK/SK)章节。 obs.endpoint obs地址,获取方式请参见对象存储服务的获取终端节点章节。 obs.region obs region,在obs页面查看。
ExistingJobStatus 已存在的Label对应的导入作业的状态。 这个字段只有在当Status 为 “Label Already Exists”时才会显示。用户可以通过这个状态,知晓已存在Label对应的导入作业的状态。
用户可以定义冷热管理表,将符合规则的冷数据切换至OBS上进行存储,可以按照分区自动进行冷热数据的判断和迁移。 原理介绍 OBS对象存储是支持海量数据存储,并提供安全可靠的、低成本的分布式存储服务,ClickHouse基于OBS的优势构建冷热分离存储架构。
配额说明 表格存储服务用户默认的基础资源如下: 实例数 CPU数量 内存容量(GB) 磁盘数 磁盘容量(GB) 上述资源的配额查看及修改,请参见关于配额。
fs.obs.endpoint的获取方式见请参见对象存储服务的获取终端节点章节。
使用限制 使用CloudTable前,您需要认真阅读并了解以下使用限制。 CloudTable集群必须创建在VPC子网内。 建议使用支持的浏览器登录表格存储服务。 Chrome:36.0及更高版本 Mozilla FireFox:35.0及更高版本 Internet Explorer
认证类型选择SIMPLE,访问存储在OBS中的Hive数据。 认证类型选择KERBEROS,访问存储在OBS中的Hive数据。
续费 续费概述 手动续费 自动续费
AWS_ENDPOINT obs地址,获取方式见请参见对象存储服务的获取终端节点章节。 AWS_REGION obs region,在obs页面查看。 file.meta.cache.ttl-second 元数据缓存设置。 hive.version Hive版本。