检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
否,修改Windows服务器的VPC和子网,与Kafka实例一致。 检查安全组是否配置正确?安全组的配置请参考选择和配置安全组。 是,执行3。 否,修改安全组配置。 在Kafka实例控制台,重启Kafka Manager,具体操作请参考重启Kafka Manager。
management/topics/{topic}/partitions-reassignment { "partition" : 3 } 响应示例 无 状态码 状态码 描述 204 新增分区操作成功。 错误码 请参见错误码。 父主题: 实例管理
统因突发流量崩溃。消息队列提供亿级消息堆积能力,3天的默认保留时长,消息消费系统可以错峰进行消息处理。 另外,在商品秒杀、抢购等流量短时间内暴增场景中,为了防止后端应用被压垮,可在前后端系统间使用Kafka消息队列传递请求。 图3 消息队列应对秒杀大流量场景 日志同步 在大型业务
消息数 该分区中的消息数。 生产者信息 2023年7月10日以及之前创建的Topic,在Topic详情页面不显示“生产者”页签。 图3 生产者信息 表3 Topic的生产者信息 参数名称 说明 Broker地址 生产者连接的Kafka实例Broker地址。 生产者地址 生产者客户端的地址。
Demo是一个Maven构建的Java工程,因此需要配置JDK环境,以及IDEA的Maven插件。 图1 选择“导入工程” 图2 选择“Maven” 图3 选择Java环境 其他选项可默认或自主选择。然后单击Finish,完成Demo导入。 导入后Demo工程如下: 配置Maven路径。 打开“File
KMOffsetCache-dms-vm-fa3cf9d6-manager-shared-server-0 for generation 1", "groupId":"KMOffsetCache-dms-vm-fa3cf9d6-manager-shared-server-0"
出现该告警时,需要修改实例存储空间。具体操作,请参考变更实例规格。 broker_memory_usage 内存使用率 节点 告警阈值:原始值>90% 连续触发次数:3 告警级别:紧急 该指标为Kafka节点虚拟机层面采集的内存使用率。 出现该告警时,需要修改实例基准带宽/代理个数,即扩节点。具体操作,请参考变更实例规格。
/etc/hosts 在键盘上按“i”,在“/etc/hosts”文件中增加host和IP的映射关系。 ip1 主机名称1 ip2 主机名称2 ip3 主机名称3 表1 “/etc/hosts”文件参数说明 参数名称 说明 IP地址 Kafka实例的连接地址,从前提条件中获取。 主机名称 每个实例主机的名称。
Kafka用户管理支持自定义用户 增加自定义用户能力,可为企业中每个用户单独配置不同的Topic访问权限。 商用 创建SASL_SSL用户 2021年3月 序号 功能名称 功能描述 阶段 相关文档 1 支持ACL模型授权 支持为不同用户设置不同权限:发布、订阅、发布+订阅,使用此功能可以更好对用户进行细粒度授权。
按照提示信息输入keystore密码,并记录此密码,此密码在后续步骤中会使用。 密码需要满足如下要求: 8~32个字符。 至少包含以下字符中的3种:大写字母、小写字母、数字、特殊字符`~!@#$%^&*()-_=+\|[{}]:'",<.>/?和空格,并且不能以-开头。 非弱密码(如
有不同的处理策略,有的客户端默认值会是0或者-1,则查询不到消息。 解决方法:检查客户端消息的createTime设置是否正确。 可能原因3:磁盘容量超过95%,且“容量阈值策略”设置为“自动删除”。 “容量阈值策略”设置为“自动删除”,表示磁盘容量达到95%时,系统会删除最早的
com/huaweicloud/huaweicloud-sdk-go-v3/core/auth/basic" kafka "github.com/huaweicloud/huaweicloud-sdk-go-v3/services/kafka/v2" "github.com/
cluster.c3.mini:Kafka实例的基准带宽为100MByte/秒。 dms.instance.kafka.cluster.c3.small.2:Kafka实例的基准带宽为300MByte/秒。 dms.instance.kafka.cluster.c3.middle.
单击Kafka实例名称,进入实例详情页面。单击右上角的“ > 重启”。 在“重启实例”对话框中,单击“是”,完成重启Kafka实例。 重启Kafka实例大约需要3到15分钟。Kafka实例重启成功后,实例状态切换为“运行中”。 重启Kafka实例只会重启实例进程,不会重启实例所在虚拟机。 相关文档 如
yInterval=10000 producer使用建议 同步复制客户端需要配合使用:acks=all 配置发送失败重试:retries=3 发送优化:对于时延敏感的信息,设置linger.ms=0。对于时延不敏感的信息,设置linger.ms在100~1000之间。 生产端的J
xecute_at字段非空。 execute_at 否 Long 定时时间,格式为Unix时间戳,单位为毫秒 响应参数 状态码:200 表3 响应Body参数 参数 参数类型 描述 - String 提交升级任务id 状态码:400 表4 响应Body参数 参数 参数类型 描述 error_code
Topic需要在生产客户端配置重试机制,方法如下: 生产客户端为Kafka开源客户端时,检查是否配置retries参数,建议此参数值设置为3~5。 生产客户端为Flink客户端时,检查是否配置重启策略,配置重启策略可以参考如下代码。 StreamExecutionEnvironment
在的区域。 单击Kafka实例的名称,进入实例的“概览”页面。 密文接入分为内网访问密文接入和公网访问密文接入,开启密文接入方法如表3所示。 表3 开启密文接入方法 接入方式 开启密文接入 内网访问密文接入 在“内网访问 > 密文接入”后,单击,弹出“内网访问密文接入”对话框。 设置kafka安全协议、SASL
批量资源到期转按需:选择需要更改计费模式的Kafka实例,单击列表左上角的“到期转按需”。 图2 多个资源转按需 查看资费变更的相关信息后,单击“到期转按需”。 图3 到期转按需 父主题: 变更计费模式
t为实例的连接地址和端口 spring.kafka.bootstrap-servers=ip1:port1,ip2:port2,ip3:port3 #=============== 生产者配置 ======================= spring.kafka.producer