华为云首页用户手册

MapReduce服务 MRS-经验总结:缓冲区超时设置

MapReduce服务 MRS-经验总结:缓冲区超时设置

时间：2023-11-01 16:25:29

MapReduce服务 MRS

缓冲区超时设置

由于task在执行过程中存在数据通过网络进行交换，数据在不同服务器之间传递的缓冲区超时时间可以通过setBufferTimeout进行设置。
当设置“setBufferTimeout(-1)”，会等待缓冲区满之后才会刷新，使其达到最大吞吐量；当设置“setBufferTimeout(0)”时，可以最小化延迟，数据一旦接收到就会刷新；当设置“setBufferTimeout”大于0时，缓冲区会在该时间之后超时，然后进行缓冲区的刷新。
示例可以参考如下：
```
env.setBufferTimeout(timeoutMillis);env.generateSequence(1,10).map(new MyMapper()).setBufferTimeout(timeoutMillis);
```

上一篇：MapReduce服务 MRS-配置进程参数:操作步骤

下一篇：MapReduce服务 MRS-配置进程参数:操作步骤

MapReduce服务 MRS-经验总结:缓冲区超时设置

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题