MAPREDUCE服务 MRS-Doris UDF开发规范:Doris UDF开发规则

时间:2024-05-28 14:22:56

Doris UDF开发规则

  • UDF中方法调用必须是线程安全的。
  • UDF实现中禁止读取外部大文件到内存中,如果文件过大可能会导致内存耗尽。
  • 需避免大量递归调用,否则容易造成栈溢出或oom。
  • 需避免不断创建对象或数组,否则容易造成内存耗尽。
  • Java UDF应该捕获和处理可能发生的异常,不能将异常给服务处理,以避免程序出现未知异常。可以使用try-catch块来处理异常,并在必要时记录异常信息。
  • UDF中应避免定义静态集合类用于临时数据的存储,或查询外部数据存在较大对象,否则会导致内存占用过高。
  • 应该避免类中import的包和服务侧包冲突,可通过grep -lr "完全限定类名"命令来检查冲突的Jar包。如果发生类名冲突,可通过完全限定类名方式来避免。
support.huaweicloud.com/devg-rule-mrs/mrs_07_450074.html