温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Flink自定义函数之标量函数怎么用

发布时间:2021-12-24 17:02:15 阅读:135 作者:小新 栏目:大数据
开发者测试专用服务器限时活动,0元免费领,库存有限,领完即止! 点击查看>>

小编给大家分享一下Flink自定义函数之标量函数怎么用,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

背景

flink本身给我们提供了大量的内置函数,已经能满足我们绝大部分的需求,但是如果确实是碰到了一些特殊的场景,无法满足我们的需求的时候,我们可以自定义函数来解决,今天我们主要讲一下最简单的自定义函数-ScalarFunction。

 

实例讲解

 

定义函数

首先我们来实现一个最简单的标量函数,主要功能就是对两个数加和操作,实现标量函数需要继承抽象类ScalarFunction,然后实现eval方法,代码如下:

 public static class SumFunction extends ScalarFunction{  public Integer eval(Integer a, Integer b){   return a + b;  } }
   

通过程序注册函数

 //通过程序的方式来注册函数  SumFunction sumFunction = new SumFunction();  tableEnv.registerFunction("mysum", sumFunction);  Table table1 = tableEnv.sqlQuery("select mysum(1,2)");  tableEnv.toAppendStream(table1, Row.class).print();
   

通过sql注册函数

 //通过sql的方式来注册函数  String className = SumFunction.class.getName();  String sql = "create temporary function default_catalog.default_database.mysum1" +               " as '" + className + "'";  tableEnv.sqlUpdate(sql);  Table table2 = tableEnv.sqlQuery("select mysum1(3,4)");  tableEnv.toAppendStream(table2, Row.class).print();
 

之后我们可以通过StreamTableEnvironment类的listFunctions方法列出来所有的函数来看下我们自定义的函数是否在其中.

 //列出来所有的函数,看是否包含我们定义的函数  String[] functions = tableEnv.listFunctions();  Stream.of(functions).filter(f->f.startsWith("mysum")).forEach(System.out::println);
 

最后如果自定义的jar和主程序不在一个jar包,通过命令行提交任务的时候,记得通过参数--classpath(简写-C)将包含自定义函数的jar添加到classpath里。

以上是“Flink自定义函数之标量函数怎么用”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注亿速云行业资讯频道!

亿速云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

原文链接:https://my.oschina.net/u/4596020/blog/4439358

AI

开发者交流群×