您好,登錄后才能下訂單哦!
小編給大家分享一下Flink自定義函數之標量函數怎么用,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!
flink本身給我們提供了大量的內置函數,已經能滿足我們絕大部分的需求,但是如果確實是碰到了一些特殊的場景,無法滿足我們的需求的時候,我們可以自定義函數來解決,今天我們主要講一下最簡單的自定義函數-ScalarFunction。
首先我們來實現一個最簡單的標量函數,主要功能就是對兩個數加和操作,實現標量函數需要繼承抽象類ScalarFunction,然后實現eval方法,代碼如下:
public static class SumFunction extends ScalarFunction{
public Integer eval(Integer a, Integer b){
return a + b;
}
}
//通過程序的方式來注冊函數
SumFunction sumFunction = new SumFunction();
tableEnv.registerFunction("mysum", sumFunction);
Table table1 = tableEnv.sqlQuery("select mysum(1,2)");
tableEnv.toAppendStream(table1, Row.class).print();
//通過sql的方式來注冊函數
String className = SumFunction.class.getName();
String sql = "create temporary function default_catalog.default_database.mysum1" +
" as '" + className + "'";
tableEnv.sqlUpdate(sql);
Table table2 = tableEnv.sqlQuery("select mysum1(3,4)");
tableEnv.toAppendStream(table2, Row.class).print();
之后我們可以通過StreamTableEnvironment類的listFunctions方法列出來所有的函數來看下我們自定義的函數是否在其中.
//列出來所有的函數,看是否包含我們定義的函數
String[] functions = tableEnv.listFunctions();
Stream.of(functions).filter(f->f.startsWith("mysum")).forEach(System.out::println);
最后如果自定義的jar和主程序不在一個jar包,通過命令行提交任務的時候,記得通過參數--classpath(簡寫-C)將包含自定義函數的jar添加到classpath里。
以上是“Flink自定義函數之標量函數怎么用”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業資訊頻道!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。