基于MaxCompute UDF进行SQL分析

面对MaxCompute无法直接调用外部API的限制，本文将通过一个完整的实践案例，教您如何利用“离线IP库+UDF”的方案，在MaxCompute中高效地实现IP地址归属地分析。

基于MaxCompute UDF进行SQL分析

面对MaxCompute无法直接调用外部API的限制，本文将通过一个完整的实践案例，教您如何利用“离线IP库+UDF”的方案，在MaxCompute中高效地实现IP地址归属地分析。

Spark【Spark SQL（四）UDF函数和UDAF函数】

UDF 函数        UDF 是我们用户可以自定义的函数，我们通过SparkSession对象来调用 udf 的 register（name：String，func（A1,A2,A3...）） 方法来注册一个我们自定义的函数。其中，name 是我们自定义的函数名称，func 是我们自定义的函数，它可以有很多个参数。     &...

MaxCompute SQL优化中常见优化tips用内置的UDF/UDAF函数的作用是啥？

MaxCompute SQL优化中常见优化tips用内置的UDF/UDAF函数的作用是啥？

产品名称Dataphin产品模块代码任务概述描述数据倾斜的一种处理方法。问题描述SQL执行时间过长，报错“ODPS-0123144: Fuxi job failed - WorkerRestart errCode:252,errMsg:kInstanceMonitorTimeout, usually...

Spark 2.4.0编程指南--Spark SQL UDF和UDAF

Spark 2.4.0编程指南--Spark SQL UDF和UDAF 更多资源 github: https://github.com/opensourceteams/spark-scala-maven-2.4.0 文档 (官网文档): http://spark.apache.org/docs/2.4.0/sql-getting-started.html#aggregations 前置条件...

Spark SQL 用户自定义函数UDF、用户自定义聚合函数UDAF 教程（Java踩坑教学版）

在Spark中，也支持Hive中的自定义函数。自定义函数大致可以分为三种： UDF(User-Defined-Function)，即最基本的自定义函数，类似to_char,to_date等 UDAF（User- Defined Aggregation Funcation），用户自定义聚合函数，类似在group by之后使用的sum,avg等 UDTF(User-Defined Table-G...