可视化管理内部表、外部表或视图
本文为您介绍如何通过Project Explorer可视化创建、修改、查看和删除内部表、外部表或视图。背景信息MaxCompute Studio支持的表或视图操作如下：创建内部表、外部表或视图修改内部表或外部表查看内部表、外部表或视图详细信息清空表数据或...
搭建基础环境
在进行自建Flink作业迁移前，需要先搭建基础环境。基础环境用于演示作业迁移的过程，如果您已经有了自建Flink环境，则可以不用搭建基础环境。本文为您介绍如何搭建基础环境。背景信息 CADT是一个云资源创建工具，借助该工具，您可以快速...
ECS实例搭建Windows系统AD域
2012为例介绍如何搭建AD域，搭建过程中采用的环境示例如下：组网信息：网络类型采用专有网络VPC，交换机的私有网段为192.168.100.0/24。域名信息：示例域名为example.com，作为DC的ECS实例IP地址为192.168.100.105，作为客户端的ECS实例IP...
函数概览
函数分类 Lindorm流引擎支持内建函数和用户自定义函数（User Defined Function，简称UDF）。内建函数：流引擎内有多种函数，可以满足大部分业务场景的数据处理需求。内建函数的分类如下表：函数分类 相关文档 日期函数 STRINGTOTIMESTAMP ...
专有网络VPC下ECS实例之间如何搭建IPIP隧道
概述 本文主要介绍专有网络VPC下ECS实例之间如何搭建IPIP隧道。问题描述 实现 172.31.0.118和 192.168.0.4通过IPIP隧道互通。网络拓扑图如下所示。注：VPC1网段是 172.31.0.0/24，VPC2网段是 192.168.0.0/24。VPC1下ECS实例 172.31.0.118...
内建函数概述
注意事项在使用内建函数时，需要注意：内建函数的入参类型、入参数量、函数格式必须满足函数语法要求，否则MaxCompute无法成功解析函数，SQL运行会报错。如果内建函数的入参涉及2.0新数据类型（例如TINYINT、SMALLINT、INT、FLOAT、VARCHAR...
概述
SQL进行数据分析和数据加工，MaxCompute提供了丰富的内建函数，以便您在日常开发和分析中使用，您可以根据需要从不同维度快速查询目标函数。MaxCompute支持的函数功能如下。按函数类型查找函数，请参见内建函数概述。按字母顺序查找函数，...
函数
本文为您介绍MaxCompute提供的函数功能，包括内建函数和UDF。MaxCompute为您提供了SQL计算功能，您可以在MaxCompute SQL中使用系统的内建函数完成一定的计算和计数功能。但当内建函数无法满足要求时，您可以使用MaxCompute提供的Java或...
内建函数常见错误码
本文为您介绍使用MaxCompute内建函数过程中常见的错误码，帮助您了解错误码的产生原因，并提供对应的解决措施。常见内建函数错误码如下：ODPS-0130071:Semantic analysis exception-X type is not enabled in current modeODPS-0130221:...
采集-搭建移动端日志直传服务
本文介绍如何搭建移动端应用日志直传服务。背景信息普通模式下，写日志到日志服务需要开启阿里云账号的访问密钥（AccessKey），用于鉴权及防篡改。如果通过此模式上传日志到日志服务，需要将您阿里云账号的AccessKey保存在移动端应用中，会...
常见问题
SDK常见问题开发SQL：SQL常见问题内建函数：内建函数常见问题UDF：MaxCompute UDF（Java）常见问题、MaxCompute UDF（Python）常见问题PyODPS：PyODPS常见问题MapReduce：MapReduce常见问题Spark：Spark常见问题外部表：外部表常见问题安全...
将计算巢ECS镜像部署物更新操作加入到软件持续集成
关于如何搭建Jenkins集成环境的操作，请参见搭建持续集成环境示例。安装阿里云CLI且版本不低于3.0.141。完成持续环境搭建后，需要安装jq命令行JSON处理器。在计算巢控制台完成需要加入软件持续集成的部署物创建，更多信息，请参见创建部署...
UDTF概述
MaxCompute支持的内建函数中包含部分UDTF函数，例如EXPLODE，更多内建UDTF函数信息，请参见其他函数或复杂类型函数。使用限制不支持通过自定义函数访问外网。如果您需要通过自定义函数访问外网，请根据业务情况填写并提交表单，MaxCompute...
UDF概述
注意事项 使用自定义函数时，您需要注意：在性能上，自定义函数的性能低于内建函数，建议您优先使用内建函数实现相同逻辑的业务需求。在SQL语句中使用自定义函数时，如果计算的数据量过大并且存在倾斜，会导致作业占用的内存超出默认分配的...
UDAF概述
注意事项 使用自定义函数时，您需要注意：在性能上，自定义函数的性能低于内建函数，建议您优先使用内建函数实现相同逻辑的业务需求。在SQL语句中使用自定义函数时，如果计算的数据量过大并且存在倾斜，会导致作业占用的内存超出默认分配的...
MaxCompute UDF概述
MaxCompute产品已经提供多种类型内建函数来满足您的业务需求，当内建函数无法支撑业务实现时，您可以自行编写代码逻辑来创建自定义函数满足多样化需求。本文为您介绍MaxCompute支持的自定义函数类型、应用场景、开发流程及使用说明等信息。...
快速搭建移动应用上传回调服务
本文讲解如何搭建一个基于OSS的移动应用数据直传服务并设置上传回调。背景信息 快速搭建移动应用直传服务介绍了如何快速搭建一个基于OSS的移动应用数据直传服务。但该方案有个问题：对于Android/iOS移动应用来说，只需要申请一次STS凭证，...
可视化管理函数
查看函数 内建函数：仅支持查看函数的语法格式。无法查看函数的实现代码。MaxCompute UDF：支持查看函数的语法格式及实现代码。修改函数 内建函数：无法修改。MaxCompute UDF：如果您需要修改MaxCompute UDF，请先删除已注册的MaxCompute ...
管理项目数据
本文为您介绍如何在MaxCompute Studio上查看项目空间中的表、视图、函数和资源。前提条件 已连接MaxCompute项目，详情请参见管理项目连接。背景信息 您可以在Project Explorer区域查看已添加连接的MaxCompute项目中的表、视图、函数和资源...
什么是源站OFFLOAD
如何搭建CDN镜像源站服？使用源站OFFLOAD的优势 提升缓存命中率新的回源架构会提升您的网站的缓存命中率，客户端发起的访问请求无需回到源站获取资源，可直接从CDN节点命中，减少回源的同时，减少了回源的网络链路，进一步提升网站的性能。...
ARRAY_REDUCE
将ARRAY数组a中的每一个元素与中间结果进行运算的函数（内建函数或自定义函数）或表达式。它的两个输入参数为ARRAY数组a的元素和init。final：必填。将中间结果转换为最终结果的函数（内建函数或自定义函数）或表达式。它的输入参数为merge...
内建函数常见问题
本文为您介绍MaxCompute内建函数的常见问题。问题类别 常见问题 日期函数 MaxCompute是否支持将2010/1/3格式转换为2010-01-03？如何将UNIX时间转为日期值？如何获取系统当前时间？使用YEAR、QUARTER、MONTH和DAY日期函数时，报错cannot be ...
修复Kubernetes Dashboard漏洞CVE-2018-18264的公告
阿里云容器服务Kubernetes内建的Kubernetes Dashboard是托管形态且已进行过安全增强，不受此漏洞影响。背景信息 Kubernetes社区发现Kubernetes Dashboard安全漏洞CVE-2018-18264：使用Kubernetes Dashboard v1.10及以前的版本有跳过用户...
约束和限制
Hologres中不支持使用MaxCompute的内建函数。UDF约束限制 Hologres中不支持使用MaxCompute创建的UDF。Hologres中不支持创建和使用UDF，但是支持使用PostgreSQL的内建函数。数据类型约束 Hologres兼容PostgreSQL生态，支持的数据类型与...
TRANSFORM
用于对a中元素进行转换的函数（内建函数或自定义函数）或表达式，其输入类型应与a中的元素类型一致。R指代输出结果的数据类型。返回值说明 返回ARRAY类型。使用示例-返回[2,3,4]。select transform(array(1,2,3),x->x+1);
TRANSFORM_VALUES
变换的函数（内建函数或自定义函数）或表达式。它的两个输入参数分别对应input的Key和Value，V2指代新MAP的Value类型。返回值说明 返回MAP类型。使用示例-返回{-30:71,10:10,20:NULL}。select transform_values(map(10,-20,20,null,-30,101...
MAP_FILTER
用于对输入MAP对象中的元素进行过滤的函数（内建函数或自定义函数）或表达式。它的两个输入参数，分别对应input中的Key和Value，输出结果为BOOLEAN类型。返回值说明 返回MAP类型。使用示例-返回{-30:100,20:50}。select map_filter(map(10,...
地域与可用区
GraphCompute以图为中心，内建多种计算索引和服务接口，满足广泛的图分析需求。一切服务“开通”即用，更好地赋能数据业务。目前GraphCompute， 在华东（上海、杭州）、华北（北京）、华南（深圳）、新加坡已正式开放，后续将陆续开通更多...
2022年
Schema操作 2022年9月更新记录 时间 特性 类别 描述 产品文档 2022-09-28 新增内建函数（按字母顺序排序）。新说明 MaxCompute提供的内建函数按照首字母顺序进行排序，方便您查找使用。内建函数概述 2022-09-28 新增所有命令（按字母顺序）...
创建消息-批量推送
自建通道，对全网（在消息有效期内）在线的或者指定的 Android 设备推送消息，对每个设备仅推送一次，不重复推送。iOS：使用厂商通道，对全网或指定的 iOS 客户端用户推送消息，对每个用户仅推送一次，不重复推送。推送目标是当为用户推送...
QuickAudience创建受众报错“exceed table count ...
QuickAudience的一些操作会在数据库内建表，比如创建AIPL数据集（其他数据集不会建表）、创建受众等，一般购买ADB数据库后，可以建表数量为256张表（该上限可以升级）。对于一些不需要用的受众，需要手动清理删除掉，然后数据库里会自动将...
CREATE SQL FUNCTION
如果引入UDF并编写代码后，您还需要进行代码编译（Java）、创建资源和创建函数操作，过程比较繁琐，且性能不如内建函数。示例如下。select nvl(str_to_map(get_json_object(col,'$.key1')),'default')as key1, nvl(str_to_map(get_json_...
CREATE FUNCTION
自定义函数无法覆盖系统内建函数。只有项目Owner才有权利覆盖内建函数。如果您使用了覆盖内建函数的自定义函数，在SQL执行结束后，会在作业相应Logview的Summary中打印出Warning信息。命令格式create function as<'package_to_class'>using...
概述
多分类评估：通过内建函数ml_multiclass_evaluate实现。基于模型的预测结果和原始结果，评价多分类算法模型的优劣，指标包括Accuracy、kappa、F1-Score等。语法格式如下：ml_multiclass_evaluate(table [,map]) 线性回归评估：通过内建函数...
创建并使用MaxCompute函数
附录二：查看内置函数列表内建函数列表可参见：内建函数概述。附录三：添加引擎函数至DataWorks进行管理您可以通过MaxCompute函数功能，将MaxCompute引擎资源加载至DataWorks进行可视化管理与使用，详情请参见MaxCompute资源管理。
购买及启用合规CA
本文介绍如何购买及启用合规CA。背景信息合规CA通过将合规根CA托管在第三方CA机构，在有第三方CA机构监管的前提下，实现在企业内部搭建CA。合规CA分为根CA和子CA（即中间CA），子CA隶属于根CA。一个合规根CA下仅包含一个子CA。只有子CA可...
SQL错误码（ODPS-01CCCCX）
产生原因：SQL语句中使用的内建函数的实际输入参数类型不满足函数语法要求，导致MaxCompute处理失败。解决措施：根据函数语法要求修改输入参数，确保数据类型满足函数语法要求后，重新执行SQL语句即可。ODPS-0130131:Table not found模块：...
窗口函数
本文介绍流引擎内建函数中的窗口函数。WINDOW_START 返回当前窗口的开始时间。语法WINDOW_START()示例SELECT item, SUM(price),WINDOW_START()AS windowStartTime FROM orders window TUMBLING SIZE 1 MINUTE)GROUP BY item;WINDOW_END ...
聚合函数
本文介绍流引擎内建函数中的聚合函数。MAX 返回指定列的最大值。语法MAX(col1)示例SELECT item_type,MAX(price) FROM orders GROUP BY item_type;MIN 返回指定列的最小值。语法MIN(col1)示例SELECT item_type, MIN(price)FROM orders GROUP...
SQL自定义函数
本文为您介绍如何通过SQL语言定义函数（SQL Function）在SQL脚本中使用SQL定义的UDF。背景信息SQL语言定义函数作为一种用户自定义函数，弥补了MaxCompute只能用Java或Python创建UDF的不足，还扩展了函数类型的参数和匿名函数特性，提升表达...
- 产品推荐
- 这些文档可能帮助您
