创建并管理MaxCompute节点

此时,组件的开发者可将该SQL过程抽象为一个SQL组件节点,将可变的输入表抽象为输入参数,可变的输出表抽象为输出参数,实现SQL代码的复用。SQL组件概述 PyODPS 3 开发MaxCompute的PyODPS任务,PyODPS 3节点底层Python语言版本为Python 3。...

概述

使用Python访问Hologres DataGrip DataGrip是一个多连接数据库开发工具,可让您在一个应用程序中连接多数据库,帮助您快速轻松地创建、管理和维护数据库。DataGrip Navicat Navicat是款连接多数据库的开发工具。支持可视化和SQL两种...

开发及提交SQL脚本

本文为您介绍如何在MaxCompute Studio上开发SQL脚本。包括编写运行SQL脚本。前提条件 已连接MaxCompute项目,详情请参见 管理项目连接。已创建MaxCompute Script Module,详情请参见 创建MaxCompute Script Module。创建SQL脚本文件 在 ...

开发部署扩展程序:自建服务方式

在DataWorks扩展程序中,您可以自定义逻辑以监管用户的操作行为,例如拦截阻断不当行为,通过扩展程序对特定事件进行消息通知与流程管控。本文为您介绍如何通过自建服务开发部署扩展程序。权限说明 开放平台管理员 租户管理员 拥有 ...

可选:运维SQL分析任务

SQL分析任务上线后,您可以查看SQL分析任务的基本信息配置情况,以及SQL分析任务的调度情况。本文介绍运维SQL分析任务的操作步骤。前提条件 已配置并发布SQL分析任务,具体操作,请参见 步骤三:设置任务调度策略并发布。背景信息 SQL...

开发部署扩展程序:函数计算方式

在DataWorks扩展程序中,您可以自定义逻辑以监管用户的操作行为,例如拦截阻断不当行为,通过扩展程序对特定事件进行消息通知与流程管控。本文为您介绍如何通过函数计算方式开发部署扩展程序。权限说明 开放平台管理员 租户管理员 ...

ClickHouse SQL

步骤开发ClickHouse SQL任务(可选)选择ClickHouse数据源 如果您的工作空间创建了多ClickHouse数据源,则需先在ClickHouse SQL节点编辑页面选择合适的数据源。如果仅创建了一个ClickHouse数据源,则默认使用该数据源进行开发操作。...

管理笔记本

笔记本概述 笔记本是进行程序开发的载体,每笔记本对应一个.ipynb文件。您可以在一个工作空间内创建一个或多笔记本。每笔记本由单元格(Cell)组成。目前EMR Notebook支持以下类型的单元格:SQL:用于编辑运行SQL代码。Python:...

功能概述

设置部署方式 功能点 概述 部署设置 微信H5页面部署 绑定指定微信公众号、微信小程序 支付宝H5页面部署 绑定支付宝小程序 抖音H5页面部署 绑定抖音小程序 独立页面部署 获取一个网页聊天窗网页,支持移动端PC端自适应。悬浮挂件部署 获取...

PL 编译调试

背景信息 PL 是种过程化程序语言(Procedural Language,PL)。是对 SQL 的扩展,在普通 SQL 语句的基础上增加了编程语言的特点,将数据操作查询语句组织在 PL 代码的过程化代码中,通过逻辑判断、循环等操作实现复杂的功能。使用 PL ...

开发ODPS SQL任务

DataWorks为您提供ODPS SQL节点,可用于周期性调度MaxCompute的SQL任务,并完成与其他类型节点的集成联合调度。MaxCompute SQL任务采用类似SQL的语法,适用于海量数据(TB级)但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...

扩展程序概述

DataWorks通过OpenEvent能力为您提供消息推送订阅能力,同时您可以将服务程序注册为DataWorks的扩展程序,通过扩展程序来卡点并响应订阅的事件消息,以此实现通过扩展程序对特定事件进行消息通知与流程管控。本文为您介绍通过OpenEvent...

网站耗资源的原因及解决方法

程序死循环 在很多情况下,出现死循环是因为程序缺少必要的检测判断条件导致的,这种情况需网站开发者对站点程序的代码进行检查完善。程序有嵌套查询 嵌套查询代码示例如下所示。sql="select*from a"set rs=server.createobject("adodb...

开发ODPS SQL任务

DataWorks为您提供ODPS SQL节点,可用于周期性调度MaxCompute的SQL任务,并完成与其他类型节点的集成联合调度。MaxCompute SQL任务采用类似SQL的语法,适用于海量数据(TB级)但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...

MapReduce支持SQL运行时执行模式

MaxCompute新增支持将MapReduce作业指定为SQL运行时(Runtime)执行模式,基于SQL运行时,MapReduce作业可以应用SQL引擎的各种新特性,实现之前不支持的功能。本文为您介绍如何将MapReduce作业指定为SQL运行时执行模式。背景信息 ...

风险识别规则响应案例

DataWorks通过OpenEvent能力为您提供消息订阅能力,您可以将服务程序注册为DataWorks的扩展程序,通过扩展程序来捕捉并响应订阅的事件消息,以此实现对特定事件进行消息通知与流程管控。本文以“实时阻断或审批超过1000条数据的下载行为”...

连接方式概述

ODC 支持连接 OceanBase 数据库的 MySQL 租户 Oracle 租户,同时为数据库开发者提供了数据库日常开发操作、WebSQL、SQL 诊断、会话管理数据导入导出等功能。使用 OceanBase 开发者中心连接 OceanBase 租户的具体操作示例请参见 通过 ...

存储过程函数中的编译错误

当 PolarDB PostgreSQL版(兼容Oracle)分析程序编译存储过程或函数时,它们确认CREATE语句和程序主体(程序中 AS 关键字后面的那部分)符合SPL和SQL构造的语法规则。默认情况下,如果分析程序检测到错误,服务器将终止编译过程。请注意,...

概述

注意事项 为了避免JAR包依赖冲突,在开发自定义函数时您需要注意以下几点:SQL开发页面选择的Flink版本,请Pom依赖中的Flink版本保持一致。Flink相关依赖,scope请使用provided,即在依赖中添加<scope>provided。其他第三方依赖请采用...

连接方式概述

连接 OceanBase 数据库后,在 MySQL 客户端的命令行环境里,可以运行 MySQL 运维命令 SQL 语句来执行以下任务:计算、存储和打印查询结果。创建数据库对象、检查和修改对象定义。执行数据库管理和修改参数等。使用 MySQL 客户端连接 ...

XML函数

数组应该是一个二维 text 数组,其第轴长度等于 2(即它应该是一个数组的数组,其中每一个都由刚好 2 元素组成)。每数组项的第一元素是名字空间的名称(别名),第二元素是名字空间的 URI。并不要求在这数组中提供的别名...

ListEnabledExtensionsForProject

调用ListEnabledExtensionsForProject来获取项目空间下已经开启的扩展程序列表,包含系统扩展程序和自定义扩展程序。eventCode取值可参考文档:扩展事件编码。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行...

开发ODPS Script任务

DataWorks为您提供ODPS Script节点,其SQL开发模式是MaxCompute基于2.0的SQL引擎提供的脚本开发模式。本文为您介绍ODPS Script节点的使用。前提条件 已创建ODPS Script节点,详情请参见 创建并管理MaxCompute节点。背景信息 MaxCompute当前...

新建Flink Vvr SQL类型的公共节点

Flink Vvr SQL节点是流式节点,运行于Flink云计算资源之上,支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQLDataHub等类型的数据进行处理。本文介绍如何新建Flink Vvr SQL类型的公共节点。背景信息 Flink ...

新建Flink Vvr SQL类型的公共节点

Flink Vvr SQL节点是流式节点,运行于Flink云计算资源之上,支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQLDataHub等类型的数据进行处理。本文介绍如何新建Flink Vvr SQL类型的公共节点。背景信息 Flink ...

基于Java JDBC接口的应用开发

Java JDBC(JavaDataBase Connectivity)是种规范的Java API,主要用于连接处理数据库、执行SQL语句。您可以通过Java JDBC接口连接宽表引擎,并结合Lindorm SQL进行应用开发。本文介绍使用MySQL协议,通过Java JDBC接口进行应用开发的...

文档更新动态(2024年)

新增跨节点参数功能,Python、SQL、Shell计算任务支持给一个或多变量参数赋值,并将该参数及其赋值直接传递给依赖该任务的直接下游节点,以支持上下游任务之间的变量值传递。支持所有类型的离线任务(计算任务、集成任务、逻辑表)接收...

AnalyticDB for MySQL

DataWorks的AnalyticDB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for MySQL节点进行任务开发的主要流程。前提条件 已购买相应版本服务。购买DataWorks标准...

创建并使用AnalyticDB for PostgreSQL节点

DataWorks的AnalyticDB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for PostgreSQL节点进行任务开发的主要流程。前提条件 已购买DataWorks标准版及...

C3P0 连接池连接 OceanBase 数据库示例程序

本文将介绍如何使用 C3P0 连接池、MySQL Connector/J OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建表、插入、删除、更新查询数据等。点击下载 c3p0-mysql-jdbc 示例工程 前提条件 您已安装 OceanBase 数据库...

Data Copilot智能助手

NL2SQL(将自然语言格式转换为规范的SQL语句)在输入注释后,按下Enter,便可以直接触发智能小程序生成SQL语句。说明 注释格式为:两 半角连接号(-)+空格+文字。按下Tab键接受智能生成的SQL语句。例如,需要生成查找胜利次数最多的选手...

创建CDH Impala节点

在DataWorks中,CDH Impala节点可以编写并执行Impala SQL脚本。与CDH Hive相比,CDH Impala节点为您提供了更快速的查询性能。本文为您介绍如何创建与使用CDH Impala节点。使用限制 不支持 公共调度资源组 运行该类型任务。步骤:创建CDH ...

开发ODPS Script任务

DataWorks为您提供ODPS Script节点,其SQL开发模式是MaxCompute基于2.0的SQL引擎提供的脚本开发模式。本文为您介绍ODPS Script节点的使用。前提条件 已创建ODPS Script节点,详情请参见 创建并管理MaxCompute节点。背景信息 MaxCompute当前...

新建工程

当用该工程类型开发一个 Web 程序时,相当于“基于 Spring Boot 的 Web 应用+SOFA 中间件”进行开发。结合中间件 SOFAREST 服务,可提供基于 JAX-RS(Java API for RESTful Web Services)标准的前后端分离解决方案。Core 工程:通常用于...

创建CDH Presto节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在...

新功能发布记录

数据迁移模块文档 新增支持 OceanBase 4.2.0/4.2.1 作为源端的数据迁移:支持 OceanBase 4.2.0/4.2.1 之间的数据迁移、OceanBase 4.2.0/4.2.1 到 MySQL 数据库的数据迁移。单个数据迁移项目新增支持大对象数量的场景。新增支持云上 ...

创建CDH Hive节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在...

自定义聚合函数(UDAF)

方式:先将自定义函数JAR包上传至Flink SQL开发 右侧的 更多配置 的 附加依赖文件 选项,再在作业的SQL语句中添加创建临时函数的语句,并使用该函数。上传自定义函数JAR包到附加依赖文件中后,只能在本作业中使用该自定义函数,其他作业...

Druid 连接池连接 OceanBase 数据库示例程序

本文将介绍如何使用 Druid 连接池、MySQL Connector/J OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建表、插入数据、更新数据、删除数据、查询数据删除表等。点击下载 druid-mysql-client 示例工程 前提条件 您已...

大量数据导出方案

如果SQL比较复杂,请使用Tunnel和SQL相互配合导出查询结果。DataWorks 可以方便地帮您运行SQL,同步数据,并支持定时调度,配置任务依赖的功能。开源工具DataX可以帮助您方便地把MaxCompute中的数据导出到目标数据源,详情请参见 DataX概述...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 实时计算 Flink版 云备份 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用