阿里云文档 2025-02-07

ADB Spark SQL的使用

DataWorks的ADB Spark SQL节点可进行AnalyticDB Spark SQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用ADB Spark SQL节点进行任务开发的主要流程。

阿里云文档 2025-02-06

创建Flink SQL Batch节点

Flink SQL Batch节点使您能够使用标准SQL语句定义和执行数据处理任务,适用于大数据集的分析与转换,包括数据清洗和聚合。该节点支持可视化配置,为您提供高效且灵活的大规模数据批处理方案。在Flink SQL Batch节点中,您可以使用类SQL语句完成大规模数据加工的批处理。本文将介绍如何在Flink SQL Batch节点中配置和使用SQL语句来完成数据的批处理。

阿里云文档 2025-02-06

Flink SQL Streaming节点使用

DataWorks新版数据开发中的Flink SQL Streaming节点支持使用标准SQL语句定义实时任务处理逻辑。Flink SQL Streaming具有易用性、丰富的SQL支持、强大的状态管理及容错能力,兼容事件时间和处理时间,并可灵活扩展。该节点易于与Kafka、HDFS等系统集成,提供详尽的日志和性能监控工具。您只需在DataWorks项目中添加Flink SQL Streaming...

阿里云文档 2025-02-06

创建Hologres SQL节点

Hologres与MaxCompute在底层实现了无缝连接,使您无需迁移数据,即可通过Hologres SQL节点直接使用标准的PostgreSQL语句来查询和分析MaxCompute中的大规模数据,从而快速获得查询结果。

阿里云文档 2025-02-05

MaxCompute SQL节点

DataWorks提供的MaxCompute SQL节点,可用于周期性调度MaxCompute的SQL任务,并支持与其他类型节点集成以及联合调度。MaxCompute SQL任务采用类似SQL的语法,适用于海量数据(TB级)但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks上开发MaxCompute SQL节点任务。

问答 2024-07-17 来自:开发者社区

DataWorks一个sql脚本任务里面有多个select insert语句 执行的时候是并行的吗?

DataWorks一个sql脚本任务里面有多个select insert语句 执行的时候是并行的吗?如果要保证顺序是不是要分开成多个任务使用调度的依赖来实现

问答 2024-05-13 来自:开发者社区

DataWorks相同的ODPS SQL代码,开发环境中的记录insert顺序是好的这是什么问题?

DataWorks相同的ODPS SQL代码,开发环境中的记录insert顺序是好的,符合预期,但是生产环境没有按照预想的情况来insert。这是什么问题?有left join操作

问答 2023-12-23 来自:开发者社区

DataWorks为什么调度任务产出的数据和sql查询insert的数据不一样呢?

DataWorks为什么调度任务产出的数据和sql查询insert的数据不一样呢?sql都是完全一样的sql,表也都确认过了是都是生产环境的表,调度跑出来的只有2021-2023年,sql查询跑出来的有2018-2023

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorkssql相关内容

产品推荐

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

+关注