问答 2024-08-05 来自:开发者社区

DataWorks文档上这里有spark节点我的咋没有?

DataWorks文档上这里有spark节点我的咋没有?

问答 2024-07-10 来自:开发者社区

云数据仓库ADB有没有airflow调度adb任务的相关文档我看官方的产品文档只有调度spark的

云数据仓库ADB有没有airflow调度adb任务的相关文档我看官方的产品文档只有调度spark的

问答 2024-03-11 来自:开发者社区

DataWorks大致就这么多,我在官方文档上看是有ODPS Spark,但是实际看来是并没有的?

DataWorks大致就这么多,我在官方文档上看是有ODPS Spark,但是实际看来是并没有的?

问答 2024-03-04 来自:开发者社区

大数据计算MaxCompute文档中有 spark 访问 OSS 部分。这个您知道是什么问题吗?

大数据计算MaxCompute文档中有 spark 访问 OSS 部分。我想实现的是 通过 spark 写入 hudi 文件到 oss ,再用 maxcomputer 进行读取外部表。但是我 spark 访问 oss 一直说我证书错误。这个您知道是什么问题吗?Exception in thread "main" com.aliyun.oss.ClientException: java.secur....

问答 2024-02-14 来自:开发者社区

Hologres文档上有会与spark类似的,具体哪些版本?

Hologres文档中提到了一种类似于Spark的特性,在JOIN操作时系统会自动将小表置于内存中进行广播。请问哪些版本的Hologres支持这一特性?若要从不支持该特性的版本升级到支持的版本,是否需要迁移数据,以及是否可以做到无缝升级?

问答 2023-02-06 来自:开发者社区

DMS按照文档,加了Spark SQL任务将数据同步到OSS,执行失败,但是没有任何报错,为什么?

DMS这边按照文档,加了Spark SQL任务将数据同步到OSS,最终是执行失败了,但是没有任何报错,麻烦帮看下是什么原因? 我的sql:CREATE TABLE oss.fulu_push_order ( service_order_id string COMMENT '订单', pid string COMMENT '父订单', root_pid string COMM...

问答 2017-07-18 来自:开发者社区

看MaxCompute(原ODPS)说明文档说输入数据只能是表结构 1.是否可以跑用户自定义的原生的基于hdfs的Mapreduce任务,输入为hdfs文件,输出为hdfs文件,mapper的逻辑以及reducer的逻辑用户自定义实现 2.是否支持其他的数据工具,如何跑基于spark的任务

看MaxCompute(原ODPS)说明文档说输入数据只能是表结构1.是否可以跑用户自定义的原生的基于hdfs的Mapreduce任务,输入为hdfs文件,输出为hdfs文件,mapper的逻辑以及reducer的逻辑用户自定义实现2.是否支持其他的数据工具,如何跑基于spark的任务

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注