阿里云文档 2024-09-14

开发JAR任务

您可以自行编写并构建包含业务逻辑的JAR包,上传此业务JAR包后,即可便捷地创建Spark JAR任务。本文通过一个示例,为您演示如何进行JAR任务的开发与部署。

问答 2024-07-09 来自:开发者社区

dataworks用python写odps spark任务有任何办法引用到额外的jar包吗?

odps spark任务只有使用java时才可以选择jar包资源,python时只能选择python或者archives资源。我想使用graphframes,该包不只需要python还需要jar包。请问该如何把jar包在提交python odps spark任务的时候加进去呢?

问答 2024-05-27 来自:开发者社区

DataWorks生产spark jar 能不能访问只和主账号有关系,跟谁调度作业无关?

DataWorks生产spark jar 能不能访问只和主账号有关系,跟谁调度作业无关?

问答 2024-05-27 来自:开发者社区

DataWorks有什么方式可以让spark jar能访问表但是临时查询不能访问表数据?

DataWorks现在有种场景,一张表对作业人员做了访问控制,不能在临时查询界面查询表信息,但同时也导致了作业人员运行的spark jar也不能访问这张表了,有什么方式可以让spark jar能访问表但是临时查询不能访问表数据?

问答 2024-05-27 来自:开发者社区

DataWorks在spark jar中引用密文的空间参数怎么引用呢?

DataWorks在spark jar中引用密文的空间参数怎么引用呢?

问答 2023-09-03 来自:开发者社区

DataWorks如何创建ODPS Spark节点创建JAR资源?

DataWorks如何创建ODPS Spark节点创建JAR资源?

问答 2023-07-22 来自:开发者社区

DataWorks中Local 方式使用 Spark 配置好jar包,依旧报The value ?

DataWorks中Local 方式使用 Spark 配置好jar包,依旧报The value of spark.sql.catalogImplementation should be one of hive, in-memory, but was odps?

问答 2023-06-14 来自:开发者社区

MaxCompute中spark客户端哪里设置业务jar的文件大小限制?

MaxCompute中spark客户端哪里设置业务jar的文件大小限制?

问答 2023-05-07 来自:开发者社区

dataworks中创建ODPS Spark节点创建JAR资源?

dataworks中创建ODPS Spark节点创建JAR资源?

问答 2023-04-20 来自:开发者社区

maxcomputer 提交spark jar 包任务 报错: [TASK=564401841

maxcomputer 提交spark jar 包任务 报错: [TASK=5644018410] execute task failed, 调用代码服务失败:%s, There is no file with id bigDataDataQualityCheck-1.0-SNAPSHOT.jarcom.alibaba.phoenix.error.BasicException: 调用代码服...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注