问答 2024-06-02 来自:开发者社区

DataWorks中ODPS SPARK节点pyspark使用第三方包

DataWorks中ODPS SPARK节点pyspark使用第三方包

问答 2024-05-31 来自:开发者社区

DataWorks上开发odps spark任务在submit阶段oom

DataWorks上开发odps spark任务在submit阶段oom

问答 2024-05-30 来自:开发者社区

DataWorks中DataLake版EMR spark sql任务 Operation ca...

DataWorks中DataLake版EMR spark sql任务 Operation category READ is not supported in state standby

问答 2024-05-27 来自:开发者社区

DataWorks生产spark jar 能不能访问只和主账号有关系,跟谁调度作业无关?

DataWorks生产spark jar 能不能访问只和主账号有关系,跟谁调度作业无关?

问答 2024-05-27 来自:开发者社区

DataWorks有什么方式可以让spark jar能访问表但是临时查询不能访问表数据?

DataWorks现在有种场景,一张表对作业人员做了访问控制,不能在临时查询界面查询表信息,但同时也导致了作业人员运行的spark jar也不能访问这张表了,有什么方式可以让spark jar能访问表但是临时查询不能访问表数据?

问答 2024-05-27 来自:开发者社区

DataWorks如何设置环境变量哈,便于spark 运行任务时动态获取?

DataWorks如何设置环境变量哈,便于spark 运行任务时动态获取?我本意是想把敏感信息 放到环境变量里,在任务运行时动态获取, 类似这种情况

问答 2024-05-27 来自:开发者社区

DataWorks在spark jar中引用密文的空间参数怎么引用呢?

DataWorks在spark jar中引用密文的空间参数怎么引用呢?

问答 2024-05-27 来自:开发者社区

DataWorks 中odps spark作业时这种错是需要开网络吗?

DataWorks 中odps spark作业时这种错是需要开网络吗?

问答 2024-05-27 来自:开发者社区

DataWorks中spark作业时是集群环境嘛,该怎么做才能保证每台服务器都有相应的文件呢?

DataWorks中spark作业时是集群环境嘛,每次作业的机器都不一样,如果我在spark jar里往服务器写文件,该怎么做才能保证每台服务器都有相应的文件呢?

问答 2024-05-27 来自:开发者社区

DataWorks中odps spark,如果放到资源下会不会涉及到一些安全问题?

DataWorks中odps spark,因为这个文件内容会涉及到odps的accesskey和accessId,如果放到资源下会不会涉及到一些安全问题?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注