问答 2023-12-30 来自:开发者社区

DataWorks on emr 创建spark节点指定dlf的catalog?

DataWorks on emr 创建spark节点指定dlf的catalog?

问答 2023-12-30 来自:开发者社区

DataWorks中spark操作odps,写入时报的错,哪位给看看什么原因引起的?

DataWorks中spark操作odps,写入时报的错,哪位大神给看看什么原因引起的?

问答 2023-12-17 来自:开发者社区

DataWorks一个spark节点一直报这种错误是可能什么原因呢?都未运行看不到详情日志?

DataWorks一个spark节点一直报这种错误是可能什么原因呢?都未运行看不到详情日志?执行器数给的5,并行给的4

问答 2023-11-21 来自:开发者社区

DataWorks如何通过spark访问外网呢?

DataWorks如何通过spark访问外网呢?

问答 2023-11-21 来自:开发者社区

DataWorks如果 odps中spark请求一个内网地址如何配置这个呢 在config中配置么?

DataWorks中SET odps.session.networklink = Maxcomputer_boldvpc 如果 odps中spark请求一个内网地址 如何配置这个呢 在config中配置么?

问答 2023-11-21 来自:开发者社区

DataWorks中odps spark任务等待时间是什么?

DataWorks中odps spark任务等待时间是什么?

问答 2023-11-20 来自:开发者社区

dataworks上能跑spark任务节点吗?

dataworks上能跑spark任务节点吗?

问答 2023-11-14 来自:开发者社区

DataWorks请问这个该从什么方向去排查,我在EMR侧没有找到Spark相关的监控之类的?

DataWorks任务拉起的jar包中去获取SparkSession耗时达30+分钟,请问这个该从什么方向去排查,我在EMR侧没有找到Spark相关的监控之类的?

问答 2023-11-13 来自:开发者社区

DataWorks中spark.sqlautoBroadcastJoinThreshold哪里设置?

DataWorks中spark.sql.autoBroadcastJoinThreshold哪里设置?

问答 2023-11-13 来自:开发者社区

如何在dataworks里面的odps spark节点使用pyspark环境,如何import --

如何在dataworks里面的odps spark节点使用pyspark环境,如何import --archives ARCHIVES压缩包选项里面的py文件?我看运行日志,你们会自动解压缩的,比如我的配置是--archives abc.zip,你们会生成--archives abc.zip#abc,然后我希望在主程序py文件中导入abc文件夹下面的runTest.py,那么我会在主程序中写i.....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注