问答 2022-04-15 来自:开发者社区

您好,我有一个MaxCompute(原ODPS) mr任务是在前端触发运行的,每次手动触发以后会服务器的odps cmd里执行mr任务,我需要在reduce 的setup中读取一个配置文件,我把这个配置文件作为资源上传到odps之后,是否需要在服务器也存一份该文件。

您好,我有一个MaxCompute(原ODPS) mr任务是在前端触发运行的,每次手动触发以后会服务器的odps cmd里执行mr任务,我需要在reduce 的setup中读取一个配置文件,我把这个配置文件作为资源上传到odps之后,是否需要在服务器也存一份该文件。

问答 2022-04-15 来自:开发者社区

有这样一个场景:输入数据是在MaxCompute(原ODPS)上存储的一个表,数据格式是id, kv_string(k1:v1,k2:v2,k3:v3.....),在前端触会通过点击触发发工作流,完成计算输出结果返回,这里的第一步就是根据前端传入的key的列表,从这个kv表中把数据取出来变成一个宽表。 现在的思路是这样的: step1: 根据前端传入的参数名称列表以及服务器上的参数对照表,完成建表; step2: 把数据插入到表里

有这样一个场景:输入数据是在MaxCompute(原ODPS)上存储的一个表,数据格式是id, kv_string(k1:v1,k2:v2,k3:v3.....),在前端触会通过点击触发发工作流,完成计算输出结果返回,这里的第一步就是根据前端传入的key的列表,从这个kv表中把数据取出来变成一个宽表。 现在的思路是这样的: step1: 根据前端传入的参数名称列表以及服务器上的参数对照表,完成.....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云服务器ECS

做技术先进、性能优异、稳如磐石的弹性计算!

+关注