文章 2024-07-18 来自:开发者社区

MaxCompute产品使用合集之使用pyodps读取数据表时,可以通过什么方法来加速读取效率

问题一:MaxCompute在计算sql任务花费时,根据帮助文档里面,我怎么匹配任务名称呀? MaxCompute在计算sql任务花费时,根据帮助文档里面,我怎么匹配任务名称呀? 参考回答: 在运维中心查一下任务id对应的任务名称,看下Information Schema.task_history里面的settings字段。SKYNET_NODENAME:节点名...

文章 2024-06-24 来自:开发者社区

MaxCompute产品使用问题之在同步表时,分区通常使用的是什么字段

问题一:大数据计算MaxCompute同步表的时候,分区一般使用的是什么字段呢? 大数据计算MaxCompute同步表的时候,分区一般使用的是什么字段呢? 参考回答: 常规分区一般不是业务日期么,同步时间也可以啊,如果离线那T-1日期比较多吧,但你如果回刷的话,同步时间是不是就不太合适了,像离线,今天凌晨同步,一般都是昨天的数据,所以分区就是20240225 ,...

MaxCompute产品使用问题之在同步表时,分区通常使用的是什么字段

基于阿里云MaxCompute搭建数据仓库(离线)

70 课时 |
981 人已学 |
免费

阿里云大数据工程师ACA认证(2023版)

21 课时 |
3769 人已学 |
免费

基于MaxCompute的热门话题分析

8 课时 |
628 人已学 |
免费
开发者课程背景图
文章 2024-06-24 来自:开发者社区

MaxCompute产品使用问题之使用Table 2.0的表时,如何加快查询速度

问题一:大数据计算MaxCompute把这个提高 应该在sql里 这么设置啊? 大数据计算MaxCompute把这个提高 应该在sql里 这么设置啊? 参考回答: 切分map阶段的数据量。set odps.stage.mapper.split.size=<256>; 关于本问题的更多回答可点击原文查看:https://develo...

文章 2024-06-23 来自:开发者社区

MaxCompute操作报错合集之如何实现查询不存在分区的表时能够报错

问题一:大数据计算MaxCompute有办法使查询不存在分区的sql报错吗? 大数据计算MaxCompute有办法使查询不存在分区的sql报错吗? 我们有的连表,其中一个表可能没有对应日期的分区,但是这种查询不报错,只是数据不对。比较不容易排查。 参考回答: 在大数据计算MaxCompute中,如果查询不存在的分区,系统会执行失败并返回报错。 当您在Ma...

MaxCompute操作报错合集之如何实现查询不存在分区的表时能够报错
文章 2024-06-08 来自:开发者社区

MaxCompute产品使用合集之离线同步到实时同步表时,数据应该如何处理

问题一:大数据计算MaxCompute如果离线同步 到实时同步表的话 ,这些数据应该怎么做呢? 大数据计算MaxCompute如果离线同步 到实时同步表的话 ,这些数据应该怎么做呢?我能否按照 数据的 created_at 来放进去呢? ...

MaxCompute产品使用合集之离线同步到实时同步表时,数据应该如何处理
问答 2022-04-15 来自:开发者社区

在使用MaxCompute进行数据加工时,insert into 某个表时,表中的字段值不仅仅是在源数据表中的某一字段值,需要是几个源数据表进行联合查询出来的,请问题这种问题如何处理?

在使用MaxCompute进行数据加工时,insert into 某个表时,表中的字段值不仅仅是在源数据表中的某一字段值,需要是几个源数据表进行联合查询出来的,请问题这种问题如何处理?如:商品表中的属性(properties)字段,它的值是要通过源数据表中的类目、类目属性、类目属性值 3张表联合查询才能得到。这种情况MaxCompute中的sql语句怎么写?

问答 2022-04-15 来自:开发者社区

需要加速查询大批量的 MaxCompute 表时应该怎么操作?

需要加速查询大批量的 MaxCompute 表时应该怎么操作?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注