问答 2023-04-30 来自:开发者社区

能帮忙看个MaxCompute问题吗?我用这个链接里面的UDTF解析JSON

能帮忙看个MaxCompute问题吗?我用这个链接里面的UDTF解析JSON https://developer.aliyun.com/article/627758 在IDEA ODPS CMD 中用这种方式使用是可以正常输出的: select get_json_udtf('json串') 但是在MC调度任务里面读取表字段,报如下错: json.get_json_udtf_quick_acti.....

文章 2023-04-22 来自:开发者社区

Python 大数据量文本文件高效解析方案代码实现

大数据量文本文件高效解析方案代码实现测试环境Python 3.6.2Win 10 内存 8G,CPU I5 1.6 GHz背景描述这个作品来源于一个日志解析工具的开发,这个开发过程中遇到的一个痛点,就是日志文件多,日志数据量大,解析耗时长。在这种情况下,寻思一种高效解析数据解析方案。解决方案描述1、采用多线程读取文件2、采用按块读取文件替代按行读取文件由于日志文件都是文本文件,需要读取其中每一行....

文章 2023-04-12 来自:开发者社区

《MaxCompute技术公开课第四季 之 MaxCompute数据安全管理解析》电子版地址

《MaxCompute技术公开课第四季 之 MaxCompute数据安全管理解析》MaxCompute技术公开课第四季 之 MaxCompute数据安全管理解析 电子版下载地址: https://developer.aliyun.com/ebook/3627 电子书:

《MaxCompute技术公开课第四季 之 MaxCompute数据安全管理解析》电子版地址
问答 2023-02-27 来自:开发者社区

请问有解析maxcompute sql生成sql语法树的包吗?

请问有解析maxcompute sql生成sql语法树的包吗?

问答 2022-12-21 来自:开发者社区

请问官网推荐的maxcompute Ip解析是什么?

请问官网推荐的maxcompute Ip解析是什么?

文章 2022-12-14 来自:开发者社区

pandas+odps实现批量化表信息解析

首先是大致思路,如果是数值类型,则当做度量的数据,而如果是日期类型则计算月维度下的分组情况,如果是其他类型则默认为object;先计算缺失值和去重值,如果枚举值等于1个,则为唯一值,不参与计算,不超过三个,则认为其为维度字段,非数值类型的只计算五个枚举值,缺失值和量级;数值类型则当做度量参与到后续分组汇总计算。汇总计算主要会集中在有维度,无维度以及日期为月上,求最大值,最小值,中位数,平均数,方....

pandas+odps实现批量化表信息解析
问答 2022-12-02 来自:开发者社区

MaxCompute用科学计数法表示的数字为什么被解析成正常值?

MaxCompute用科学计数法表示的数字为什么被解析成正常值?

文章 2022-11-06 来自:开发者社区

一文解析大数据的JOIN

本文大部分理论和问题都从maxcomputer中得出,不同的计算引擎底层结构不同最后结果可能稍微不同,这一点需要注意,本文应该可以让你不再苦恼各种join,或者更加苦恼join。老生常谈的大小表问题和传统sql语句类比,maxcomputer下的左右连接很奇怪,在官方文档中写着,碰到大小表问题,需要将大表放左边,小表放右边,和我们所理解的大小表问题的处理方式正好相反。为了验证这一原因,我用一份两....

一文解析大数据的JOIN
问答 2022-09-02 来自:开发者社区

麻烦问下,durid能解析odps sql么

麻烦问下,durid能解析odps sql么

问答 2022-07-20 来自:开发者社区

mongdb导入maxcompute 如果我想解析这几个字段 那我这块咋配置呀 因为这样的mongd

mongdb导入maxcompute 如果我想解析这几个字段 那我这块咋配置呀 因为这样的mongdb里面数据json有数组 那这样一条数据导入到odps中对应几条数据呀

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注