文章 2023-09-16 来自:开发者社区

大数据Hadoop小文件问题与企业级解决方案

1 MapReduce性能优化现在大家已经掌握了MapReduce程序的开发步骤,注意了,针对MapReduce的案例我们并没有讲太多,主要是因为在实际工作中真正需要我们去写MapReduce代码的场景已经是凤毛麟角了,因为后面我们会学习一个大数据框架Hive,Hive支持SQL,这个Hive底层会把SQL转化为MapReduce执行,不需要 我们写一行代码,所以说工作中的大部分需求我们都使用S....

问答 2023-09-10 来自:开发者社区

大数据计算MaxCompute可以读取oss中del文件嘛?

问题1:有老师知道,大数据计算MaxCompute可以读取oss中del文件嘛?问题2:那样其他方法可以加载oss中del文件吗?

问答 2023-09-03 来自:开发者社区

大数据计算MaxCompute odps支持导出数据文件自定义文件名称吗?

大数据计算MaxCompute odps支持导出数据文件自定义文件名称吗?

问答 2023-08-20 来自:开发者社区

请教一下大数据计算MaxCompute,我按照官网教程用ODPS客户端添加jar包,也把jar包放?

问题1:请教一下大数据计算MaxCompute,我按照官网教程用ODPS客户端添加jar包,也把jar包放到lib文件夹下了,但是提示我文件不存在,是为什么呢?https://help.aliyun.com/zh/maxcompute/user-guide/resource-operations?spm=a2c4g.11186623.0.0.5be67171zRhkG2#section-533-....

问答 2023-08-20 来自:开发者社区

大数据计算MaxCompute 阿里云有自带的读取parquet 文件的功能么?

问题1:大数据计算MaxCompute 阿里云有自带的读取parquet 文件的功能么?问题2:国际版的有这个功能么?可以发个国际版的文档么

问答 2023-07-31 来自:开发者社区

大数据计算MaxCompute 中datawords可以支持导出开发的sql文件吗?

大数据计算MaxCompute 中datawords可以支持导出开发的sql文件吗?

问答 2023-07-30 来自:开发者社区

请问大数据计算MaxCompute csv文件中 部分行中存在带 一个双引号 的情况,就会出现图中?

请问大数据计算MaxCompute csv文件中 部分行中存在带 一个双引号 的情况,就会出现图中的行分隔问题,怎么解决呢?

问答 2023-07-30 来自:开发者社区

大数据计算MaxCompute事物表2.0的存储大小和小文件有人可以详细介绍下吗?比如我desc的到

大数据计算MaxCompute事物表2.0的存储大小和小文件有人可以详细介绍下吗?比如我desc的到的存储大小和,merge后的,snapshot,filenum都如何看具体的信息

问答 2023-07-25 来自:开发者社区

大数据计算MaxCompute java能否上传python文件?注册UDF

问题1:大数据计算MaxCompute java能否上传python文件?注册UDF问题2:是想用java上传一个python文件,注册注册Python UDF函数。不知道有没有案例

问答 2023-07-25 来自:开发者社区

大数据计算MaxCompute有没有什么办法让一个表或分区的数据文件碎片化?我想测试一下,查询数据下

问题1:大数据计算MaxCompute有没有什么办法让一个表或分区的数据文件碎片化?我想测试一下,查询数据下载,重现一下文件数量超出阀值出错的情况。问题2:不停的往一个表里面插记录是否会产生小文件

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxCompute更多文件相关

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注