阿里云文档 2026-05-27

使用MaxCompute联邦查询由Flink写入Paimon的MySQL数据-MaxCompute-阿里云

本文介绍基于Flink创建Paimon DLF Catalog,读取MySQL CDC数据并写入OSS,进一步将元数据同步到DLF,进而使用MaxCompute的external schema进行数据湖联邦查询。

阿里云文档 2026-05-27

通过DLF创建外部Schema联邦查询OSS数据-云原生大数据计算服务 MaxCompute-阿里云

本文介绍通过配置DLF,将数据从OSS抽取到DLF元数据中,并使用MaxCompute的external schema进行数据湖联邦查询。该方案可以方便地进行数据分析和处理,并保证数据的可靠性和安全性。

阿里云文档 2026-05-27

使用GET_SIGNED_URL_FROM_OSS生成预签名URL以下载或上传OSS对象-云原生大数据计算服务 MaxCompute-阿里云

GET_SIGNED_URL_FROM_OSS函数用于为对象存储(OSS)中的文件生成一个预签名URL。使用此URL可以在一定时间内通过HTTP协议直接上传(PUT)或下载(GET)文件,无需提供额外的访问凭证。

阿里云文档 2026-05-27

使用GET_DATA_FROM_OSS读取OSS对象二进制内容-云原生大数据计算服务 MaxCompute-阿里云

GET_DATA_FROM_OSS函数用于读取一个对象的部分或全部内容,并以二进制形式返回。

阿里云文档 2026-04-13

本方案通过阿里云OSS实现HDFS数据跨可用区冷备与快速恢复,保障业务连续性。

单可用区故障可能导致 HDFS 数据丢失及服务中断。本方案通过 OSS 跨可用区存储实现定期冷备,以便在故障发生时迅速启动新的集群并恢复数据,从而保障业务的连续性。

文章 2025-06-26 来自:开发者社区

OSS大数据分析集成:MaxCompute直读OSS外部表优化查询性能(减少数据迁移的ETL成本)

(1)数据存储与分析分离的痛点传统架构中,OSS作为廉价存储常与MaxCompute计算引擎分离,导致ETL迁移成本高企。某电商案例显示:每日300TB日志从OSS导入MaxCompute内部表,产生以下问题: 延迟:平均4.2小时数据同步窗口成本:每月额外支出$15,0...

OSS大数据分析集成:MaxCompute直读OSS外部表优化查询性能(减少数据迁移的ETL成本)
文章 2024-09-20 来自:开发者社区

oss数据同步maxcompute报错

报错信息 在阿里云中使用dataworks,同步oss数据到maxcompute过程中产生的报错 ErrorMessage: Code:[UnstructuredStorageReader-09], Description:[您配置的文件在读取时出现IO异常.]. - 流读取错误 : [bucket/###/###/###/###/2024-09-17/] - java.io.IOExcepti....

oss数据同步maxcompute报错
问答 2024-08-14 来自:开发者社区

大数据计算MaxCompute从hive表将数据以orc方式写入oss,然后mc再将这些数据load

大数据计算MaxCompute从hive表将数据以orc方式写入oss,然后mc再将这些数据load到oss外表,有相关的文档和方法吗?

问答 2024-07-24 来自:开发者社区

大数据计算MaxCompute创建的oss外表,string字段的大小还是和mc表的限制一样吗?

大数据计算MaxCompute创建的oss外表,string字段的大小还是和mc表的限制一样,默认不能超过8M吗?

文章 2024-07-17 来自:开发者社区

DataWorks操作报错合集之使用OSS读取CSV文件到ODPS时遇到报错,一般是什么导致的

问题一:dataworks连接FTP服务器连不上是什么原因? dataworks连接FTP服务器连不上是什么原因?{"commonInfo":{"regionCode":"cn-shanghai","projectId":402869,"datasourceName":"HHL_POC_FTP","resourceGroup":"S_res_group_379166158098...

DataWorks操作报错合集之使用OSS读取CSV文件到ODPS时遇到报错,一般是什么导致的

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxComputeoss相关内容

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注