阿里云文档 2026-01-12

调用GetDataQualityScanRunLog接口查询数据质量扫描运行日志-大数据开发治理平台 DataWorks-阿里云

查询指定数据质量监控任务实例的日志内容。

阿里云文档 2026-01-09

授权默认角色写数据到MaxCompute(跨账号投递)

MaxCompute投递任务(新版)运行时,需要将读取到的Logstore数据投递到MaxCompute表中,您可以授权MaxCompute投递任务(新版)扮演默认角色完成该操作。本文介绍在MaxCompute和日志服务Project不同账号时,如何对默认角色进行授权。

文章 2025-10-23 来自:开发者社区

【赵渝强老师】大数据日志采集引擎Flume

Apache Flume支持采集各类数据发送方产生的日志信息,并且可以将采集到的日志信息写到各种数据接收方。其核心是把数据从数据源(Source)收集过来,在将收集到的数据送到指定的目的地(Sink)。为了保证输送的过程一定成功,在送到目的地(Sink)之前,会先缓存数据(Channel),待数据真正到达目的地(Sink)后,Flume再删除自己缓存的数据。 一、 Apache...

【赵渝强老师】大数据日志采集引擎Flume
文章 2025-07-19 来自:开发者社区

大数据之路:阿里巴巴大数据实践——日志采集与数据同步

第1章 综述 数据采集层 Aplus.JS:Web端日志采集技术方案。UserTrack: APP端日志采集技术方案。TimeTunnel:DB增量数据传输及日志数据传输,支持流式计算和基于时间窗口的批量计算。DataX:阿里数据同步工具,直连异构数据库来抽取各种时间窗口的数据。 数据计算层 MaxCompute...

阿里云文档 2025-05-20

授权自定义角色写数据到MaxCompute(跨账号投递)

MaxCompute投递任务(新版)运行时,需要将从Logstore中读取的数据投递到MaxCompute的表中,您可以授权MaxCompute投递任务(新版)扮演自定义RAM角色完成该操作。本文介绍在MaxCompute和日志服务Project不同账号时,如何对自定义RAM角色进行授权。

阿里云文档 2025-05-12

日志查询

通过日志查询功能,您可以将StarRocks的前端节点(FE)和后端节点(BE)的原始日志输出到日志服务中,便于集中管理和分析。同时,您还可以查询实例中产生的日志信息,快速定位问题并优化系统性能。本文为您介绍如何在EMR Serverless StarRocks中开通、使用和关闭日志查询功能。

文章 2024-10-14 来自:开发者社区

大数据-136 - ClickHouse 集群 表引擎详解1 - 日志、Log、Memory、Merge

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(已更完) ...

大数据-136 - ClickHouse 集群 表引擎详解1 - 日志、Log、Memory、Merge
文章 2024-10-14 来自:开发者社区

大数据-70 Kafka 高级特性 物理存储 日志存储 日志清理: 日志删除与日志压缩

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(正在更新...

大数据-70 Kafka 高级特性 物理存储 日志存储 日志清理: 日志删除与日志压缩
文章 2024-10-14 来自:开发者社区

大数据-69 Kafka 高级特性 物理存储 实机查看分析 日志存储一篇详解

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(正在更新…) ...

大数据-69 Kafka 高级特性 物理存储 实机查看分析 日志存储一篇详解

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注