阿里云文档 2025-05-14

StarRoks如何通过DataWorks将日志数据与用户数据同步至SatrRocks数据源。

本教程以MySQL中的用户基本信息ods_user_info_d表和OSS中的网站访问日志数据user_log.txt文件为例,通过数据集成离线同步任务分别同步至StarRocks的ods_user_info_d_starrocks、ods_raw_log_d_starrocks表。旨在介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据同步操作。

阿里云文档 2024-08-02

通过数据同步功能将SLS数据同步至湖仓版

SLS同步链路支持从指定时间位点将日志服务LogStore中的数据实时同步至云原生数据仓库 AnalyticDB MySQL 版集群,以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源,新建SLS同步链路并启动任务,以及数据同步后如何进行数据分析和数据源管理。

问答 2024-07-23 来自:开发者社区

Dataworks 离线数据同步,从 odps 同步到 sls,是否支持sls的日志时间配置设置?

Dataworks 离线数据同步,从 odps 同步到 sls,是否支持sls的日志时间配置设置?

阿里云文档 2024-07-02

SLS日志数据实时同步到adb数仓

通过AnalyticDB for MySQL的数据同步功能,您可以将SLS中指定时间点之后产生的数据实时同步至基础版或数仓版集群,以满足日志数据实时分析的需求。

阿里云文档 2024-07-02

SLS日志数据实时同步到adb湖仓

通过数据同步功能,您可以将SLS中指定时间点之后产生的数据实时同步至云原生数据仓库 AnalyticDB MySQL 版集群,以满足日志数据实时分析的需求。

问答 2024-07-02 来自:开发者社区

用FlinkCDC 做MySQL数据同步速度不高,观察日志发现耗时在了Finished?

用FlinkCDC 做MySQL数据同步速度不高,观察日志发现耗时在了Finished reading from splits到Finished reading split(s)之间,有大佬知道如何优化这个耗时吗?

问答 2024-06-05 来自:开发者社区

大数据计算MaxCompute有没有那种日志表可以直接看到每天数据同步采集的时候?

大数据计算MaxCompute有没有那种日志表可以直接看到每天数据同步采集的时候,插入的表名称,插入时间,插入数据条数,像元数据那样的一张表?

问答 2024-06-02 来自:开发者社区

DataWorks在离线数据同步任务中通过脚本模式配置了并发数,在执行日志中看为什么没有生效?

DataWorks在离线数据同步任务中通过脚本模式配置了并发数,在执行日志中看为什么没有生效?

问答 2024-02-06 来自:开发者社区

要把Oracle的日志型数据同步到Clickhouse ,flinkCDC支持么?

要把Oracle的日志型数据同步到Clickhouse 需要满足实时性、全量和增量同步,flinkCDC支持么?

阿里云文档 2024-01-02

查询分析与流处理两种场景下的数据同步后的时间差异问题

您在使用阿里云日志服务(SLS)查询分析和和流处理时,难免会碰到数据口径差异,您可以使用两种时间戳(__time__和__receive_time__)解决。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云日志服务SLS

SLS是一站式云原生可观测性数据平台,一站式提供数据采集、加工、查询与分析、可视化等功能。日常更新产品最新动态,最佳实践以及技术大咖的观点和经验。

+关注