创建标签逻辑表

如何查询业务数据,请参见查询并下载数据。通过逻辑表输入组件和业务数据库对应的输出组件构建同步任务,同步标签逻辑表至业务数据库。具体操作,请参见配置离线单条管道。基于标签逻辑表进行二次数据分析,包括数据建模或代码任务的研发。...

数据开发治理平台 DataWorks

大数据开发治理平台 DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎,为客户提供专业高效、安全可靠的一站式大数据开发与治理平台,...每天阿里巴巴集团内部有数万名数据/算法工程师正在使用DataWorks,承担集团99%数据业务构建。

实时数据API

实时数据业务流程。在实时数据业务场景中,最常见的链路是将实时采集的数据,通过实时计算初步清洗,实时写入数据至数据库,再对接BI工具实现数据的可视化分析。数据处理流程下图所示。实时数据业务痛点。处理实时数据业务的整个链路中,...

全域采集与增长分析Quick Tracking

全域采集与增长分析(Quick Tracking) 是阿里云推出的企业级流量统计分析产品,提供APP/小程序/H5/Web/IoT等数字...\n同时原始采集日志可以二次开发,可对接到数据加工平台、BI可视化平台和营销平台等,完成流量数据业务数据的融合和利用。

Dataphin补数据运行配置的位置,这几个选项有什么区别

概述 Dataphin补数据运行配置的位置,这几个选项有什么区别。详细信息 暂停运行(可能会阻断补数据进程):即暂停调度的任务生成的补数据实例...适用于当前节点被设置为暂停调度,在选中的补数据业务日期需要正常运行的场景。适用于 Dataphin&

准备数据源和计算源

在使用Dataphin前,您需要选择符合业务场景需求的数据库或数据仓库作为数据源,用于读取原始数据和写入数据建设过程中的数据;同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源,为数据的研发提供计算资源。准备数据源 ...

确定需求

本教程中以A公司的电商业务为例,梳理出业务数据框架下图所示。A公司的电商业务板块分为招商、供应链、营销和服务四个模块,每个板块的需求和数据应用都不同。您在构建数据仓库之前,首先需要明确构建数据仓库的业务板块和需要具体满足的...

亿海蓝-航运大数据的可视化案例

不同于轨迹数据,航线数据业务性更强,需要更丰富的存储和查询方式。DLA Ganos 满足了整合分析多种时空数据的需求。航海业务相对复杂,需要对数据做一些自定义的运算。DLA Ganos内置Spark集群,提供定制处理数据的计算引擎,节省了单独购买...

地域与可用区

一切服务“开通”即用,更好地赋能数据业务。目前GraphCompute, 在华东(上海、杭州)、华北(北京)、华南(深圳)、新加坡已正式开放,后续将陆续开通更多可用区,并在本文更新可用区的开通情况。可用区 GraphCompute 华东2(上海)已...

扩容

集群扩容当您的集群出现数据业务瓶颈时可以选择扩容操作,当前集群只支持水平扩容。首先进入集群管控页,点击集群管理 选择相应的集群> 点击右上角“扩容”按钮。在扩容详情页面,从新增资源下拉选项框选择需要增加的Broker数量。首先勾选...

什么是物联网数据分析

通过数据源配置,可管理设备数据业务数据和数据生命周期。数据资产 数据资产可通过数据服务、物标签、数据表等方式集中展示,方便您快速定位所需数据,进行下一步业务操作。数据服务:物联网平台的统一数据服务总线,可统一管理对外数据...

Dataphin即席查询中timestamp类型数据没有转换为对应...

产品名称 Dataphin 产品模块 即席查询 概述 描述即席查询中timestamp类型数据如何转换为对应的yyyy-MM-dd格式。问题描述 即席查询中timestamp类型数据如何转换为对应的yyyy-MM-dd 的格式?问题原因 NA 解决方案 使用from_unixtime()函数,...

离线集成概述

解决企业复杂大数据批处理难题,支持企业精细化运营、数据营销、智能推荐等大数据业务场景。离线集成功能底层基于Spark开发,支持提升Hadoop平台运行速度的应用场景。说明 如果您在使用该功能的过程中有任何疑问或问题,请使用钉钉搜索钉钉...

典型使用场景

Server/PostgreSQL/Oracle等OLTP业务数据库,业务App产生的日志数据,在OSS/Hadoop上的归档数据,以及来自Kafka/Flink等系统的流式数据。在库中对ODS层数据进行加工,形成CDM(Common Data Model)和ADS(Application Data Service)层。...

BackFill-给任务编排补数据

trueBackFillDatestring否补数据业务时间。指定时间补数据需要填写该参数。2022-01-14BackFillDateBeginstring否补数据开始业务时间。指定时间范围补数据需要填写该参数。2022-01-14BackFillDateEndstring否补数据结束业务时间。指定时间...

应用场景

物联网设备无时无刻不在产生海量的设备状态数据业务消息数据,这些数据有助于进行设备监控、业务分析预测和故障诊断。背景信息 设备将原始数据通过 MQTT 协议发送到物联网平台,经由物联网平台将数据转发到消息服务系统,继而通过流计算...

概述

随着大数据业务的不断扩展,新的数据使用场景在不断产生,MaxCompute计算框架也在不断的演化。MaxCompute原来主要面对内部特殊格式数据的强大计算能力,正一步步的开放给不同的外部数据。现阶段MaxCompute SQL处理的主要是以cfile列格式...

产品简介

适用场景如果您在大数据业务场景中遇到如下问题,可以通过阿里云大数据专家获取专属服务:受限于传统数据工作开展方式及组织管理模式,数字化转型中遇难到大数据各方面瓶颈;根据业务发展,难以从全局构建稳定的、变化的、集成的大数据体系...

可信计算服务

可信计算服务 C3S(Blockchain Confidential Computing Service)为链上应用提供链上链下数据交叉核验,保证链上流转数据可信扩展,并提供通用的、隐私保护的数据分析能力,支持多方业务数据融合和治理,适用于金融风控、数字物流等场景。

创建TiDB数据

创建TiDB数据源用于实现Dataphin能够读取TiDB的业务数据,及能够向TiDB写入数据。在引入TiDB的业务数据至Dataphin和将Dataphin的数据写入至TiDB的场景中,您需要先创建TiDB数据源。本文为您介绍如何创建TiDB类型的数据源。TiDB数据源类型...

创建KingbaseES数据

创建KingbaseES数据源用于实现Dataphin能够读取KingbaseES的业务数据,及能够向KingbaseES写入数据。在引入KingbaseES的业务数据至Dataphin和将Dataphin的数据写入至KingbaseES的场景中,您需要先创建KingbaseES数据源。本文为您介绍如何...

确定需求

本教程中以A公司的电商业务为例,梳理出业务数据框架下图所示。A公司的电商业务板块分为招商、供应链、营销和服务四个模块,每个板块的需求和数据应用都不同。您在构建数据仓库之前,首先需要明确构建数据仓库的业务板块和需要具体满足的...

创建GBase 8a数据

创建GBase 8a数据源用于实现Dataphin能够读取GBase 8a的业务数据,及能够向GBase 8a写入数据。在引入GBase 8a的业务数据至Dataphin和将Dataphin的数据写入至GBase 8a的场景中,您需要先创建GBase 8a数据源。本文为您介绍如何创建GBase 8a...

创建Golden DB数据

创建Golden DB数据源用于实现Dataphin能够读取Golden DB的业务数据,及能够向Golden DB写入数据。在引入Golden DB的业务数据至Dataphin和将Dataphin的数据写入至Golden DB的场景中,您需要先创建Golden DB数据源。本文为您介绍如何创建...

创建API数据

创建API数据源用于实现Dataphin读取API接口传递的数据。本文为您介绍如何创建API数据源。使用限制Dataphin仅支持超级管理员和项目管理员角色创建数据源。如何添加成员并授予项目管理员角色,请参见添加项目成员。操作步骤 请参见入口介绍,...

解决方案

解决方案帮助用户沉淀行业知识,快速完成行业支持的复制,提升数据资产上线的效率和质量,加速数据业务价值的转化。整体导入导出将工作组中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产创建解决...

创建Tablestore数据

创建Tablestore数据源用于实现Dataphin能够读取Tablestore的业务数据。在引入Tablestore的业务数据至Dataphin和将Dataphin的数据写入至Tablestore的场景中,您需要先完成Tablestore数据源的创建。本文为您介绍如何创建Tablestore类型的数据...

创建PolarDB数据

创建PolarDB数据源用于实现Dataphin能够读取PolarDB的业务数据,及能够向PolarDB写入数据。在引入PolarDB的业务数据至Dataphin和将Dataphin的数据写入至PolarDB的场景中,需要先创建PolarDB数据源。本文为您介绍如何创建PolarDB数据源。...

Quick BI电子表格的数据数据如何添加自动尾随的备注

问题描述 Quick BI电子表格的数据数据如何添加自动尾随的备注?解决方案 Quick BI电子表格的数据数据,自动尾随的备注;需要这个备注也是一个数据集,不能固定在某个单元格。适用于 Quick BI

创建Log Service数据

创建Log Service数据源用于实现Dataphin能够读取Log Service的业务数据。在引入Log Service的业务数据至Dataphin中进行数据开发的场景中,您需要先创建Log Service数据源。本文为您介绍如何创建Log Service类型的数据源。背景信息 Log ...

功能简介

解决方案帮助用户沉淀行业知识,快速完成行业支持的复制,提升数据资产上线的效率和质量,加速数据业务价值的转化。整体导入导出 将工作组中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产创建解决...

Spark计算引擎

Spark屏蔽掉了底层的基础组件,提供了简单的API、脚本以及控制台使用方式,开发者了解开源Spark的使用方式就可以进行大数据业务开发。0运维 用户只需通过 AnalyticDB MySQL Serverless Spark接口管理Spark作业,无需关心服务器配置以及...

Quick Audience数据研发模块的业务数据源无法创建

问题描述 Quick Audience数据研发模块的业务数据源无法创建,看不到业务数据源的创建按钮。问题原因 当前用户没有业务数据源的创建权限,所以看不到创建按钮入口。解决方案 现在只有“购买者”账号有创建业务数据源的权限,研发成员没有...

创建DataHub数据

创建DataHub数据源用于实现Dataphin能够读取DataHub的业务数据。在引入DataHub的业务数据至Dataphin中进行数据开发的场景中,您需要先创建DataHub数据源。本文为您介绍如何创建DataHub类型的数据源。背景信息 DataHub即阿里云流式数据服务...

数据迁移

本文为您介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据,如果您的数据存放在传统的关系型数据库且数据量庞大...

创建MongoDB数据

创建MongoDB数据源用于实现Dataphin能够读取MongoDB的业务数据。在引入MongoDB的业务数据至Dataphin中或将Dataphin数据导出至MongoDB的场景中,您需要先创建MongoDB数据源。本文为您介绍如何创建MongoDB类型的数据源。背景信息 如果您使用...

创建RocketMQ数据

创建RocketMQ数据源用于实现Dataphin能够读取RocketMQ的业务数据。在引入RocketMQ的业务数据至Dataphin中进行数据开发的场景中,您需要先创建RocketMQ数据源。本文为您介绍如何创建RocketMQ数据源。背景信息 RocketMQ即阿里云消息队列...

创建Vertica数据

创建Vertica数据源用于实现Dataphin能够读取Vertica的业务数据。在引入Vertica的业务数据至Dataphin和将Dataphin的数据写入至Vertica的场景中,您需要先创建Vertica数据源。本文为您介绍如何创建Vertica类型的数据源。背景信息 Vertica是一...

Hive概述

Hive是一个基于Hadoop的数据仓库框架,在大数据业务场景中,主要用来进行数据提取、转化和加载(ETL)以及元数据管理。背景信息 E-MapReduce(简称EMR)版本中,Hadoop、Hive版本和EMR集群的配套情况,请参见版本概述。Hive结构 名称 说明 ...

创建Kafka数据

创建Kafka数据源用于实现Dataphin能够读取Kafka的业务数据,及能够向Kafka写入数据。在引入Kafka的业务数据至Dataphin和将Dataphin的数据写入至Kafka的场景中,您需要先创建Kafka数据源。本文为您介绍如何创建Kafka数据源。背景信息 Kafka...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用