阿里云文档 2025-02-27

使用Location托管将数据湖OSS中的数据托管到DLF中

Location托管可以将数据湖OSS中的存储数据托管到数据湖构建(DLF)中进行管理和分析,在托管Location后将可以为您提供存储概览,生命周期管理介绍,数据表-数据概况(如数据访问频次,数据最后更新时间等),以及存储权限等数据湖管理能力。

阿里云文档 2024-12-17

如何访问OSS-HDFS数据

Hologres从V1.3.26版本开始,支持读写存储于OSS-HDFS上的数据。本文为您介绍基于DLF访问OSS-HDFS数据湖数据的使用方法。

阿里云文档 2024-11-13

什么是数据目录Catalog

数据目录(Catalog)是数据湖构建(Data Lake Formation)的元数据最上层实体,它可以包含多个数据库。本文为您介绍数据目录(Catalog)的基本操作。

阿里云文档 2024-08-12

创建数据湖数据目录

ALIYUN::DLF::Catalog类型用于创建数据湖数据目录。

文章 2023-11-03 来自:开发者社区

什么是数据管理,数据治理,数据中心,数据中台,数据湖?

大家好,我是独孤风,大数据流动的作者。最近几个概念频繁出现在大家的视野内。什么是数据管理,数据治理,数据中心,数据中台,数据湖?他们之间又有怎么样的区别和联系呢?这几个概念常常让人混淆,今天我们就来详细解析一下。一、数据管理数据管理是指组织对其整个数据生命周期进行的规划、执行和控制,以期最大化数据的价值。它涵盖了从数据采集、存储、处理到最终使用等全部过程。良好的数据管理需要进行全面的战略规划,包....

什么是数据管理,数据治理,数据中心,数据中台,数据湖?
文章 2023-05-25 来自:开发者社区

【数据架构】数据湖与数据仓库之间的五大差异

根据Google的说法,对“大数据”的兴趣已经持续了好几年,而且在过去几年里真正的兴起。这篇文章的目的是为了帮助突出数据湖泊和数据仓库之间的差异,帮助您就如何管理数据做出明智的决定。我们这些数据和分析从业者当然听过这个词,当我们开始与客户讨论大数据解决方案时,谈话自然转向了对数据湖的讨论。但是,我经常发现客户要么没有听说过这个词,要么没有很好地理解它的含义。数据仓库维基百科,将数据仓库定义为:“....

【数据架构】数据湖与数据仓库之间的五大差异
文章 2023-05-23 来自:开发者社区

「数据战略」数据驱动企业和DataOps :数据仓库与数据湖:入门

第1章和第2章介绍了数据驱动组织的概念,并在大数据计划的背景下定义了数据操作的概念。现在,是时候退一步,探索一些其他基本但重要的概念了。在这一点上,我们最重要的任务之一是清楚地描述数据仓库和数据湖之间的区别。当我谈论自助服务数据时,不可避免地会出现问题。数据湖和数据仓库的区别是什么?我需要在两者之间做出选择还是两者都需要?在数据仓库和数据湖之间建立关系的当前最佳实践是什么?本章回答了这些问题以及....

「数据战略」数据驱动企业和DataOps :数据仓库与数据湖:入门
文章 2023-05-23 来自:开发者社区

【数据架构】数据湖101:概述

数据湖是非结构化和结构化数据池,按原样存储,没有特定的目的,可以建立在多种技术上,如Hadoop,NoSQL,Amazon Simple Storage Service,关系数据库或各种组合根据一份名为“什么是数据湖”的白皮书,为什么它变得流行?Data Lake允许多点采集和多个数据访问点。Pentaho公司的创始人詹姆斯·迪克森(James Dixon)在2010年创造了“数据湖”(Data....

【数据架构】数据湖101:概述
文章 2022-12-16 来自:开发者社区

谈谈数据虚拟化在数据湖中的作用

    当组织向“所有用户”开放数据湖时,这会给数据湖及其支持基础设施增加相当大的复杂性。当来自不同部门的多个用户访问数据时,公司需要数据治理、安全性和可靠的方法来帮助这些不同的个人方便地找到他们需要的数据。这些都是数据湖架构师经常遇到的重要挑战。数据湖项目可能因为缺乏治理、安全性和易访问性导致失败,而这些都是所有用户从数据湖中受益所必需的。    目前,....

谈谈数据虚拟化在数据湖中的作用
文章 2022-12-16 来自:开发者社区

谈谈如何构建现代数据体系架构(数据湖+数据仓库)

   序言    如何构建当前企业数据体系架构呢?其实与许多其他技术一样,它实际上取决于企业要实现目标。以下特征通常与数据体系架构相关:    •来自内部系统、云计算系统的数据,以及来自合作伙伴和第三方的外部数据    •不同数据源和多结构化格式的数据    •流媒体实时数据,批量加载,或两者的结....

谈谈如何构建现代数据体系架构(数据湖+数据仓库)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐