
【数据湖架构】Azure Data Lake数据湖指南(下)
我如何管理对我的数据的访问?#ADLS Gen2 支持结合 RBAC 和 ACL 来管理数据访问的访问控制模型。您可以在此处找到有关访问控制的更多信息。除了使用 RBAC 和 ACL 使用 AAD 身份管理访问之外,ADLS Gen2 还支持使用 SAS 令牌和共享密钥来管理对 Gen2 帐户中数据...

【数据湖架构】Azure Data Lake数据湖指南(上)
数据湖漫游指南文件大小和文件数文件格式分区方案使用查询加速我如何管理对我的数据的访问?我选择什么数据格式?如何管理我的数据湖成本?如何监控我的数据湖?ADLS Gen2 何时是您数据湖的正确选择?设计数据湖的关键考虑因素术语组织和管理数据湖中的数据我想要集中式还是联合式数据湖实施?如何组织我的数据?...

【数据湖】在 Azure Data Lake Storage gen2 上构建数据湖
介绍一开始,规划数据湖似乎是一项艰巨的任务——决定如何最好地构建数据湖、选择哪种文件格式、是拥有多个数据湖还是只有一个数据湖、如何保护和管理数据湖。并非所有这些都需要在第一天回答,有些可能通过反复试验来确定。构建数据湖没有明确的指南,每个场景在摄取、处理、消费和治理方面都是独一无二的。在之前的博客中...

【数据湖】Azure 数据湖分析(Azure Data Lake Analytics )概述
在本文中,我们将探索 Azure 数据湖分析并使用 U-SQL 查询数据。Azure 数据湖分析 (ADLA) 简介Microsoft Azure 平台支持 Hadoop、HDInsight、数据湖等大数据。通常,传统数据仓库存储来自各种数据源的数据,将数据转换为单一格式并进行分析以做出决策。开发人...

【数据湖架构】Hitchhiker的Azure Data Lake数据湖指南
数据湖漫游指南文件大小和文件数文件格式分区方案使用查询加速我如何管理对我的数据的访问?我选择什么数据格式?如何管理我的数据湖成本?如何监控我的数据湖?ADLS Gen2 何时是您数据湖的正确选择?设计数据湖的关键考虑因素术语组织和管理数据湖中的数据我想要集中式还是联合式数据湖实施?如何组织我的数据?...

谈谈如何从数据湖(Data Lake)架构转向数据网格(Data Mesh)架构
以上思路的主要转变是将域数据产品视为首要关注点,将数据湖工具和管道视为次之关注点。这将当前的架构模式从集中式数据湖转变为可以很好地协同工作的数据产品生态系统,即数据网格。同样的原则也适用于用于业务报告和可视化的数据仓库。它只是网格上的一个节点,并且可能位于网格的面向消费者的边缘上。尽管数据网格实践被...

Delta Lake 数据湖基础介绍(商业版)| 学习笔记
开发者学堂课程【Databricks数据洞察公开课:Delta Lake 数据湖基础介绍(商业版)】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/1058/detail/15563Delta Lake...

基于 Delta Lake 构建数据湖仓体系
导读:今天很高兴能与大家分享如何通过 Delta Lake 构建湖仓架构。全文将围绕以下四个部分展开:Delta Lake 的基本概念和发展历程,以及 2.0 版本的关键特性Delta Lake 的内核解析以及关键技术围绕 Delta Lake 湖格式的生态建设Delta Lake 在数仓领域的经典...
相较于数据仓库与数据湖,Delta Lake的特点是什么?
相较于数据仓库与数据湖,Delta Lake的特点是什么?

初探数据湖(Data Lake),到底有什么用?让我们来一窥究竟...
文章目录一、前言二、现代数据架构三、数据湖架构参考数据湖架构-流程数据湖架构-集成企业数据湖架构数据湖最核心的能力四、数据湖的作用1、数据集成能力(数据接入)2、数据存储3、数据搜索4、数据治理5、数据质量6、安全管控7、自助数据发现五、数据湖与数据仓库的区别六、数据湖成熟度的划分七、数据湖的优势一...
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。