湖仓架构的相关内容

文章 2025-04-17 来自：开发者社区

网易游戏 x Apache Doris：湖仓一体架构演进之路

导读：网易游戏引入 Apache Doris 升级架构，先是替换 Elasticsearch、Hbase、Clickhouse 构建了实时数仓，而后基于 Apache Doris 和 Iceberg 构建了湖仓融合架构，实现架构的大幅简化及统一。目前，网易游戏 Apache Doris 集群超 20 个，总节点数百个，已对接内部 200+ 项目，日均查询量超过 1500 万，总存储数据量 PB....

文章 2025-03-24 来自：开发者社区

vivo 湖仓架构的性能提升之旅

作者：郭小龙 vivo互联网大数据高级研发工程师导读：本文整理自 vivo互联网大数据高级研发工程师郭小龙在 StarRocks 年度峰会上的分享，聚焦 vivo 大数据多维分析面临的挑战、StarRocks 落地方案及应用收益。在即席分析场景，StarRocks 使用占比达 70%，查询速度提升 3 倍&#x...

文章 2025-03-03 来自：开发者社区

小红书湖仓架构的跃迁之路

作者：李鹏霖(丁典)，小红书-研发工程师，StarRocks Contributor & Apache Impala Committer 本文整理自小红书工程师在 StarRocks 年度峰会上的分享，介绍了小红书自助分析平台中，StarRocks 与 Iceberg 结合后，如何实现极速湖仓分析架构。与原有架构相比，湖上分析架构的 P90 查询性能提升了...

文章 2025-03-01 来自：开发者社区

Flink+Paimon+Hologres，面向未来的一体化实时湖仓平台架构设计

摘要：本文整理自阿里云实时数仓 Hologres 负责人姜伟华老师在 Flink Forward Asia 2024 行业解决方案（二）专场中的分享。主要分为以下三个方面：实时数仓的发展历程从实时数仓到实时湖仓总结 01 实时数仓的发展历程以一个典型客户案例来回顾实时数仓的发展历程。...

文章 2025-02-13 来自：开发者社区

湖仓分析｜浙江霖梓基于 Doris + Paimon 打造实时/离线一体化湖仓架构

浙江霖梓是一家专注于深度学习和人工智能应用的金融创新企业，为企业提供精准经营决策，并基于大数据的风控能力的一系列高效便捷的金融服务产品。随着业务的持续扩展，大数据业务系统的局限逐渐暴露：报表系统计算缓慢、运维成本持续攀升、组件间的高度耦合导致架构稳定性较差等，严重影响了大数据系统产出效率，因此浙江霖梓引入 Doris+Paimon 重新构建了实时/离线一体化湖仓架构，为反欺诈策略、用户⾏为分析、....

文章 2025-02-12 来自：开发者社区

Flink+Paimon+Hologres，面向未来的一体化实时湖仓平台架构设计

摘要：本文整理自阿里云实时数仓 Hologres 负责人姜伟华老师在 Flink Forward Asia 2024 行业解决方案（二）专场中的分享。主要分为以下三个方面：实时数仓的发展历程从实时数仓到实时湖仓总结 01 某客户实时数仓架构的三代发展历程以一个典型客户案例来回顾实时数仓的发展历程。（1）第一代实时数仓：Lambda架构，离线实时分别计算自大数据...

文章 2024-10-19 来自：开发者社区

湖仓一体架构深度解析：构建企业级数据管理与分析的新基石

在当今数据驱动的时代，企业对于数据的管理与分析需求日益复杂。传统的数据仓库与数据湖架构虽各有优势，但单独使用时往往难以满足企业的全面需求。湖仓一体（Lakehouse）架构的出现，为企业提供了一种全新的数据管理与分析解决方案，它巧妙地将数据仓库的高性能与管理能力与数据湖的灵活性相结合，为企业级数据应用带来了革命性的变化。湖仓一体架构的关键特征及实现细节支持多种数据...

文章 2024-10-09 来自：开发者社区

云栖实录 | 开源大数据全面升级：Native 核心引擎、Serverless 化、湖仓架构引领云上大数据发展

演讲人：王峰｜阿里云智能集团研究员、开源大数据平台负责人李钰｜阿里云智能集团资深技术专家范振｜阿里云智能集团高级技术专家李劲松｜阿里云智能集团高级技术专家蒋乾｜七猫免费小说数仓负责人活动： 2024 云栖大会 - 开源大数据专场基于向量化的大数据计算技术在近几年呈现爆发趋势，Databricks 推出了向量化 Spark 引擎-Photon，Facebook 开源了 ...

文章 2024-09-27 来自：开发者社区

快手：从 Clickhouse 到 Apache Doris，实现湖仓分离向湖仓一体架构升级

作者｜快手大数据架构师李振炜、曾斯维、周思闽在当今这个数据洪流的信息时代下，数据已跃升为企业不可或缺的核心资产。深度挖掘并提炼数据内在价值，成为支撑企业战略决策的重要依据。在此背景下，快手建立了 OLAP 系统，该系统在快手应用极为广泛，每天承载近 10 亿的查询请求，为内外多个业务场景提供数据服务。具体场景包括： ToB 系统：商业化报表引擎、商业化 DMP、商业化磁力金牛、电商选品等...

问答 2024-08-20 来自：开发者社区

阿里云 EMR 如何推进客户湖仓一体架构的建设？

共有46条

< 1 2 3 4 5 >

跳转至： GO

更新时间 2025-04-18 16:54:04

本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。

架构您可能感兴趣

产品推荐

{"optioninfo":{"dynamic":"true","static":"true"},"simplifiedDisplay":"newEdition","newCard":[{"ifIcon":"img","icon":"SOFA","iconImg":"https://img.alicdn.com/tfs/TB1mMOfYYr1gK0jSZFDXXb9yVXa-200-200.png","contentLink":"https://www.aliyun.com/product/sofa","title":"金融分布式架构","des":"金融级云原生架构的应用平台，沉淀金融场景的最佳实践，提供服务构建、应用开发、部署发布、服务治理、监控运维、容灾高可用等全栈式解决方案，兼容Dubbo、Spring Cloud等微服务运行环境，助力客户各类应用轻松转型分布式架构","btn1":"立即开通","link1":"https://account.aliyun.com/login/login.htm?oauth_callback=https%3A%2F%2Fcommon-buy.aliyun.com%3Fspm%3D5176.cnsofa.0.0.8eea4f1aTNjRE4%26commodityCode%3Dsofa_cas_public_cn","btn2":"管理控制台","link2":"https://account.aliyun.com/login/login.htm?oauth_callback=https%3A%2F%2Fsofa.console.aliyun.com%2F%3Fspm%3D5176.cnsofa.0.0.8eea4f1aTNjRE4","btn3":"产品文档","link3":"https://help.aliyun.com/document_detail/131841.html?spm=5176.cnsofa.0.0.8eea4f1aTNjRE4","infoGroup":[{"infoName":"优惠活动","infoContent":{"firstContentName":"免费体验","firstContentLink":"https://account.aliyun.com/login/login.htm?oauth_callback=https%3A%2F%2Fsofa.console.aliyun.com%2F%3FSOFAStackDemoCenter%3Dtrue","lastContentName":"免费申请","lastContentLink":"https://account.aliyun.com/login/login.htm?oauth_callback=https%3A%2F%2Fsofa.console.aliyun.com%2F#/component-center"}},{"infoName":"核心优势","infoContent":{"firstContentName":"稳定可靠","firstContentLink":"https://www.aliyun.com/product/sofa","lastContentName":"开源生态","lastContentLink":"https://www.aliyun.com/product/sofa"}}]}],"card":[{"link":"#","icon":"https://img.alicdn.com/tfs/TB1afahQpXXXXaAapXXXXXXXXXX-114-114.png","title":"云服务器ECS","des":"云服务器（Elastic Compute Service，简称 ECS）是一种简单高效、处理能力可弹性伸缩的计算服务，帮助您快速构建更稳定、安全的应用，提升运维效率，降低 IT 成本，使您更专注于核心业务。","btn1":"FPGA云服务器","link1":"#","btn2":"GPU云服务器","link2":"#","tip":"新一代云服务器N5 （Xeon® (Skylake)处理器）上线！<a href=\"#\" target=\"_blank\">立即申请</a>"}],"search":[{"txt":"云数据库","link":"#"}],"infoCard":[{"bannerTitle":"容器服务 ACK","bannerUrl":"https://sucai-material-online.oss-cn-hangzhou.aliyuncs.com/image/hytxyyzq.jpg?Expires=1601273745&OSSAccessKeyId=ZWQG8meWkF3hYIf0&Signature=4DqSTctVr1IizPxE5pyjvd94cGc%3D&x-oss-process=image%2Fresize%2Cw_1072%2Fquality%2CQ_80","bannerContent":"容器服务 Kubernetes 版（简称 ACK）提供高性能可伸缩的容器应用管理能力，支持企业级容器化应用的  全生命周期管理。整合阿里云虚拟化、存储、网络和安全能力，打造云端最佳容器化应用运行环境。","liveButtonName":"立即购买","liveButtonLink":"https://www.aliyun.com/product/kubernetes","homePageName":"管理控制台","homePageLink":"https://cs.console.aliyun.com/index2#/k8s/cluster/list","contentTitle":"相关推荐","linkGroup":[{"linkContent":"企业版低至85折","linkTo":"立即抢购","link":"https://common-buy.aliyun.com/?spm=5176.181001.1396228.1.334760dfEMZUnP&commodityCode=acr_ee_public_cn&regionId=cn-beijing#/buy"},{"link":"https://help.aliyun.com/learn/learningpath/cs.html","linkContent":"学习更多容器服务内容","linkTo":"马上进入"},{"link":"https://cloud.video.taobao.com/play/u/2554819776/p/1/e/6/t/1/50197975.mp4","linkContent":"查看关于容器服务视频","linkTo":"立即观看"}]}],"title":{"mainTitle":"镜像仓库","subtitle":"容器服务 Kubernetes 版（简称 ACK）提供高性能可伸缩的容器应用管理能力，支持企业级容器化应用的  全生命周期管理。整合阿里云虚拟化、存储、网络和安全能力，打造云端最佳容器化应用运行环境。  业内领先：Gartner竞争格局国内唯一入选，Forrester报告国内排名第一。","linkUrl":"https://www.aliyun.com/product/kubernetes","btnText":"查看详情"},"visual":{"topbg":"https://img.alicdn.com/tfs/TB1Z6eJXrY1gK0jSZTEXXXDQVXa-108-108.png","icon":"aliyun-icon-play","textColor":"light"},"dataList":[{"summary":"MaxCompute跨项目迁移","author":"为您介绍如何配置相同区域下不同的MaxCompute项目，以及如何实现数据迁移","linksUrl":"https://help.aliyun.com/document_detail/123194.html"},{"summary":"MaxCompute数据迁移至OTS","author":"为您介绍如何将MaxCompute数据迁移至表格存储OTS（Table Store）","linksUrl":"https://help.aliyun.com/document_detail/127236.html"},{"summary":"MaxCompute数据迁移至OSS","author":"为您介绍如何使用DataWorks的数据同步功能将MaxCompute数据迁移至对象存储OSS（Object Storage Service）","linksUrl":"https://help.aliyun.com/document_detail/128595.html"}],"sceneCard":[{"title":"云计算试飞员老蒋开课啦！第一期：电商网站搭建","des":"这是一段副标介绍，这是一段副标介绍。这是一段副标介绍，这是一段副标介绍。这是一段副标介绍，这是一段副标介绍。这是一段副标介绍，这是一段副标介绍。","btn":"立即观看","link":"#","image":"https://"}],"txt":[{"title":"适用场景","scenariosone":[{"txtone":"小型电商：支持访问50万PV,一段场景方案的介绍。","txttwo":"产品推荐","product":[{"name":"ECS 2核4G 40G数据盘 5M带宽","link":"#"}]}]}]}