阿里云文档 2024-12-02

数据湖查询加速:利用高性能缓存提升查询性能

云原生数据仓库 AnalyticDB MySQL 版推出了湖存储加速(LakeCache)功能,能够将OSS中的热点文件缓存在NVMe SSD高性能存储介质上,提高OSS数据的读取效率。该功能主要适用于需要大量带宽,且数据重复读的场景,例如,多个分析人员需要查询同一份数据。本文主要介绍湖存储加速功能的优势、应用场景以及使用方法。

阿里云文档 2024-10-15

使用物化视图加速数据湖查询

StarRocks提供了开箱即用的数据湖查询功能,非常适用于对湖中的数据进行探查式查询分析。通过使用异步物化视图,您可以为数据湖中的报表和应用实现更高的并发,以及更好的性能。本文为您介绍如何使用StarRocks的异步物化视图来优化数据湖中的查询性能。

文章 2024-08-15 来自:开发者社区

阿里云EMR数据湖文件系统问题之JindoFS元数据查询和修改请求的问题如何解决

问题一:JindoFS如何处理元数据查询和修改请求? JindoFS如何处理元数据查询和修改请求? 参考回答: JindoFS的MetaService负责存储文件系统整个目录树的元数据,并服务于API调用过来的元数据查询和修改请求。MetaService调度和分配异步任务给多个MetaWorker,从而分摊压力并提高系统性能。这种设计使得JindoFS能够高效地...

阿里云文档 2024-08-10

如何使用DLF数据探索查询Iceberg表

本文为您介绍如何使用DLF数据探索查询Iceberg表。目前DLF数据探索可以直接支持Delta、Hudi、CSV、Parquet、JSON、ORC等格式的表;受限于Spark和Iceberg的底层设计,在DLF数据探索中查询Iceberg表需要指定特定的Catalog。且代码运行环境归属于用户,请勿进行违法操作。

阿里云文档 2024-08-02

通过Hologres加速查询OSS数据湖

基于阿里云数据湖构建(Data Lake Formation,DLF)和对象存储(Object Storage Service,OSS)推出的Hologres数据湖加速服务,提供了灵活的数据访问和分析能力以及高效的数据处理能力,显著加快了对OSS数据湖的查询和分析过程。

文章 2024-01-03 来自:开发者社区

【获奖名单公示】Hologres实时湖仓分析挑战赛

获奖名单公示: 以下为本次活动获奖名单,奖品将在春节后寄出,其他用户不符合参赛规则。 用户昵称 奖项 ...

【获奖名单公示】Hologres实时湖仓分析挑战赛
阿里云文档 2023-09-13

如何使用StarRocks的数据湖分析能力查询阿里云OSS_EMR on ECS_开源大数据平台 E-MapReduce(EMR)

本文为您介绍如何使用StarRocks的数据湖分析能力查询阿里云OSS。

问答 2023-06-04 来自:开发者社区

DataWorks这边创建了个数据湖集成 外部项目dlf,如何进去 直接查询数据?

DataWorks这边创建了个数据湖集成 外部项目dlf,如何进去 直接查询数据?

文章 2021-07-22 来自:开发者社区

数据湖实操讲解【 JindoTable 计算加速】第二十讲:Spark 对 OSS 上的 ORC 数据进行查询加速

本期导读 :【JindoTable 计算加速】第二十讲主题:Spark 对 OSS 上的 ORC 数据进行查询加速uid+JindoFS 对 OSS 上数据进行训练加速讲师:健身,阿里巴巴计算平台事业部 EMR 技术专家内容框架:ORC 简介JindoFS 列存加速性能对比演示直播回放链接:(20讲)https://developer.aliyun.com/live/247100一、ORC 简介....

数据湖实操讲解【 JindoTable 计算加速】第二十讲:Spark 对 OSS 上的 ORC 数据进行查询加速
文章 2021-07-21 来自:开发者社区

数据湖实操讲解【 JindoTable 计算加速】第十九讲:Spark 对 OSS 上的 Parquet 数据进行查询加速

本期导读 :【JindoTable 计算加速】第十九讲主题:Spark 对 OSS 上的 Parquet 数据进行查询加速uid+JindoFS 对 OSS 上数据进行训练加速讲师:流影,阿里巴巴计算平台事业部 EMR 技术专家内容框架:JindoFS 计算加速介绍使用 JindoFS 计算加速演示直播回放链接:(19讲)https://developer.aliyun.com/live/247....

数据湖实操讲解【 JindoTable 计算加速】第十九讲:Spark 对 OSS 上的 Parquet 数据进行查询加速

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐