通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark了解数据查询和分析的性能表现
TPC-DS作为大数据行业中最权威且被广泛认可的基准测试标准，用于衡量大规模数据处理系统的性能与效率的关键指标。阿里云EMR是第一个通过认证的可运行TPC-DS 100 TB的大数据系统。本文介绍如何在EMR集群环境下，充分利用OSS-HDFS服务的优势，成功执行TPC-DS Benchmark的99个SQL查询，并通过一系列优化策略实现更优的性能体验。
使用strmvol存储卷优化OSS小文件读取性能
在容器化场景中，传统方案常采用基于FUSE的文件系统（如ossfs）挂载对象存储数据。但对于小文件读取密集型场景（例如AI训练集加载、时序日志分析等需要快速遍历百万级小文件的业务场景），传统方案难以满足高吞吐与低延迟需求。此时，推荐采用虚拟块设备方案，通过strmvol存储卷直接挂载对象存储数据，优化小文件读取性能。
优化ossfs元数据缓存以减少OSS请求并提升挂载点性能-对象存储-阿里云
使用ossfs 2.0与OSS（对象存储）交互时，合理优化发往OSS服务端的元数据请求量，不仅能减少OSS请求以节省服务调用成本，还能提升系统并发处理能力，同时改善挂载点的读写性能。
OSS Connector在AI/ML数据集处理中的性能表现
在进行大规模机器学习或深度学习项目时，数据的高效加载与处理是提升整体训练效率的关键因素之一。本文通过对比分析在使用OSS内网域名与启用OSS加速器的情况下，不同数据集构建方法（OssIterableDataset、OssMapDataset、结合Ossfs和ImageFolder）的性能差异，旨在为用户提供数据访问策略的优化指南。
部署冷热启动没自带的快，还有担心又没性能问题，s命令build可以推到oss吗？类似fun。
部署冷热启动没自带的快，还有担心又没性能问题，s命令build可以推到oss吗？类似fun。
Greenplum insert的性能(单步\批量\copy) - 暨推荐使用gpfdist、阿里云oss外部表并行导入
标签 PostgreSQL , Greenplum , HybridDB for PostgreSQL , insert , copy , 外部表 , oss , gpfdist 背景 Greenplum是一款MPP数据库产品，优势是优良的OLAP性能，支持多节点并行计算，实现PB级数据量的实时分析。 除了分析能力，数据写入吞吐也是Greenplum的重要指标，Greenplum支持从mas...
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
对象存储OSS
对象存储 OSS 是一款安全、稳定、高性价比、高性能的云存储服务，可以帮助各行业的客户在互联网应用、大数据分析、机器学习、数据归档等各种使用场景存储任意数量的数据，以及进行任意位置的访问，同时通过丰富的数据处理能力更便捷地使用数据。
+关注